Skip to content

B
Blazer

MaxKey单点登录官方 / Blazer

通知 2
Star 0
Fork 0
B
Blazer

前往新版Gitcode，体验更适合开发者的 AI 搜索 >>

提交 78591909 编写于 作者: MaxKey单点登录官方's avatar MaxKey单点登录官方
浏览文件
操作

RM

上级 1bbba81c
隐藏空白更改
内联 并排
Showing with 12 addition and 10 deletion
README.md
浏览文件 @ 78591909
...@@ -11,12 +11,17 @@ Blazer意为**传播者**，主要实现不同数据库之间的数据同步， ...@@ -11,12 +11,17 @@ Blazer意为**传播者**，主要实现不同数据库之间的数据同步，
5. 目前支持数据有mysql/MariaDB,Greenplum,Oracle,DB2,PostgreSQL; 5. 目前支持数据有mysql/MariaDB,Greenplum,Oracle,DB2,PostgreSQL;
6. 支持JDK支持平台，JDK1.8+
------------ ------------
项目基于Java Spring Framework框架，简化了系统的配置，引入"管道"（PipeLine）的概念，一个管道包含多个任务，任务可以是数据同步、导入、导出或者表结构的导出。 项目基于Java Spring Framework框架，简化了系统的配置，引入"管道"（PipeLine）的概念，一个管道包含多个任务，任务可以是数据同步、导入、导出或者表结构的导出。
在不同的XML中引入不同管道任务，实现不同的功能，其中pipeLine.xml描述管道的功能，需要根据需求进行定义，可以基于以下的命令内容copy出不同脚本功能。 在不同的XML中引入不同管道任务，实现不同的功能，其中pipeLine.xml描述管道的功能，需要根据需求进行定义，可以基于以下的命令内容copy出不同脚本功能,传入不同的"管道"实现不同的功能。
------------
#### 脚本
PipeLineRunner.bat PipeLineRunner.bat
````bash ````bash
@echo off @echo off
...@@ -117,8 +122,8 @@ ${JAVA_EXEC} ${JAVA_OPTS} -classpath ${JAVA_CLASSPATH} ${JAVA_MAINCLASS} --confi ...@@ -117,8 +122,8 @@ ${JAVA_EXEC} ${JAVA_OPTS} -classpath ${JAVA_CLASSPATH} ${JAVA_MAINCLASS} --confi
echo run finished echo run finished
``` ```
#### "管道"（PipeLine）
###### 实现Oracle到greenplum数据同步pipeLine ###### 1、实现Oracle到greenplum数据同步pipeLine
```xml ```xml
<?xml version="1.0" encoding="UTF-8"?> <?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans" <beans xmlns="http://www.springframework.org/schema/beans"
...@@ -132,7 +137,6 @@ echo run finished ...@@ -132,7 +137,6 @@ echo run finished
http://www.springframework.org/schema/context/spring-context.xsd http://www.springframework.org/schema/context/spring-context.xsd
http://www.springframework.org/schema/util http://www.springframework.org/schema/util
http://www.springframework.org/schema/util/spring-util.xsd"> http://www.springframework.org/schema/util/spring-util.xsd">
<!-- Application properties configs 应用程序属性配置文件--> <!-- Application properties configs 应用程序属性配置文件-->
<bean id="propertySourcesPlaceholderConfigurer" class="org.springframework.context.support.PropertySourcesPlaceholderConfigurer"> <bean id="propertySourcesPlaceholderConfigurer" class="org.springframework.context.support.PropertySourcesPlaceholderConfigurer">
<property name="locations"><list> <property name="locations"><list>
...@@ -183,7 +187,7 @@ echo run finished ...@@ -183,7 +187,7 @@ echo run finished
</util:list> </util:list>
</beans> </beans>
``` ```
###### 数据库数据导出到文件(csv,xlsx,xls)pipeLine ###### 2、数据库数据导出到文件(csv,xlsx,xls)pipeLine
```xml ```xml
<?xml version="1.0" encoding="UTF-8"?> <?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans" <beans xmlns="http://www.springframework.org/schema/beans"
...@@ -197,7 +201,6 @@ echo run finished ...@@ -197,7 +201,6 @@ echo run finished
http://www.springframework.org/schema/context/spring-context.xsd http://www.springframework.org/schema/context/spring-context.xsd
http://www.springframework.org/schema/util http://www.springframework.org/schema/util
http://www.springframework.org/schema/util/spring-util.xsd"> http://www.springframework.org/schema/util/spring-util.xsd">
<!-- Application properties configs 应用程序属性配置文件--> <!-- Application properties configs 应用程序属性配置文件-->
<bean id="propertySourcesPlaceholderConfigurer" class="org.springframework.context.support.PropertySourcesPlaceholderConfigurer"> <bean id="propertySourcesPlaceholderConfigurer" class="org.springframework.context.support.PropertySourcesPlaceholderConfigurer">
<property name="locations"><list> <property name="locations"><list>
...@@ -266,7 +269,7 @@ echo run finished ...@@ -266,7 +269,7 @@ echo run finished
</util:list> </util:list>
</beans> </beans>
``` ```
###### 数据文件导入到数据库 pipeLine ###### 3、数据文件导入到数据库 pipeLine
```xml ```xml
<?xml version="1.0" encoding="UTF-8"?> <?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans" <beans xmlns="http://www.springframework.org/schema/beans"
...@@ -371,7 +374,7 @@ echo run finished ...@@ -371,7 +374,7 @@ echo run finished
</util:list> </util:list>
</beans> </beans>
``` ```
###### 数据表结构导出成制定数据库DDL pipeLine ###### 4、数据表结构导出特定数据库DDL pipeLine
```xml ```xml
<?xml version="1.0" encoding="UTF-8"?> <?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans" <beans xmlns="http://www.springframework.org/schema/beans"
...@@ -385,7 +388,7 @@ echo run finished ...@@ -385,7 +388,7 @@ echo run finished
http://www.springframework.org/schema/context/spring-context.xsd http://www.springframework.org/schema/context/spring-context.xsd
http://www.springframework.org/schema/util http://www.springframework.org/schema/util
http://www.springframework.org/schema/util/spring-util.xsd"> http://www.springframework.org/schema/util/spring-util.xsd">
<!-- Application properties configs 应用程序属性配置文件--> <!-- Application properties configs 应用程序属性配置文件-->
<bean id="propertySourcesPlaceholderConfigurer" class="org.springframework.context.support.PropertySourcesPlaceholderConfigurer"> <bean id="propertySourcesPlaceholderConfigurer" class="org.springframework.context.support.PropertySourcesPlaceholderConfigurer">
<property name="locations"><list> <property name="locations"><list>
<value>/pipeline/config/applicationConfig.properties</value> <value>/pipeline/config/applicationConfig.properties</value>
...@@ -421,6 +424,5 @@ echo run finished ...@@ -421,6 +424,5 @@ echo run finished
<util:list id="pipeLineTask" list-class="java.util.ArrayList"> <util:list id="pipeLineTask" list-class="java.util.ArrayList">
<ref bean="dllExport"/> <ref bean="dllExport"/>
</util:list> </util:list>
</beans> </beans>
``` ```
\ No newline at end of file
Markdown is supported
0% 或 .
You are about to add 0 people to the discussion. Proceed with caution.
先完成此消息的编辑！
想要评论请 注册 或