DataX二次开发——（1）新增HANA数据源

小半 • 2023年1月9日下午3:59 • 技术随笔 • 阅读 220

1、Gitee下载

origin

https://gitee.com/mirrors/DataX.git

2、配置阿里云maven镜像仓库

	<mirror>
        <id>alimaven</id>
        <name>aliyun maven</name>
        <url>http://maven.aliyun.com/nexus/content/groups/public/</url>
        <mirrorOf>central</mirrorOf>
    </mirror>
    <!-- 中央仓库1 -->
    <mirror>
        <id>repo1</id>
        <mirrorOf>central</mirrorOf>
        <name>Human Readable Name for this Mirror.</name>
        <url>http://repo1.maven.org/maven2/</url>
    </mirror>
    <!-- 中央仓库2 -->
    <mirror>
        <id>repo2</id>
        <mirrorOf>central</mirrorOf>
        <name>Human Readable Name for this Mirror.</name>
        <url>http://repo2.maven.org/maven2/</url>
    </mirror>

3、解决tsdbwriter编译异常

Could not resolve dependencies for project com.alibaba.datax:tsdbwriter:jar:0.0.1-SNAPSHOT: Could not find artifact com.aliyun:hitsdb-client:jar:0.4.0-SNAPSHOT in alimaven (http://maven.aliyun.com/nexus/content/groups/public）

注释代码

修改maven

4、Datax eigenbase:eigenbase-properties:pom:1.1.4 was not found in http://maven.aliyun.com/nexus/content/groups/public/ during a previous attempt.

链接: https://pan.baidu.com/s/1EmwnU7JbEql54r-1XZHVuQ 提取码: 7s06

把下载好的放到对应的maven的仓库，MAVEN_HOME/repository/eigenbase/eigenbase-properties/1.1.4/下，把别的文件都删了

5、编译打包

$ mvn -U clean package assembly:assembly -Dmaven.test.skip=true

6、手动下载jar包

https://repo1.maven.org/maven2/com/sap/cloud/db/jdbc/ngdbc/2.9.12/https://repo1.maven.org/maven2/com/sap/cloud/db/jdbc/ngdbc/2.9.12/

7、将jar包添加到rdbmreader和rdbmwriter的libs目录下

8、添加maven依赖

		<!--rdbm 里面添加了HANA的连接jar包 -->
		<dependency>
			<groupId>com.sap.cloud.db.jdbc</groupId>
			<artifactId>ngdbc</artifactId>
			<version>2.9.12</version>
			<scope>system</scope>
			<systemPath>${basedir}/src/main/libs/ngdbc-2.9.12.jar</systemPath>
		</dependency>

9、修改plugin.json文件，添加驱动

10、重新打包

$ mvn -U clean package assembly:assembly -Dmaven.test.skip=true

11、可能会遇到的问题

1、写入模式(writeMode)配置有误

解决：查看源码，可知rdbms的writeMode仅支持insert，所以不用填，填了反而会报错

2、没找到对应驱动jar包

到编译打包好的datax目录下/plugin/reader/rdbmsreader/libs 和 /plugin/reader/rdbmswriter/libs 下面看一下是否拥有我们添加的jar包

解决：clean之后重新打包

文章由极客之音整理，本文链接：https://www.bmabk.com/index.php/post/71345.html