参考学习路径

参考 https://www.cnblogs.com/Java-Starter/p/10869324.html

 

https:///article/265952

https:///article/259830

 

https:///article/details/id/50892

 

https:///article/45108

B站的

https://search.bilibili.com/video?keyword=datax

 https://www.bilibili.com/video/av75226648?from=search&seid=8848553852603897194

 

job demo

sliceRecordCount: 100000  

表示 将数据 发送 10W次到 streamreader 里面 

setting 必须有， 但是 setting 里面可以没有内容。 

一般配置speed 或者 channel 

注意 如果是  stream的话 channel 设置多少次就会 重复执行多少遍。

比如 channel=2 ，如果 ssliceRecordCount: 10 ,那么最终会 执行 20次 。正常应该是 10次的

speed  里面的 byte 意思是 一次并发 控制多少个字节

errorLimit  处理失败 处理策略：

percentage ： 0.02 表示 失败比例不能超过 百分之2 ， 如果超过了比例那么整个任务失败停止，否则就当成功

record ：0 表示 失败次数的 0次 

 

mysqlreader

 

hdfswriter

mysqlwriter