datax executor 2.1.0.jar

airflow-mesos-executor

algorithm-executor-app

用户应用new SparkContext后，集群就会为在Worker上分配executor,但是增加executor的时候需要考虑好内存消耗，因为一台机器的内存分配给越多的executor，每个exe

oracle海量数据迁移至clickhouse工具

1、添加jar包 presto-jdbc-0.244.jar到如下目录 /opt/datax-web-2.1.2/modules/datax-admin/lib 2、替换jar包 datax-admi

1、说明:datax支持presto读取,datax规范开发插件,读取presto中数据,可以在presto中配置mysql、postgresql、es、hive等数据库的连接,通过datax执行关联

依据时间字段增量 1、创建要迁移表的文件,文件和脚本在同一级目录,名称为: transfer.txt 2、文件格式为:表名+列名+开始时间+结束时间(以+隔开) 3、迁移数据 4、记录迁移信息到目的库

datax安装包下载，下载之后直接解压即可用

DATAX installation and development

datax之mysqltomysqld