​​Kettle提高表输出写入速度（每秒万条记录）！

由于Kettle提高表输出写入速度太低，每秒速度三四十，实在忍受不了，参考一些资料之后进行了以下改变，我只进行了第一项的速度每秒五六千，加上其他的测试速度有达到3万多，有一分钟二十多万的记录，没测试极限，下为更改的地方：

NO.1

mysql表输出的时候出现减速的原因可能是因为网络链接的属性设置

在此处添加参数：

useServerPrepStmts=false
rewriteBatchedStatements=true
useCompression=true

如图：

NO.2

kettle 允许线程多开

NO.3

也可以适当的提高数据集的大小

此处未改，不同的MySQL数据库版本好似有数据传输限制会报Prepared statement contains too many placeholders，我用的是5.7的没有出现这个错误

NO.4

每次表输出的提交量

更改大小视机器的内存大小改变，

最后的

kettle还可以并发处理job

​

如果大家有其他的方法，或者想要知道哪方面的办公技巧，下方评论哦~

学习资料见知识星球。

以上就是今天要分享的技巧，你学会了吗？若有什么问题，欢迎在下方留言。

快来试试吧，小琥 my21ke007。获取 1000个免费 Excel模板福利​​​​！

更多技巧， www.excelbook.cn

欢迎 加入 零售创新 知识星球，知识星球主要以数据分析、报告分享、数据工具讨论为主；