加速热文件夹数据上传

问题描述:

我有大约188MB的CSV文件。当我尝试使用热文件夹技术上传数据时,它会花费太多时间10-12小时。我怎样才能加快数据上传速度?加速热文件夹数据上传

感谢

impex.import.workers默认值为1。尝试改变这个值。我建议做性能测试用小一点的文件第一,超过188MB(只是为了得到迅速的结果)

调整IMPEX线程数的后台服务器上,以加快IMPEX文件处理。建议您从它开始等于后台节点上可用的内核数量。您不应该将其调整为高于2 *内核数量,并且这只有在IMPEX进程将是该节点上运行的唯一项目时才是如此。实际值可能介于两者之间,只能通过测试和分析服务器上运行的其他进程,作业和应用程序的数量来确定,以确保不会使CPU达到最大化。 注意:由于Hybris可能是唯一正在运行的进程,因此对于较低的环境,此值可能更高。

取自Tuning Parameters - Hybris Wiki