数据处理工具常见问题

数据批量处理速度

• 常见问题：数据批量处理是否比标准数据导入更快？能否通过独立库进一步提升速度？
• 解答：是的，数据批量处理的速度通常比标准数据导入快。在公有云环境中，数据批量处理存在速度限制，但可以通过配置独立库和手动调整阈值来提高速度。标准数据导入每批处理50条数据大约需要一秒，而数据批量处理则更快。

导入文件大小限制

• 常见问题：标准导入和数据批处理功能支持的最大文件大小是多少？
• 解答：标准导入功能根据工作流和审批流的不同，支持的文件大小不同：
  • 不触发工作流和审批流：最多300,000条数据，最大50MB。
  • 触发工作流但不触发审批流：最多1,000条数据，最大2MB。
  • 同时触发工作流和审批流：最多500条数据，最大2MB。
• 数据批处理功能支持的最大文件大小为100MB。

功能权限控制

• 常见问题：数据批量处理能否通过功能权限控制导入，导出，删除按钮？是否可以将后台对象纳入功能权限体系，以区分角色和分配按钮权限？
• 解答：目前数据批量处理不支持通过功能权限控制按钮。不过，此功能已经在规划中，未来将能够根据角色分配按钮权限。

对接文件服务器

• 常见问题：数据批量处理能否对接文件服务器，例如业务员上传文件至特定位置，并配置定时任务读取和解析文件？
• 解答：当前的导入文件功能不支持直接对接文件服务器。如果业务员需要定时上传文件至网盘，我们建议评估此操作的合理性和必要性，如对于导入错误后的处理流程；目前导出功能支持对接阿里云或本地搭建FTP服务。

导入导出速度优化

• 常见问题：标准的导入导出能力的速度能否优化？即使优化后，与数据批量处理相比是否仍有较大差距？
• 解答：短期内，标准的导入导出速度无法进行优化。即使进行优化，如果需要触发工作流和审批流，由于需要执行复杂的校验逻辑，速度提升有限。相比之下，数据批量处理不会触发任何流程，因此在速度上具有优势。