文件合并处理方法、装置、计算设备及计算机存储介质

摘要

本发明公开了一种文件合并处理方法、装置、计算设备及计算机存储介质，其中，文件合并处理方法包括：获取待分布式计算的多个文件；统计多个文件中所包含的数据条目总数量；在分布式计算过程中，根据数据条目总数量和预设数据条目阈值，对多个文件进行合并处理，得到至少一个目标文件。根据本发明提供的技术方案，实现了对小文件和空文件的合并处理，有效地减少了集群中目标文件的数量，减少了集群资源的占用，提高了下游作业执行效率。