一种在大数据集群中处理深度学习任务的方法及装置

摘要

本发明涉及一种大数据的技术领域，揭露了一种在大数据集群中处理深度学习任务的方法，包括：将海量图像数据存储到大数据集群中，对所存储的海量图像数据进行图像灰度化的灰度拉伸的预处理；利用基于闪电连接过程优化算法的聚类算法对大数据集群中的存储图像数据进行聚类划分；利用静态优化策略进行子数据集的提取，将所提取的子数据集作为深度学习任务的训练集；利用改进后的点锐度算法评价训练集中图像数据的清晰度，并利用高通滤波对清晰度较低的图像进行锐化处理；利用改进的SSD深度学习模型进行深度学习任务。本发明还提供了一种在大数据集群中处理深度学习任务的装置。本发明实现了大数据集群中的深度学习任务的处理。