基于层次存储的神经回路体数据处理方法、系统及介质

摘要

本发明公开了一种基于层次存储的神经回路体数据处理方法、系统及介质，本发明数据分块处理方法根据计算节点配置将输入图像数据进行分块，根据计算节点数量对神经元进行聚类和任务分配，各计算节点独立执行神经回路追踪任务，在计算过程中，按数据预取规则从磁盘阵列或本地固态盘将数据块读入内存，按数据替换规则将数据块从内存写入磁盘阵列或本地固态盘，直至分配的任务全部处理完毕。本发明能够有效处理十TB量级的超大规模图像数据，具有处理速度快、扩展性强的特点，能够部署在分布式计算平台，实现灵活且支持参数配置，易于移植与推广。