Spider系统中LRU算法的使用和实现

摘要

Spider系统中URL排重操作决定了抓取互联网上内容的速度，用传统的LRU算法来实现SPider系统的URL排重问题过于浪费资源，本文给出了用面向对象的方法设计和实现对象缓存算法，用于处理Spider系统中大量的URL排重操作。