一种爬虫爬取的电商商品的存储方法及系统

摘要

一种爬虫爬取的电商商品的存储方法，其能够解决不同网站同一id的存储问题，不同电商网站的数据能同时并存，读取速度快。该方法包括以下步骤：(1)爬虫爬取多个电商网站的网页，然后解析出网页中的商品数据；(2)将商品数据存储时根据url解析出域名；(3)将此域名作为表名，再根据url解析出id，以此id作为主键，将所需其它信息存储。还有一种爬虫爬取的电商商品的存储系统。