您现在的位置是:课程
java爬虫项目|抓取汽车之家百万数据
2023-06-30 22:16课程 人已围观
配套资料源码添加q领取2212232413
抓取评测数据过程如下:
1. 根据url抓取html页面
2. 对html页面进行解析,获取该页面所有的评测数据
3. 遍历所有的评测数据
4. 判断遍历的评测数据是否已保存,
如果已保存再次遍历下一条评测数据
如果未保存执行下一步
5. 保存评测数据到数据库中
1. 根据url抓取html页面
2. 对html页面进行解析,获取该页面所有的评测数据
3. 遍历所有的评测数据
4. 判断遍历的评测数据是否已保存,
如果已保存再次遍历下一条评测数据
如果未保存执行下一步
5. 保存评测数据到数据库中
下一篇:大数据之Lucene索引及分词