A股上市公司传智教育（股票代码 003032）旗下技术交流社区北京昌平校区

传智教育官网黑马程序员官网

 找回密码
 加入黑马

QQ登录

只需一步，快速开始

论坛首页 › 学习交流 › 免费资源 › JavaEE资源 › 正文

[资源下载] 【视频教程】抓取汽车之家上的汽车评测数据

© 播妞 程序媛   /  2018-11-7 14:41  /  18664 人查看  /  93 人回复  /   2 人收藏 转载请遵从CC协议 禁止商业使用本文


前面介绍了几种爬虫的分类，这里我们使用聚焦网络爬虫，抓取汽车之家上的汽车评测数据。可以参考下面链接：https://www.autohome.com.cn/bestauto

抓取评测数据过程如下：

1.    根据url抓取html页面

2.    对html页面进行解析，获取该页面所有的评测数据

3.    遍历所有的评测数据

4.    判断遍历的评测数据是否已保存，

      如果已保存再次遍历下一条评测数据

      如果未保存执行下一步

5.    保存评测数据到数据库中

网盘资料截图展示：


网盘资料下载链接已添加回帖可见

游客，如果您要查看本帖隐藏内容请回复

93 个回复

倒序浏览
番茄炒鸡蛋 高级黑马 2018-11-7 14:55:09
| 只看该作者
沙发
学习一下~
回复 使用道具 举报
mx003 来自手机 高级黑马 2018-11-7 20:30:00
| 只看该作者
藤椅
谢谢分享
回复 使用道具 举报
beson2000 中级黑马 2018-11-8 21:58:18
| 只看该作者
板凳
学习一下
回复 使用道具 举报
Akm 黑马帝 2018-11-9 12:47:42
| 只看该作者
报纸
用  Java 写的爬虫吗  
回复 使用道具 举报
Yanziyun1234 初级黑马 2018-11-9 17:59:45
| 只看该作者
地板
黑马出征，寸草不生
回复 使用道具 举报
acfrt 初级黑马 2018-11-12 16:49:28
| 只看该作者
7#
谢谢分享
回复 使用道具 举报
fffkfkf 初级黑马 2018-11-12 17:35:56
| 只看该作者
8#
？？？看看
回复 使用道具 举报
xuanzuanmu 黑马帝 2018-11-12 19:32:18
| 只看该作者
9#
学习学习
回复 使用道具 举报
莫小邪. 中级黑马 2018-11-14 10:24:04
| 只看该作者
10#
回复 使用道具 举报
guoxiutao 中级黑马 2018-11-20 09:57:54
| 只看该作者
11#
感谢分享
回复 使用道具 举报
感冒的拖鞋 初级黑马 2018-11-23 11:34:32
| 只看该作者
12#
学习一下~
回复 使用道具 举报
axf 初级黑马 2018-11-26 10:49:39
| 只看该作者
13#
谢谢谢谢谢谢谢谢谢谢
回复 使用道具 举报
王小驰 初级黑马 2018-11-26 18:11:04
| 只看该作者
14#
喜欢黑马没解释
回复 使用道具 举报
344469137 初级黑马 2018-11-27 13:23:36
| 只看该作者
15#
实战案例 值得学习
回复 使用道具 举报
飘渺zz 初级黑马 2018-11-28 09:12:37
| 只看该作者
16#
学习一下
回复 使用道具 举报
Kevin丶yu 初级黑马 2018-11-28 13:46:26
| 只看该作者
17#
教育局任天野
回复 使用道具 举报
金路成 中级黑马 2018-11-30 21:23:56
| 只看该作者
18#
刚刚开始爬虫，还是要多看看大佬的成果
回复 使用道具 举报
96p73 黑马帝 2018-12-1 00:36:27
| 只看该作者
19#
#在这里快速回复#
回复 使用道具 举报
番茄炒鸡蛋 高级黑马 2018-12-1 10:27:48
| 只看该作者
20#
学习一下
回复 使用道具 举报
下一页 »
12345下一页
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 加入黑马