java爬虫系列第五讲-使用代理防止爬虫被屏蔽 1、分析一下爬虫存在的问题及解决方案 2、webmagic中代理的使用 3、目前市面上一些比较好用的代理服务器 2019-04-24 浏览(1,237) 评论(0) 阅读全文
java爬虫系列文章目录 java爬虫系列第一讲-爬虫入门(爬取动作片列表), java爬虫系列第二讲-爬取最新动作电影《海王》迅雷下载地址, java爬虫系列第三讲-获取页面中绝对路径的各种方法, java爬虫系列第四讲-采集"极客时间"专栏文章、视频专辑, java爬虫系列第五讲-如何使用代理防止爬虫被屏蔽? 2019-04-24 浏览(1,013) 评论(0) 阅读全文
java爬虫系列第三讲-获取页面中绝对路径的各种方法 在使用webmgiac的过程中,很多时候我们需要抓取连接的绝对路径,总结了几种方法,示例代码放在最后 2019-04-24 浏览(909) 评论(0) 阅读全文
java爬虫系列第二讲-爬取电影下载地址 使用webmagic爬取动作电影列表信息,爬取电影《海王》详细信息【电影名称、电影迅雷下载地址列表】 2019-04-24 浏览(1,267) 评论(0) 阅读全文
java爬虫系列第一讲-爬虫入门 介绍java中好用的爬虫框架、java爬虫框架webmagic介绍、使用webgic爬取动作电影列表信息 2019-04-23 浏览(1,982) 评论(0) 阅读全文