- 浏览: 20714 次
- 性别:
- 来自: 广州
-
最新评论
文章列表
1:JAVA爬虫WebCollector Star:1345
下载地址:http://www.17ky.net/soft/9278.html
爬虫简介: WebCollector是一个无须配置、便于二次开发的JAVA爬虫框架(内核),它提供精简的的API,只需少量代码即可实现一个功能强大的爬虫。WebCollector-H ...
1:.Net开源的跨平台爬虫框架 DotnetSpider(Star:449)
下载地址:http://www.17ky.net/soft/479.html
DotnetSpider是开源的.NET跨平台数据采集爬虫框架。
2:俄国牛人写的开源爬虫xNet(Star:121)
下载地址:http://www.17ky.net/soft/756.html
这个一个俄国牛人写的开源工具,为啥说他强悍了,因为他将所有Http协议的底层都实现了一遍,这有啥好处?只要你是写爬虫的,都会遇到一个让人抓狂的问题,就是明明知道自己Http请求头跟浏览器一模一样了,为啥还会获取不到自己想要的数据
3 ...