博客首页 → Watij

最新文章列表

用Watij爬取网页内容

      最近一项目需要从某高校教务处网站爬取各教学楼的教室安排数据，网址为：http://202.114.5.131/index.aspx 。       用firebug监视，点击页面上的“查询”按钮后，发现请求url是被加密过的，无法获取。后经人指点，可用Watij (Web Application Testing in Java) 来模拟网页控件操作，获取数据。       Watij ...
watij爬虫爬取数据 
superonion 评论(1) 有3330人浏览 2012-03-03 12:51

Watij，配合JRuby 截取网易公开课下载列表

     网易公开课例有许多翻译的公开课内容，可是我家里使用有线通，看在线总是卡卡的，于是就想着将公开课下载到本地。网易提供了下载，不过一个课程20多集课，一个一个手动，太麻烦，就想使用jruby是不是可以将某节课批量将下载地址截取下面。      原本以为使用open_uri加上hpricot解析html就可以批量获取url，不过一分析下载页面，发现html的下载地址是通过js动态写入的，无法通 ...
Watij网易公开课jruby 
renzhen 评论(0) 有2599人浏览 2011-11-04 11:42

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics