200字范文,内容丰富有趣,生活中的好帮手!
200字范文 > 采集碰到的一大堆麻烦事

采集碰到的一大堆麻烦事

时间:2022-02-01 18:11:15

相关推荐

采集碰到的一大堆麻烦事

今天想采集一个网站,准备拿ruby来练练,结果碰到一大堆麻烦事,C#代码写的是多点,感觉还是顺手些。

由于不想写正则,找了几个插件试

(1)scrapi,顺利安装完成,确根本采集不到信息

require 'scrapi'require 'open-uri'task :dream => :environment do url='' html = open(url).readputs html end

就这就报一大堆错,实在没信心写下去了,换下一个 Hpricot

gem install hpricot

结果在windows ruby1.9.1上装不了,万股无奈下只好用nokogiri,用的人确很少,文档太难找,/Nokogiri/XML/NodeSet.html硬着头皮看了半天,总算知道了点皮毛,把我的采集任务算是完成了

require 'nokogiri'require 'open-uri'task :dreamtype => :environment do doc = Nokogiri::HTML(open(''))tpes = []doc.css("table.txt>td:nth-child(12)>a").each do |link|#puts link.contenttpes.push(link.content)end#puts doctpes.each do |t|#puts tpes.lengthDream.create(:parent_id => 6,:name => t)endend

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。