实现ruby网页图片抓取的方法
来源:爱站网时间:2019-06-07编辑:网友分享
用Java实现的网络图像爬虫,其实实现代码非常简单,它会在几分钟内实现,本文是爱站技术频道小编带给大家的实现ruby网页图片抓取的方法,希望对你有所帮助!
用Java实现的网络图像爬虫,其实实现代码非常简单,它会在几分钟内实现,本文是爱站技术频道小编带给大家的实现ruby网页图片抓取的方法,希望对你有所帮助!
module CommonHelper
require 'nokogiri'
require 'open-uri'
def down_load_xmz
site_url = "http://www.xxx.com"
for index_page in 1..141
doc_html = Nokogiri::HTML(open(site_url+'/share/comment-page-'+index_page.to_s))
doc_html.css("#comments p img").each do |item_img|
puts item_img[:src]
download_img(item_img[:src])
end
end
end
########下载图片
def download_img(img_url)
begin
img_file = open(img_url) { |f| f.read }
file_name = img_url.split('/').last
#puts file_name
open("public/meizi/"+file_name, "wb") { |f| f.write(img_file) }
return "/public/meizi/"+file_name
rescue => err
puts err
return ''
end
end
end
通过以上的介绍,相信大家已经明了实现ruby网页图片抓取的方法,不过在实际操作的时候,程序员一定要谨慎,选择爱站技术频道网进行学习,会让您受益匪浅哦!
下一篇:在Ruby中查找和执行方法
