Tag: screen

Ruby中的图像抓取

如何使用Nokogiri刮取特定URL上的图像? 如果有比Nokogiri更好的选择,请建议。 css图像标记是.profilePic img

我需要从Facebook游戏中抓取数据 – 使用ruby

修订(澄清问题) 我已经花了几天时间试图弄清楚如何从Facebook游戏中抓取特定信息; 然而,我在砖墙后遇到了砖墙。 尽我所知,主要问题如下。 我可以使用Chrome的inspect元素工具手动查找我需要的html – 它显示在iframe中。 但是,当我尝试刮取iframe时,它是空的(属性除外): 如果我使用浏览器“查看页面源”工具,这与我看到的输出相同。 我不明白为什么我看不到iframe中的数据。 答案并非后来由AJAX添加。 (我知道这两者都是因为“查看页面源代码”可以读取由Ajax添加的数据,也因为我已经等待,直到我可以在抓取之前看到数据页面并且它仍然不在那里之后。 这是因为facebook的反屏幕抓取而发生的,如果是这样的话还有办法吗? 或者我只是遗漏了一些东西。 我用ruby编程,我尝试了nokogiri,然后机械化,然后水豚没有成功。 我不知道它是否有任何区别,但在我看来,iframe使用iframe的“game_frame”引用来获取它的数据,该引用显然是指文档中较早出现的这段html: … 原始问题 我写了一个ruby程序,它使用nokogiri从Facebook游戏的HTML中抓取数据。 目前,我使用chrome的“检查元素”工具获取HTML,然后将其保存到文件中并从那里解析它。 但是,我真的希望能够从ruby中访问信息。 例如,我将程序的页面名称“www.gamename.com/…?id=12345”传递给它,它将登录到facebook,转到该页面并抓取数据。 目前,如果我尝试,它不起作用,因为我被重定向到Facebook的登录页面。 如何通过登录界面访问我需要的页面? 我想使用我已经写过的nokogiri代码来做这件事; 但是,如果我必须,我可以使用别的东西重写它。 目前,该程序是一个独立的程序 – 而不是一个rails程序 – 但我可以改变它。 我看到一些可能指向Omniauth方向的信息,但我不确定这是我在寻找什么,而且看起来也很复杂。 我希望有一个更简单的解决方案。 谢谢

Nokogiri,open-uri和Unicode角色

我正在使用Nokogiri和open-uri来抓取网页上标题标签的内容,但是在重音字符方面遇到了麻烦。 处理这些问题的最佳方法是什么? 这就是我正在做的事情: require ‘open-uri’ require ‘nokogiri’ doc = Nokogiri::HTML(open(link)) title = doc.at_css(“title”) 此时,标题看起来像这样: 抹布\ 303 \ 271 代替: 肉酱 我怎样才能让nokogiri返回正确的字符(例如,在这种情况下为ù)? 这是一个示例url: http://www.epicurious.com/recipes/food/views/Tagliatelle-with-Duck-Ragu-242037