JavaScript 如何在爬虫中运行网页中的 JavaScript

lukefan · 2016年12月03日 · 最后由 lukefan 回复于 2016年12月03日 · 7094 次阅读

我写了个爬虫程序。 但是,目标网站经常改变域名,所以会在首页中执行一个 JavaScript,从而获得当前正确的域名。 我怎么才能搞在自己的爬虫程序中,执行这段 JS,获得正确的域名呢?

selenium 或者 phantomjs

Ruby 的爬虫世界 · Ruby China https://ruby-china.org/topics/31784

感谢,我会去尝试一下。

需要 登录 后方可回复, 如果你还没有账号请 注册新账号