JavaScript 如何在爬虫中运行网页中的 JavaScript

lukefan · December 03, 2016 · Last by lukefan replied at December 03, 2016 · 7087 hits

我写了个爬虫程序。 但是,目标网站经常改变域名,所以会在首页中执行一个 JavaScript,从而获得当前正确的域名。 我怎么才能搞在自己的爬虫程序中,执行这段 JS,获得正确的域名呢?

selenium 或者 phantomjs

Ruby 的爬虫世界 · Ruby China https://ruby-china.org/topics/31784

感谢,我会去尝试一下。

You need to Sign in before reply, if you don't have an account, please Sign up first.