java-使用孔径爬网打开Web浏览器数据的任何可能性

我知道使用Aperture抓取网站.如果我在Mozila Web浏览器中打开http://demo.crawljax.com/.如何使用Aperture抓取打开的浏览器内容.

脚步：
1.在您的mozila firefox上打开http://demo.crawljax.com/.
2.执行Java程序以抓取打开mozila firefox选项卡.

解决方法:

看来您需要抓取JavaScript / Ajax页面.您实际上需要像googlebot这样的搜寻器.请参阅this googlebot可以抓取javascript页面.您可以使用其他一些驱动程序/爬虫来完成它.

Here找到类似的问题.您可以尝试从here获得最佳答案

标签：java,web-crawler,google-crawlers
来源： https://codeday.me/bug/20191010/1886371.html