【教程】如何使用VB.net爬取Google

[visessplodmo1984]

嘿，伙计们，我写了一篇关于如何用vb.net扒谷歌的小教程。不，它不使用任何像WebBrowser之类的垃圾东西。如果你们想学习Web自动化和扒取技术，就看看它吧。http://pc-tips.net/how-to-scrape-google-with-vb-net/

 

[tonxiiconla1976]

“感谢你的教程，我相信它对很多人都会非常有用。”

 

[leicalahas1975]

“不用谢！在不使用谷歌API的情况下，从谷歌上获取数据挺麻烦的，所以我开发了这个工具。这个代码已经运行很长时间了，并且经历了很多谷歌的更新，一直非常稳定。”

 

[chanminocart1979]

好东西！非常好的教程！我曾经非常热衷于VB，但制作任何高级机器人都需要很高的学习曲线，例如如果你想添加代理支持，记得有大量代码。我目前还是选择ubot。

 

[landflavtaxje1971]

同时开启httpfox / fiddler，禁用JavaScript，看看区别，更容易爬取。

 

[inmangadi1974]

不错的分享，朋友！

 

[jugdisiti1974]

感谢楼主分享，我觉得使用 htpwebrequest 比 Webclient 更快，你怎么看？

 

[chairentesys1984]

我还没有尝试过你的代码，但是让我说一下，由于我在VB.net中编写了2个谷歌爬虫，核心HTML布局会随着不同的操作系统语言而改变，我不知道为什么，但它确实会发生。在一种语言中，“下一页”按钮的类名是“pnnext”，而在另一种语言中，该元素没有类。

 

[vislaubirdrea1972]

zohar：为什么不循环下一页的地址？我认为

 

[bioraderu1977]

多么可怕的语言。它太啰嗦了。