是否可以通过Python进行HTML抓取，数据挖掘？

Question

我可以收集智能数据，HTML使用python刮？我不知道它，所以我想想一些想法。

Answer 1

看着模块scrapy：

http://scrapy.org/

Answer 2

尝试使用的urllib2和美味的汤。

的urllib2是请求的URL编程有用的。这是标准库的一部分：http://docs.python.org/library/urllib2

美丽的汤是很好的挖掘HTML/XML，并可以在这里找到：http://pypi.python.org/pypi/BeautifulSoup

Answer 3

你当然可以 - 我在Python开发this library我的网页抓取工作。

一个很好的解析库是lxml。

如果你是新来的Python你可能想通过this ebook工作第一。

Answer 4

您也可以使用htql库在：http://htql.net。