终于采用Bs4成功爬虫一个简单的案例,小白问题多

碰到bs4模块不可用的时候:
文件——setting添加
终于采用Bs4成功爬虫一个简单的案例,小白问题多
基本步骤与正则表达式一样:
1.urlopen发出请求,获取响应对象
2.获得response的响应的对象,response.read()得到源码信息,是字节,decode转换成字符串
3.解析源码,创建BS对象
使用bs4的时候,需要创建bs4对象(如果提示模块不可以,用上面的解决方法)
from bs4 import BeautifulSoup as BS
#第一个参数:要处理的字符串信息(源码)
#第二个参数:要处理的信息类型,指定是html.parser
#bs=BS(转换的源码信息"html.parser")
select(标签名):例如 bs.select(“title”)
select(.class的属性值):例如 bs.select(".sister")
find(“标签名”,{“属性名”:“属性值”}):
例如 bs.find(“a”,{“href”:“http://example.com/elsie”}))
4.存储

另外用到一个.join() 功能:能够将迭代对象中的每个元素取出,形成字符串 将列表转换成字符串。

终于采用Bs4成功爬虫一个简单的案例,小白问题多