豆瓣 电影 TOP250爬取 榜单

爬取豆瓣电影top250的电影信息

豆瓣电影top250网页链接: https://movie.douban.com/top250
记录学习爬取这些电影相关信息的过程

这是一些所用到的库:
from bs4 import BeautifulSoup # 网页解析,获取数据
import re # 正则表达式,进行文字匹配
import urllib.request , urllib.error # 制定URL,获取网页数据
import xlwt # 进行excel操作
import sqlite3 # 进行SQLite数据库操作
豆瓣 电影 TOP250爬取 榜单
获取网页
豆瓣 电影 TOP250爬取 榜单
获取后逐一按自己需求解析数据

然后便
得到指定一个URL的网页内容
豆瓣 电影 TOP250爬取 榜单
运用xlwt模块保存所爬数据
豆瓣 电影 TOP250爬取 榜单
查看保存相关信息的xls文件:
豆瓣 电影 TOP250爬取 榜单

当然在这里将数据放置在数据库中,能够更好的方便后续对数据的使用:
豆瓣 电影 TOP250爬取 榜单

豆瓣 电影 TOP250爬取 榜单
查看存储在数据库了的这些电影数据信息:
豆瓣 电影 TOP250爬取 榜单
暂时over