基于ThinkPHP5 使用QueryList爬取 并存入mysql数据库

QueryList4教程  地址：

https://doc.querylist.cc/site/index/doc/45

在ThinkPHP5代码根目录执行composer命令安装QueryList:

composer require jaeger/querylist

  如果出现  以下错误

Loading composer repositories with package information
Updating dependencies (including require-dev)

    Authentication required (packagist.phpcomposer.com):
      Username:

  出现这样的 情况

使用

composer config -g repo.packagist composer https://packagist.laravel-china.org

 

下面演示在Index控制器中使用QueryList:

use QL\QueryList;



public function qulist(){
    $data = QueryList::get('http://maoyan.com/board/4')
    // 设置采集规则
    ->rules([
        // 爬取图片地址
        "src"=>array(".board-wrapper dd img.board-img","data-src"),
        // 爬取电影名
        "name"=>array(".board-wrapper dd .movie-item-info .name","html"),
        // 爬取电影主演信息
        "star"=>array(".board-wrapper dd .movie-item-info .star","html"),
        // 爬取上映时间
        "releasetime"=>array(".board-wrapper dd .movie-item-info .releasetime","html"),
    ])
    ->query()->getData();
    $excel_array=$data->all();
    var_dump($excel_array);exit;
    }

如果没有错的   则

 

将数据插入到数据库    详细步骤

参考地址：：https://www.kancloud.cn/he_he/thinkphp5/804186