|-转 php使用QueryList轻松采集JavaScript动态渲染页面
QueryList使用jQuery的方式来做采集,拥有丰富的插件。
下面来演示QueryList使用PhantomJS插件抓取JS动态创建的页面内容。
安装
使用Composer安装:
- 安装QueryList
composer require jaeger/querylist
GitHub:https://github.com/jae-jae/QueryList
- 安装PhantomJS插件
composer require jaeger/querylist-phantomjs
GitHub:https://github.com/jae-jae/QueryList-PhantomJS
下载PhantomJS二进制文件
PhantomJS官网:http://phantomjs.org,下载对应平台的PhantomJS二进制文件。
插件API
- QueryListbrowser($url,$debug = false,$commandOpt = []):使用浏览器打开连接
使用
以采集「今日头条」手机版为例,「今日头条」手机版基于React框架,内容是纯动态渲染出来的。
下面演示QueryList的PhantomJs插件用法:
- 安装插件
use QL\QueryList; use QL\Ext\PhantomJs; $ql = QueryList::getInstance(); // 安装时需要设置PhantomJS二进制文件路径 $ql->use(PhantomJs::class,'/usr/local/bin/phantomjs'); //or Custom function name $ql->use(PhantomJs::class,'/usr/local/bin/phantomjs','browser');
- Example-1
获取动态渲染的HTML:
$html = $ql->browser('https://m.toutiao.com')->getHtml(); print_r($html);
获取所有p标签文本内容: ...
浏览更多内容请先登录。
立即注册
分享的网址网站均收集自搜索引擎以及互联网,非查问网运营,查问网并没有提供其服务,请勿利用其做侵权以及违规行为。
更新于:2024-10-04 16:49:53
相关内容
PHP Trait 使用指南
[PHP] 网盘搜索引擎-采集爬取百度网盘分享文件实现网盘搜索
php中动态输出变量内容,查看进程状态的方法
【PHP】COOKIE和SESSION的使用以及区别
使用thinkphp框架时遇到的问题
THINKPHP6 页面错误!请稍后再试~
推荐内容