Collection getData(Closure $callback = null)

  • 用法
    获取采集结果数据，需要先执行query()方法。

  • 参数: $callback可以通过这个回调函数进一步处理结果，替换内容、补全链接，下载图片等等；返回值不会修改原始data数据。并且还可以在这个回调函数用使用QueyList进行嵌套无限级采集。

返回值

返回值为Laravel中Collection集合对象，通过它的all()方法可转为数组。

Collection文档：https://d.laravel-china.org/docs/5.4/collections


用法

采集所有图片链接，采集目标：

  1. $html =<<<STR
  2.     <div class="xx">
  3.         <img data-src="/path/to/1.jpg" alt="">
  4.     </div>
  5.     <div class="xx">
  6.         <img data-src="/path/to/2.jpg" alt="">
  7.     </div>
  8.     <div class="xx">
  9.         <img data-src="/path/to/3.jpg" alt="">
  10.     </div>
  11. STR;

原始采集代码:

  1. $data = QueryList::html($html)->rules(array(
  3.         'image' => array('.xx>img','data-src')
  5.     ))->query()->getData(function($item){
  7.         return $item;
  9.     });
  11. print_r($data->all());
  13. /**
  14. 采集结果:
  15. Array
  16. (
  17.     [0] => Array
  18.         (
  19.             [image] => /path/to/1.jpg
  20.         )
  22.     [1] => Array
  23.         (
  24.             [image] => /path/to/2.jpg
  25.         )
  27.     [2] => Array
  28.         (
  29.             [image] => /path/to/3.jpg
  30.         )
  32. )
  33. **/

添加需求

输出的数组变成一维数组，改造采集代码:

  1. $data = QueryList::html($html)->rules(array(
  3.         'image' => array('.xx>img','data-src')
  5.     ))->query()->getData(function($item){
  7.         return $item['image'];
  9.     });
  11. print_r($data->all());
  12. /**
  13. 采集结果:
  14. Array
  15. (
  16.     [0] => /path/to/1.jpg
  17.     [1] => /path/to/2.jpg
  18.     [2] => /path/to/3.jpg
  19. )
  20. **/

继续添加需求

补全图片链接，改造采集代码:

  1. $baseUrl = 'http://xxxx.com';
  3. $data = QueryList::html($html)->rules(array(
  5.         'image' => array('.xx>img','data-src')
  7.     ))->query()->getData(function($item) use($baseUrl){
  9.         return $baseUrl.$item['image'];
  11.     });
  13. print_r($data);
  14. /**
  15. 采集结果:
  16. Array
  17. (
  18.     [0] => http://xxxx.com/path/to/1.jpg
  19.     [1] => http://xxxx.com/path/to/2.jpg
  20.     [2] => http://xxxx.com/path/to/3.jpg
  21. )
  22. **/

完整代码

  1. <?php
  3. require 'vendor/autoload.php';
  5. use QL\QueryList;
  7. $html =<<<STR
  8.     <div class="xx">
  9.         <img data-src="/path/to/1.jpg" alt="">
  10.     </div>
  11.     <div class="xx">
  12.         <img data-src="/path/to/2.jpg" alt="">
  13.     </div>
  14.     <div class="xx">
  15.         <img data-src="/path/to/3.jpg" alt="">
  16.     </div>
  17. STR;
  19. $baseUrl = 'http://xxxx.com';
  21. $data = QueryList::html($html)->rules(array(
  23.         'image' => array('.xx>img','data-src')
  25.     ))->query()->getData(function($item) use($baseUrl){
  27.         return $baseUrl.$item['image'];
  29.     });
  31. print_r($data->all());