与通用 Node.js 爬虫集成

将下列代码加入到您爬虫中的结果保存部分。

  1. // 引入 SDK
  2. const crawlab = require('crawlab-sdk');
  3. // 这是一个结果,需要为 object 类型
  4. const result = {name: 'crawlab'};
  5. (async () => {
  6. // 调用保存结果方法
  7. await crawlab.saveItem(result);
  8. // 关闭数据库连接,否则程序不会结束
  9. await crawlab.close();
  10. })();

然后,启动爬虫,运行完成之后,您就应该能看到抓取结果出现在 任务详情-结果 里。