常见问题(FAQ)调试(Debugging)SpidersSpiders Contracts实践经验(Common Practices)通用爬虫(Broad Crawls)借助Firefox来爬取使用Firebug进行爬取调试内存溢出下载及处理文件和图片Ubuntu 软件包Deploying Spiders自动限速(AutoThrottle)扩展BenchmarkingJobs: 暂停,恢复爬虫