問題描述

爬蟲運行時一直是這樣的每一分鐘出現一條這樣的信息，無限循環。不能爬取下來數據

這是redis服務端的顯示

這樣是什么問題，望有高手可以為我解惑，謝謝。

問題解答

使用scrapy_redis，你要去投放url讓spider去爬取，你投放了嗎？比如

redis-cli lpush myspider:start_urls http://google.com