目录引言:为什么爬虫需要Redis?一、URL去重:用SET还是BloomFilter?场景痛点方案1:Redis SET(精确去重)方案2:BloomFilter(概率去重)二、任务队列管理:LPUSH/RPOP还是BRPOP?场景痛点方案1:List + RPOP(简