翻页式网页搜索引擎是如何进行抓取的
Spider系统的目标就是发现并抓取互联网中一切有价值的网页，百度官方也明确表示蜘蛛只可以抓取到尽可能多的有价