文章列表
蜘蛛池的原理,以下内容摘自网上。
一般网页上都会存在超链接,而超链接会将互联网上的大多数网页连接起来,形成一个类似蜘蛛网的结构。而蜘蛛的一项工作就是沿着超链接去尽可能多的爬行尚未爬过的页面。换个说法:相当于人为的制造了一张不断变大的网,把蜘蛛困在里面,让它不断的爬行网站内的页面。
开始吧,第一步找资料
先说下过去的经历,如果没有记错,这是第三次查蜘蛛池的资料了。每次都有异想不到的收获,想起刚接触时,看的云里雾里。第二次,直接买源码,根据代码来理解,从此学会了世界上最好的语言(PHP)。与此同时把手上的CMS也改成了寄生虫变态单细胞版(随便取的名字,表达一下)。
...