网络爬虫的原理,该怎么解决

网络爬虫的原理
请问各位大神，网络爬虫是什么原理呢？记得有一个软件叫中国菜刀爬行版，可以用来探测网络后台，这就是爬虫吗？
------解决思路----------------------
爬虫是爬取网页上的信息的