获取初始URL。 的初始URL地址可以由人工指定，也可以由用户指定的几个或几个初始爬网页确定。 根据第一个URL滚动页面以获取新的URL。 获取初始URL地址后，首先获取位于当前URL地址的网页信息，然后分析网页信息的内容，并将网页保存到原始数据库中。 然后，在当前获取的网页信息中发现新的URL地址，并将其存储在URL队列中。 从URL队列中读取新的URL，获取新的网页信息，同时从新网页获取新的URL，然后重复上述滚动过程。 满足爬行动物系统设置的停止条件的，停止攀登。 写爬行动物时，通常会设置相应的停止条件，爬行动物在满足停止条件时停止攀登。 如果未设置停止条件，爬行动物将继续攀登，直到无法获取新的URL地址。
(画有点粗糙，但意思是有)。
另一个是聚焦爬行动物的实现原理，与一般爬行动物大致相同。 但是，有两个步骤在增加：定义攀登目标和过滤URL。