1.网络爬虫又称网络蜘蛛、网络机器人是一种按照一定的规则，自动抓取万维网信息的程序或脚本
2.搜索引擎就是通用网络爬虫，如：google、百度（通用爬虫） 通用爬虫具有一定的局限性3.网络爬虫类型：通用网络爬虫、聚集网络爬虫、分布式
2021-04-25
