网络爬虫是一种按照一定的规则 ， 自动地抓取万维网信息的程序或者脚本 。
拓展资料：
【爬虫技术是什么】它们被广泛用于互联网搜索引擎或其他类似网站，可以自动采集所有其能够访问到的页面内容，以获取或更新这些网站的内容和检索方式 。从功能上来讲 ， 爬虫一般分为数据采集，处理，储存三个部分 。传统爬虫从一个或若干初始网页的URL开始 ， 获得初始网页上的URL，在抓取网页的过程中，不断从当前页面上抽取新的URL放入队列 ， 直到满足系统的一定停止条件 。聚焦爬虫的工作流程较为复杂 ， 需要根据一定的网页分析算法过滤与主题无关的链接，保留有用的链接并将其放入等待抓取的URL队列 。

爬虫技术是什么的详细内容就为您分享到这里，【精彩生活】jing111.com小编为您精选以下内容，希望对您有所帮助：

• q/jnc0003s是什么标准
• 泛滥的近义词是什么
• 计算机文管二级简称是什么
• 合同的抗辩权的特点是什么
• rh阴性血是什么血型
• 屁屁是什么意思
• 卧槽真正的意思是什么
• 餐厨垃圾是什么垃圾
• 赏识教育是什么
• 东北八大怪是什么 你好奇吗