网络爬虫是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本 。
拓展资料：
【爬虫技术是什么】它们被广泛用于互联网搜索引擎或其他类似网站 ， 可以自动采集所有其能够访问到的页面内容 ， 以获取或更新这些网站的内容和检索方式 。从功能上来讲 ， 爬虫一般分为数据采集，处理，储存三个部分 。传统爬虫从一个或若干初始网页的URL开始，获得初始网页上的URL，在抓取网页的过程中 ， 不断从当前页面上抽取新的URL放入队列，直到满足系统的一定停止条件 。聚焦爬虫的工作流程较为复杂，需要根据一定的网页分析算法过滤与主题无关的链接 ， 保留有用的链接并将其放入等待抓取的URL队列 。

爬虫技术是什么的详细内容就为您分享到这里，【精彩生活】jing111.com小编为您精选以下内容，希望对您有所帮助：

• 箜篌是什么
• 鲁班是什么样的工匠
• 成功的三分之一是什么？
• eur是什么意思
• 东陵玉是什么玉值钱吗
• 狮子是什么科动物
• 淮河营讲的是什么故事
• 刺客信条游戏顺序是什么
• 愚公移山是什么精神
• 自然界长期发展的产物是什么