网络数据采集是什么

在互联网上进行自动数据采集这件事和互联网存在的时间差不多一样长。虽然网络数据采集并不是新术语，但是多年以来，这件事更常见的称谓是网页抓屏( screen scraping)、数据挖掘( data mining)、网络收割( Web harvesting)或其他类似的版本。今天大众好像更倾向于用“网络数据采集”，不过有时会把网络数据采集程序称为网络机器人(bots)。

理论上，网络数据采集是一种通过多种手段收集网络数据的方式，不光是通过与API交互(或者直接与浏览器交互)的方式。最常用的方法是写一个自动化程序向网络服务器请求数据(通常是用HIML表单或其他网页文件)，然后对数据进行解析，提取需要的信息。实践中，网络数据采集涉及非常广泛的编程技术和手段，比如数据分析、信息安全等。