http数据抓取是干嘛的

数据抓取，以其最一般的形式，是指一种计算机程序从另一程序生成的输出中提取数据的技术。

数据抓取通常体现在网页抓取中，网页抓取是使用应用程序从网站提取有价值信息的过程。

网页抓取分为3个步骤：

1、首先，用于提取信息的代码段（我们称为抓取机器人）将 HTTP GET请求发送到特定网站。

2、当网站响应的时，抓取器将解析HTML文档以获取特定的数据模式。

3、数据提取后，被转换为抓取机器人设计者所设计的特定格式。