（1）大数据采集行业发展情况：大数据产业可以分为基础支撑、数据服务和融合应用三个层次：基础支撑层是大数据产业的基础和底座，为大数据应用提供基础设施和工具；数据服务层基于海量数据资源，围绕各类应用和市场需求提供辅助性服务；融合应用层是大数据与行业应用紧密相关的整体解决方案，是大数据技术与实体经济深入结合的体现。

各层次涵盖的细分领域如下图所示：

随着数据体量的日益增长，大数据的单位价值密度不断降低，但大数据的整体价值持续走高。而海量数据从生产到发挥价值，需要经过采集、处理、分析等环节，其中大数据采集与预处理作为大数据生命周期的第一环节，是释放数字价值的前提。

与传统的数据采集不同，大数据采集需要面对海量数据、多种数据类型和多样化的终端类型，对采样数据的实时性要求也越来越高。在大数据采集时，需要通过计算机进行规则配置、任务调度，实现对非结构化数据的预处理，为后续的实时分析决策、数据查询、分发、计算和分析提供坚实基础。

中金企信国际咨询公布的《大数据采集行业市场发展动态监测及投资战略可行性评估预测报告（2022版）》

③大数据采集行业发展趋势：

A.大数据行业应用的深入促进大数据采集需求日益增长：在政策和技术的双重驱动下，我国大数据产业规模快速增长，大数据应用的行业也越来越广泛，从互联网行业向金融、医疗、政务、教育等各行各业拓展。根据中国信通院发布的《大数据白皮书2020》，2019年我国以云计算、大数据技术为基础的平台类运营技术服务收入2.2万亿元，其中，典型云服务和大数据服务收入达3284亿元，提供服务的企业达2977家，大数据产业发展日益壮大。

数据采集是大数据在各行各业应用并且创造价值的前提。随着大数据的行业应用不断深入，物联网、智能家居、数字政务等领域的大数据技应用逐渐成熟，数据采集的需求也将被逐步激发，带动数据采集软件及服务的市场规模日益增长。

B.大数据采集环节更加注重异构数据源兼容性：随着数据量的指数增长，数据的存储、计算、部署等方式都在同步变化。如分布式存储技术能够大大提升数据存储的可扩展性，提升数据库在处理大体量数据时的可用性和可靠性；服务器集群能够利用多个计算机进行并行计算，从而获得很高的计算速度。

在数据量增加、技术不断演进的过程中，各行业的业务系统也变得越来越复杂。以银行为例，金融业是我国信息化程度最高、信息技术应用最密集的行业之一，银行业则是金融业最早开始建立信息系统的细分领域。在数据爆发式增长、数据库国产替代、数据中心建设等大背景下，银行的业务系统由单一系统逐渐演变成按业务、按部门划分的复杂系统群，数据库类型开始由Oracle、DB2数据库变得更加多元，数据中心规模持续扩张、逐渐云化，最终形成了复杂而庞大的业务系统和数据架构。

日益复杂的业务系统和数据架构形成了数据结构、存取方式、形式不同的异构数据源，对大数据采集的异构兼容性提出了更高的要求。工信部发布的《“十四五”大数据产业发展规划》中明确提出，以构建稳定高效产业链为主要目标，在数据生成采集环节，着重提升产品的异构数据源兼容性、大规模数据集采集与加工效率。

C.大数据采集的安全与隐私保护需求持续上涨：近年来，我国大数据的安全与隐私保护需求持续上涨，大数据采集过程中的安全流通和隐私计算技术也愈发得到重视。随着大数据的不断发展和应用，越来越多的安全问题随之浮现。在数据采集过程中，第三方可能在采集传输数据过程中截获、伪造数据，不但造成了用户隐私、敏感数据泄露的严重后果，同时也影响了政府、企业后台数据分析的准确性。因此，在大数据采集及预处理过程中，除了假流量数据清洗、正常数据补全、无效数据剔除外，还存在数据格式化、数据隔离、数据加密、数据脱敏和攻击识别等需求。

我国自2017年《中华人民共和国网络安全法》颁布以来，对数据安全的立法进程不断加快。2018年，十三届全国人大常委会将《个人信息保护法》《数据安全法》纳入了立法规划；2019年，国家发布了《信息安全技术大数据安全管理指南》（GB/T37973-2019），提出了大数据安全管理基本原则，规定了大数据安全需求、数据分类分级、大数据活动的安全要求、评估大数据安全风险；2021年8月，十三届全国人大常委会第三十次会议审议通过《个人信息保护法》并正式颁布，于2021年11月1日起施行；2021年9月，《中华人民共和国数据安全法》正式施行，确立数据分级分类管理以及风险评估，检测预警和应急处置等数据安全管理各项基本制度，明确开展数据活动的组织、个人的数据安全保护义务，落实数据安全保护责任。

作为大数据产业的重要环节，数据采集的合规性和安全性也受到越来越多的重视，如何在保证数据采集性能的同时对数据采取压缩、加密等安全防护手段，成为了数据采集行业的重要课题。近年来我国网络安全市场规模持续增长，从2016年的269.5亿元增长至2020年的531.9亿元，2021年将达到649.7亿元，有望带动大数据采集的安全与隐私保护市场的持续扩容。