近年来，计算机和信息技术发展迅猛，计算机存储能力的提升以及复杂算法的发展，数据量呈现出指数型增长趋势。部分企业数据量可超过上百TB，远远超出传统计算技术信息系统的处理能力，因此寻求有效的大数据处理技术、方法和手段成为各界的迫切需求。由于大数据处理需求的迫切性和重要性，近年来大数据技术已经在全球学术界、工业界和各国政府得到高度关注和重视。
目前，大数据以爆炸式的发展速度蔓延至各行各业，随着各国不断加大对其的扶持力度，加之资本的青睐及投资，使全球大数据市场规模保持着高速增长态势。2016年全球大数据市场需求规模达到461.5亿美元，同比增长了13.9%。预计到2021年，全球大数据市场需求规模将突破800亿美元。
目前大数据收入还主要依赖硬件销售和专业服务，但软件的价值将逐渐凸显，到2020年底，软件的销售收入将超过硬件。此外，虽然大数据面临隐私问题和企业应用的阻力，但全球大数据投资都呈现上升势头。
根据新思界产业研究中心发布的
《2018-2022年全球大数据管理市场发展前景及投资策略研究报告》显示，全球大数据市场中，行业解决方案、计算分析服务、存储服务、数据库服务和大数据应用为市场份额排名最靠前的细分市场，分别占据35.4%、17.3%、14.7%、12.5%和7.9%的市场份额。云服务的市场份额为6.3%，基础软件占据3.8%的市场份额，网络服务仅占据了2%的市场份额。
2016年，国家加大了对大数据应用的推动力度，批复了京津冀等7个国家级大数据综合试验区和超过10个大数据国家工程实验室；同时，针对医疗、交通等行业，有关部门均出台了关于大数据发展的指导意见，继续推动大数据在各垂直领域的应用进程。2016年我国大数据产业的需求规模达到235亿元，预计2021年将达到757.4亿元。
新思界
行业研究员表示，由于国际巨头在硬件层和基础软件层垄断优势明显，本土企业将主要依靠对客户需求的了解和客户资源优势，以及本地化服务的优势，在应用软件层分得蛋糕，拥有大数据处理、挖掘技术、数据分析人才以及数据资产的公司具有竞争优势。我国大数据企业竞争格局总体呈现数据资源型企业、技术服务型企业和应用服务型企业“三足鼎立”局面。
从国内来看，中国信息消费市场规模量级巨大，增长迅速。中国潜在的大数据资源非常丰富，从电信、金融、社保、房地产、医疗、政务、交通、物流、征信体系等部门，到电力、石化、气象、教育、制造等传统行业，再到电子商务平台、社交网站等，覆盖广泛。如果大数据管理行业可以得到充分、健康发展，必将对国民经济各个方面起到积极的影响。
