手机网站
手机网站
方面:大数据精度有助于疫情防控，健康可持续的大数据开发环境正在形成< br>
随着全球数据储量的不断扩大和新一代信息技术的到来，大数据正进入加速发展时期，其应用范围和市场规模也在不断扩大。目前，中国正处于大数据发展的深化阶段。政策环境不断改善，技术体系趋于融合。“大数据+行业”的渗透和整合正在全面展开，新的格式正在酝酿之中。大数据推动了制造业、服务业和公共服务行业的数字化、网络化和智能化，许多“大数据+”模型已经得到市场的认可。在抗击疫情的过程中，疫情动态信息的发布、发展趋势的研究和预测、疫情相关人员的精确定位以及防控工作的指挥调度都离不开大数据支持。深入参与大数据领域的企业已经与地方政府展开合作，“防疫战”正在如火如荼地展开。
本期智能内部参考，我们推荐华西证券的研究报告《大数据助力精确战爆发，凸显产业价值》，详细阐述大数据产业在抗击疫情中的重要作用，揭示大数据产业的最新发展如果你想收集这篇文章的报道(大数据有助于精确战的流行态势和突出工业价值)，你可以通过回复关键字“nc436”从zhidxcom获得
本期内部参考资料来源:华西证券
原标题:
“大数据助力精准战爆发，凸显产业价值”
作者:吴彤
2年1月27日，国务院发布《新型冠状病毒肺炎防控近期工作计划》，明确指出各地要全面实施“大与2003年非典事件相比，大数据技术的出现和成熟，加上人工智能、云计算和高速宽带网络的广泛应用，信息技术，尤其是大数据技术，在抗击疫情的战斗中发挥着越来越重要的作用。其中，互联网企业、电信运营商、城管系统、医疗系统等行业，依托多年来逐步完善的大数据系统，结合自身的数据资源优势，首先发布相关大数据产品和解决方案，实现对疫情的准确攻击
1，互联网大数据基于大数据技术的最早的经典应用之一是在传染病的预测和控制方面谷歌于2008年初推出谷歌流感趋势(GFT)网站，根据谷歌搜索数据实时预测当前全球流感疫情。2009年，谷歌成功预测了H1N1在美国的传播，并对爆发的时间和地点做出了极其准确的判断。GFT作为大数据概念出现之前的经典应用，仍然显示出大数据巨大的应用潜力，并强调在大数据的应用实践中仍有许多方面需要关注和改进。
因此，在新的冠状肺炎疫情升级后，国内许多机构，包括英美烟草等，开始发布相应的疫情跟踪数据，以帮助有效预防和控制整体疫情。其中，百度发布了疫情实时大数据报告，统计了国家官方通报的疫情，并制作了相应的图表，直观地展示了疫情当前的发展趋势，从而有效地帮助人们了解周围疫情的发展情况，并帮助将物资分配到需要的地方。
除了英美烟草和其他传统互联网巨头之外，运营商还展示了自己在大数据控制疫情的数据源和数据分析方面的价值凭借其作为数据交换中心的地位，运营商可以收集与用户密切相关的最有价值和更准确的数据，包括地理位置、商业活动、搜索历史、社交网络等。他们在电信时代的战略地位超出了英美烟草等互联网巨头的能力范围。而且，电信大数据自然拥有用户最详细的信息。国家推行用户实名制后，电信数据更加准确地覆盖了用户真实完整信息的方方面面由于移动终端的迅速普及和移动用户数量的大幅增加，运营商多年来形成了有效的用户大数据。
2020年1月26日上午，工业和信息化部副部长、工业和信息化部防治新皇冠肺炎领导小组副组长陈肇雄到中国联通大数据中心看望一线在职人员，利用大数据支持服务调查疫情联防联控情况，并召开疫情防控大数据支持服务现场调度会议2020年1月22日，中国联通成立了由100多名人大代表组成的全集团联合数据团队。中国联通表示，已迅速建立协调机制，为相关部委和部分省市政府提供与疫情防控相关的大数据分析和支持服务，并利用成熟的算法模型提供相关数据分析和智能应用，为疫情防控工作提供全方位支持。截至26日，中国联通已向31个省级分公司和卫生委员会提供了150多份数据报告，并将在未来进一步深化数据支持服务。
此外，疫情爆发后，中国移动收到了国家卫生和健康委员会关于疫情每日报告的要求。为了在第一时间上报疫情信息，为整体防疫工作提供准确的数据决策，中国移动迅速制定了数据上报和数据建模方案、无线专网安全和应急预案，并在一天内开通了医疗专网服务。通过疫情防控大数据传输专网，可以实现武汉市72家医院疫情数据的实时传输和上报。
在地方控制方面，地方政府也开始借助运营商的大数据能力加强疫情防控，特别是对湖北等重点疫区户籍人口的防控，防止疫情在春运返程期间再次发酵。例如，2020年1月24日，深圳龙岗区数据管理局召开了移动、电信、联通三大运营商会议，充分利用大数据等信息技术手段，积极开展大数据分析防控工作。
3，医学大数据除了分析和收集流行病数据以及监控关键人口流动之外，这种大数据技术在制备肺炎疫苗和治疗患者方面也发挥着重要作用。2020年1月24日，国家病原微生物资源库首次发布了关于新冠状病毒病毒种类的重要权威信息——中国疾病预防控制中心病毒病防治所成功分离出中国第一个病毒种，并发布了其信息、电子显微镜照片、核酸检测引物和新冠状病毒探针序列等。
该套服务系统由国家微生物数据中心和国家病原微生物资源库联合建设，及时发布与病毒相关的科技资源和数据。同时，整合全球冠状病毒基因和基因组数据，建立全球冠状病毒资源数据库和全球冠状病毒资源大数据平台。
此外，百度还提供人工智能技术支持，支持十亿级计算资源，协助疾病控制机构、科研机构等研究机构加快研发，以支持新冠状病毒等新疾病的筛查、研发等一系列抗疫情工作。同时，百度将提供时空大数据和分析技术，支持疫情的及时检测、快速反应和科学管理百度研究所宣布，将向世界各地的基因检测机构、防疫中心和科研中心免费开放线性折叠(LinearFold)这一线性时间算法和全球最快的核糖核酸结构预测网站，以提高对非典病毒核糖核酸空间结构的预测速度，帮助防控疫情。使用线性折叠算法，整个基因组的二级结构可以在27秒内预测出来。最初的55分钟被压缩为27秒，这意味着效率提高了120倍，在生死赛跑中节省了两个数量级的等待时间。
医疗大数据根据行业属性具有大容量、多态性、及时性、隐私性、冗余性和不完整性的特征。因此，医学大数据的数据价值突出，应用广泛，但在应用中也存在挑战和困难。在现代医学中，大约90%的医学数据来自医学图像。结合人工智能和大数据采集分析技术，可以有效提高诊断的效率和准确性，弥补我国人均医疗资源的不足。
4，智能城市大数据根据IBM 2009提出的智能城市概念，智能城市需要满足“3I”特性:仪表化，通过监控摄像头、传感器、射频识别等设备创造“更彻底的感知”；互联(互联)，通过宽带、无线和移动通信网络连接，形成“更全面的互联”；智能(Intelligent)通过高速分析工具和集成的信息技术平台实现“更深层次的智能”。
智慧城市建设正从网络化、数字化向智能化迈进，其中大数据是重要的战略资源。国务院《推进大数据发展行动纲要》指出，“智慧城市建设要与信息惠民工程相结合，实现多方数据共享、系统对接和公共服务协调。”上海、杭州、南京、深圳和其他地方政府也在“十三五”规划中将大数据确立为城市创新和发展的一个要素。数据驱动在新智慧城市建设中的核心作用日益凸显。
疫情防控、智慧城市结合大数据技术的应用凸显出巨大的应用价值在城市化和管理1000万人口特大城市的过程中，未来应对类似事件需要科学建设智慧城市。目前，越来越多的城市和地区将“网格”和大数据技术相结合。其中，浙江省在疫情初期充分利用“大数据+网格”的方法，率先在全国范围内启动突发公共卫生事件一级反应，准确铺开所有相关人员，在疫情整体防控中发挥了重要作用。
首先，由于现代交通网络向四面八方延伸，流行病的控制离不开现代交通的有效控制。在智能交通方面，作为疫情防控的第一线，浙江省交通运输集团积极响应部署，主动创新交通流大数据技术的使用。24小时内，从金利温高速公路试点开始，通过追踪52.3万辆进入该路段的车辆，对进入疫情严重地区的2939辆车辆进行了调查分析，并首先与金华、丽水、温州、台州等地政府共享，有效地帮助浙江省提高了疫情防控效率
此外，在与疫情密切相关的传染病防控领域，中国于2017年建立了全球最大的法定传染病疫情和突发公共卫生事件网络直报系统1月20日，由新的冠状肺炎病毒感染的肺炎被纳入国家卫生和卫生委员会对法定传染病的管理。四天后，在线直接报告功能正式开通传染病网络直报系统覆盖全国，由地方政府直接向中央政府报告，是世界上最大的传染病和突发公共卫生事件网络直报系统。在过去的15年里，中国有39种法定传染病被连续监测。
面对这一突发疫情，大数据技术在疫情防控、现代医疗、城市治理等疫情防控重点领域发挥了巨大作用，直接凸显了大数据产业的价值，依托已经非常成熟的技术和产业，依托高效的海量数据收集和分析能力，结合人工智能、云计算等新兴技术。
大数据是信息发展的新阶段。随着全球数据存储量的不断增加，大数据正进入加速发展时期。近年来，随着5G、人工智能、云计算、区块链等新一代信息技术的蓬勃发展，大数据技术正走向融合发展的关键阶段。同时，中国大数据产业保持了良好的发展势头。“大数据+产业”的渗透和整合已经全面展开。整合生态加快。新技术、新格式和新模式正在出现。政策支持、战略引导、标准规范和产业创新的良性互动格局正在形成。
1，市场规模持续扩大近年来，全球数据生产快速增长权威机构Statista的统计和预测显示，2020年，全球数据输出将达到50.5 ZB，同比增长23%。在数据储量持续增长的驱动下，大数据行业也将构建一个具有广阔发展空间的多层次、多样化的市场结构。根据国家统计局2019年8月发布的报告，在2018-2020年的预测期内，大数据市场的整体收入规模将保持每年约70亿美元的增长，预计2020年全球大数据市场的收入规模将达到560亿美元未来两年，大数据市场将呈现稳定发展趋势，增长率约为14%此外，随着大数据市场成熟度的不断提高，从2025年到2027年，市场规模增速将放缓，保持在7%左右
从2018年大数据储量分布来看，EMEA(欧洲、中东、非洲)占30%；中国已成为大数据储量最高的国家，占23%。美国紧随其后，占21%
随着大数据、移动互联网、物联网等行业的深入发展，中国数据生产将呈现爆炸式增长，数据交易将迎来战略机遇根据国际数据中心和希捷的报告，中国的数据输出将从2018年的7.6 ZB增长到2025年的48.6 ZB，其中CAGR的数据输出为30.35%，比同期美国的数据输出高出18 ZB。此外，随着相关技术的不断突破和大数据产品的落地，中国大数据市场的产值也在不断增长，2020年将超过1万亿元。大数据正进入发展的黄金时期。
从细分市场来看，大数据服务、硬件和软件市场规模保持稳定增长，2020年估计值分别为210亿美元、150亿美元和200亿美元其中，软件市场的增长趋势最为明显，2016年至2017年增长率达到37.50%随着机器学习和高级分析算法等技术的成熟和集成，越来越多的数据应用和场景正在登陆，从2019年到2021年，大数据软件市场将继续以约20%的高速增长。
中国大数据产业发展规划已基本完成，并已陆续进入实施阶段截至2019年底，除香港、澳门和台湾外，全国31个省级单位均已发布相关文件，推动大数据产业发展。许多省市把新一代信息技术作为一个整体，增加了人工智能、数字经济等内容，注重大数据与行业应用和政府数据共享的结合，不断扩大大数据的外延同时，一些省市相继成立了大数据管理局等相关机构，统一管理包括大数据产业在内的新技术的发展。省级大数据管理机构的建立过程可以分为两个阶段在第一阶段，从2014年2月到2018年上半年，一些省份将着手建立自己的大数据开发局。第二阶段始于2018年下半年。根据中央部署，新一轮省级机构改革方案相继出台。各地都以不同的方式组建或调整了政府数据治理机构。各地大数据产业发展进程持续推进。
3，技术融合促进潜在发布大数据技术系统众多且复杂。一方面，社交网络的普及导致了大量非结构化数据的出现，这是传统处理方法难以处理的。数据处理系统和分析技术已经开始不断发展和创新。另一方面，大数据系统的底层技术框架已经基本成熟。大数据技术正逐渐成为支撑基础设施，其发展方向也开始聚焦于个性化的上层应用。技术集成的趋势是显而易见的。
大数据技术系统主要由数据分析技术、数据流通技术和事务处理技术组成数据分析技术的生态学有五个主要发展方向，包括数据收集和传输、数据存储和管理、计算和处理、查询和分析以及可视化显示。经过十几年的发展，数据分析技术融合了传统数据库和MPP数据库的优势，正在向加强流处理、支持SQL、支持深度学习等方向发展。在数据流通方面，安全多方计算和区块链是近年来常用的技术框架。与此同时，许多数据流通工具如同态加密、零知识证明、差分隐私等也应运而生。随着底层硬件和上层应用的不断变化，传统的集中式数据库等单点架构的事务技术模式逐渐被分布式架构所取代，新一代分布式数据库技术应运而生
目前，技术融合主要体现在以下六个方面
1是计算能力的集成，以CPU为调度核心，配合GPU、FPGA、ASIC等各种“xPU”异构计算能力平台，用于AI加速和以GPU为代表的计算加速单元，可以大大提高计算效率，成为业界的热点解决方案
2是流批集成。提出了用微批处理实现流计算的思想和用流处理实现两种批处理思想的融合的思想。它不断向更实时、更高效的计算前进。
3是TA收敛。混合事务/分析处理(HTAP)体系结构可以避免频繁的数据处理操作给系统带来的额外负担，降低重复数据存储带来的成本，并及时高效地分析业务运营产生的数据
4是模块的集成。一站式数据能力重用平台通过连接低层数据和高层数据应用团队，形成了灵活的数据驱动的精细化操作模式，并可以更快地使用数据驱动的决策。
5是云数字的组合。大数据基础设施向云的迁移和基于云的产品开发概念将降低硬件和网络维护成本，更加关注数据和业务逻辑，并大大降低大数据技术的学习成本和使用门槛。
6是目前最受关注的数字与智能的结合，主要体现在大数据平台的智能和数据治理的智能上。在大数据平台上支持机器学习算法和人工智能应用是实现智能化的重要手段。此外，人工智能支持数据治理。通过智能元数据感知和敏感数据的自动识别，数据被自动分类到不同的层次，形成一个全局统一的数据视图。通过智能数据清理和相关性分析，检查数据质量，建立数据的血缘关系，从而在降低数据治理的复杂性和成本的同时获得智能数据。
从大数据应用市场来看，中国大数据应用正处于快速发展时期，大数据市场上新的商业模式层出不穷。随着大数据基础设施的逐渐成熟和技术集成的催化，大数据分析开始与特定行业相结合，并延伸到下游垂直行业各行业的数字化、网络化、智能化进程明显加快，推动了产业结构的调整，带动了生产经营方式的转变，新的业态正在酝酿之中
目前，与大数据紧密集成的行业正逐步渗透到工业、政务、电信、交通、金融、医疗、教育等领域。行业应用正逐步扩展到生产、物流、供应链等核心业务。“从虚拟走向真实”是一个明显的趋势。大数据和实体经济的深度整合正在深化。行业应用正从消费者扩展到生产者，从感性应用扩展到预测和决策应用
在大数据的推动下，中国制造企业收集、汇总和挖掘数据的能力显著提高，帮助制造业向智能化、绿色化、服务型和高端化转型。对于传统制造业而言，大数据可以覆盖生产现场的多种因素，加速产业链各环节的优化，提高管理能力，实现敏捷的产品规划，促进制造业的智能化发展与此同时，大数据促进了个性化生产的加速登陆和企业生产模式从同质生产向定制生产的发展。针对绿色转型，大数据技术能够准确判断和控制生产线能耗，有效帮助企业在生产过程中实现节能降耗，用于优化产品设计，实现生命周期的绿色节能。此外，大数据使“中国制造”成为可能，传统工业产品正被大数据赋予更多高端功能和性能，汽车联网+互联网的发展也在不断推进。在数控机床领域，一些企业开始使用大数据技术实时分析工件质量。在工程机械领域，通过大数据技术从大量实时工程数据中挖掘潜在价值。分析虚拟空间中设备的运行趋势和模式，提高产品性能。
大数据在服务业的应用不断深入。在以金融和物流为代表的生产性服务领域，以零售和体育为代表的生活服务领域正在形成智能服务模式。面对金融业，大数据有助于投资决策、风险控制、产品定价和包容性服务，促进金融体系的建设和完善。如大数据智能投资平台帮助用户创建投资组合，大数据风险控制模型及时发现交易风险，大数据分析实现金融产品和金融衍生品的合理定价，金融科技手段促进惠普金融服务的高效发展等。在物流领域，大数据技术有助于准确匹配供应和运输能力，智能调度物流路线，主动感知物流储运，增强物流业的协调能力，全面降低物流成本
在零售业，大数据有助于商店运营、精确营销、供应链效率和垂直市场扩展，并不断增加零售业的高质量供应随着社交网络用户数量的不断扩大，将社交大数据用于产品口碑分析、用户意见收集分析、品牌营销和营销推广等“数字营销”应用将是未来大数据应用的重点。电子商务数据直接反映了用户的消费习惯，有助于企业更有效地联系目标用户，具有很高的应用价值。此外，大数据的创新服务理念提高了文化体育生活质量，促进了大众文化消费需求的准确对接，实现了运动训练的智能化，为促进公共体育健康发展提供了数据分析支持。
大数据技术在公共服务领域发挥了越来越明显的作用。通过多元数据挖掘和广泛互联共享，推动政务、教育、医疗、扶贫等公共服务向创新、开放、高效、便捷、准确方向发展。在医疗卫生方面，医疗大数据将成为2019年的热点
2年7月和2018年7月颁布的《国家医疗保健大数据标准、安全和服务管理办法》指导了医疗行业大数据服务的方向。电子病历、个性化诊疗、医学知识图谱、临床决策支持系统、药物器械研发已成为行业热点。在政务领域，公共资源交易平台提升政府数据管理水平，数据共享和交换平台提升公共服务数据共享和业务协作，政府数据+市场技术实现政府、企业和人民的共赢，社会数据被用来有力支持政府决策在教育领域，大数据加快了教育资源的广泛覆盖，促进了“因材施教”的深入实施，推动了网络教育的蓬勃发展。此外，大数据有助于建立综合扶贫平台，并有助于使扶贫识别更加准确。利用大数据技术分析不同地区的贫困因素，实现差异化救助；大数据系统实现了在线大数据验证，方便了离线精确审计和资源精确供应，为精确协助工作的开展奠定了基础。
未来，5G、人工智能和工业互联网的深入发展将为大数据的存储、分析和管理带来更大的“数据洪流”和更大的挑战。在这种背景下，大数据技术有望被推上一个新的台阶。同时，软硬件集成、数据与智能集成的趋势明显，有望推动大数据技术向异构多模式、超大容量、超低延迟等方向发展，大数据技术将不断完善。在应用方面，中国大数据行业的应用正从消费端扩展到生产端，从感知应用发展到预测和决策应用。互联网产业已经全面进入“数字时代”。未来几年，随着政务大数据平台和企业大数据中心的建成，大数据在政务、民生和实体经济领域的应用将得到全面推进。
zhidang认为，大数据技术的出现和成熟，结合了人工智能、云计算和高速宽带网络、信息技术，特别是大数据技术，在抗击疫情的战斗中发挥着越来越重要的作用。得益于5G、人工智能、区块链等技术的突破，以及数据安全和行业合规立法的实施，一个健康、可持续的大数据发展环境正在形成。未来，中国大数据产业将迎来一个全方位的良好发展趋势，市场潜力巨大。
