| huozm32831 |
2021-06-14 10:46 |
数据开发工作是推动各领域大数据应用落地的必要环节，是将数据生产要素转化成社会生产力的关键过程。
6月9日，由中国信息通信研究院、大数据技术标准推进委员会举办的“2021大数据前沿技术与产业论坛”在北京举行，论坛聚焦集成化大数据平台、流计算、数据开发平台、数据可视化等爆点新概念，邀请业内知名专家学者共论大数据前沿技术发展方向，探寻技术产品在产业界的落地实践。
云徙科技数据智能部总经理蒲继强受邀参加论坛，发表“数据开发平台发展趋势与实践案例”在线主题演讲，与行业同仁共同沟通、交流大数据开发平台在企业建设数据方面的一些思考。
以下为蒲继强演讲内容整理分享：
一、数字中台：解决企业数据建设困局
大数据技术的推陈出新、演变非常快速，也给企业带来了在建设数据方面的一些困局。
这些到底用什么样的架构比较适合自身企业，并不是说最新的架构就一定是适合的，需要根据场景或者企业现有的人员去进行一个最优的组合。
我们认为数据中台就是解决大数据技术以及大数据技术应用到数据场景的一揽子解决方案，它是数字化建设的一个基建工程。
数据中台是从技术层面上去屏蔽大数据底下的技术能力。从业务上整合企业的全场景的数据，以数据能力形式统一为企业数字化的变革或者是创新提供服务，可以有效地去解决企业在大数据建设方面技术方面遇到的一些困境。
二、大数据研发平台经历的4个阶段
大数据研发平台是数据中台的一个建设利器。在大数据研发平台的发展过程当中，可以把它归纳为四个阶段。
第一个阶段是纯编码阶段，大数据开发人员需要有一边去理解大数据技术的能力，一边要去做数据应用场景的开发。
第二个阶段2012-2015，以互联网为代表的企业，开始基于大数据技术封装开发工具，但也仅仅实现了一些数据的ETL可视化开发。
第三个阶段2015-2018，大数据研发平台开始逐步产品化，基于企业数据中台建设全场景实现了数据采、存、通、服的可视化开发，真正提升大数据建设生产力。
第四个阶段，随着数据种类的繁多、质量的低下，数据治理越来越受到重视，数据建设与数据治理并行解决也被提上了日程。
三、大数据研发平台分享
在大数据研发平台方面，云徙做了什么工作？简单一句话，云徙的数据中台，让数据从DOS时代进了windows 时代。
整个数据中台里的一个核心产品，就是大数据研发平台，从数据的接入到最后的数据的运维，数据资产管理，都可以在这个平台上进行一站式的开发。
具体层面上我们可以支持多种的异构数据源接入。比如说流数据，离线的结构化的数据，非结构化的数据，包括实时接入以及物联网传感器，智能化IDE编程环境，开发、生产环境的联动可以一键发布等等。
四、大数据研发平台实践案例
在此分享一个医药行业医药集团公司成功案例，本案例中的医药集团覆盖了医药制造、生产、研发、营销、销售，包括售后服务，整个全链路的业务。数据业务化，一直是企业里面的一个老大难的问题。
云徙在参与到此个医药集团数据中台建设过程当中，利用云徙的大数据研发平台，为它梳理并采集了包含IOT爬虫数据，以及它自身内部的业务系统，多种数据源，实现包括集团的管理驾驶舱、营销、商业、连锁、医生、终端、客户、供应链等8个主题域的数据，形成了六大类的数据应用赋能到智慧研发、智慧生产、智慧供应链、智慧营销和智慧管理。
在实施整个项目交付过程当中，利用云徙的研发平台，大大提升了研发效率。仅仅是由1位技术经理+2位客户研发人员+3位云徙研发人员+1位算法工程师，七个人的团队就基本实现了一个数据中台的建设。
在数据中台把基础搭好之后，云徙还帮其做了很多这种数据的智能应用，比如智能补货，医生的精准画像，精准地图等这些功能，为整个医药集团数据业务化打下了坚实的基础。 |
|