云计算 频道

【案例解析】人社部混合云平台应用实践

  用户介绍:

  中华人民共和国人力资源和社会保障部是统筹机关企事业单位人员管理和统筹城乡就业和社会保障政策的中国国家权力机构。

  案例使用时间:2017.6-至今

  案例背景:

  人社行业首个大数据应用创新大赛,希望面向全社会广募优秀算法和创意方案,提升医疗保险智能监控能力,为“互联网+人社”助添动力。本次大赛由中国社会保险学会主办,指导单位为人力资源社会保障部信息中心、社保中心、医疗保险司,由数梦工场和阿里云提供平台支持。用户的主要需求是数据本地留存,需要提供大数据平台供广大参赛团队使用,并且需要参赛团队使用的虽有数据都是实际且脱敏后的数据。既保证大赛的数据实效性,又保证了数据安全性和参赛大计算能力。

  案例平台介绍:

  数梦工场为人社部数据中心搭建一整套轻量级的DTCube专有云竞赛平台,。采用本地的轻量化云构建方案,同时构建本地的大数据数仓。采用阿里公有云的天池大数据计算平台,构建公有云计算能力。通过混合云的数据混合组件,将私有云的数据和公有云的大数据服务进行打通。即发挥了本地平台能力又扩展了公有云大数据分析能力。此次采用的公有云资源为阿里云大数据处理平台,名为天池,此平台是阿里云搭建的,整个天池平台有数千台X86服务器构成。私有云采用DTCube云平台,X86服务器6台,CPU为Intel E5-2630V4,128G内存,采用分布式存储架构,每台机器可用存储容量为10T。与公有云网络采用千兆网络。平台内部是全万兆互联。

  功能使用:

  本案例主要用到了公有云大大数据处理服务和专有云的虚机服务,云存储服务,对象存储服务,数据治理服务。数梦工场为人社部数据中心搭建一整套轻量级的DTCube专有云竞赛平台,支持人社部完成数据样本准备工作,包括数据整合、清洗整理、数据脱敏、赛题验算等,并提供整套互联网时代的混合云解决方案,在保证脱敏数据安全的前提下,实现对公共云和专有云的统一管控。结合用户的需求,将用户的实际数据放在本地平台,通过平台的数据混合能力,将数据经过脱敏处理后,交由公有云的大数据模块处理。即使用了本地云的数据安全性,用使用了公有云的数据分析计算能力。充分的体现了混合云解决方案中的云上云下数据混合和处理的能力。

  平台架构:

  通过统一的管控平台,对公有云和专有云进行统一的管控和运维。使用数梦工场DTCenter统一管理平台,将本地私有云环境和公有云资源进行了统一的管理和运维,将数据更好的进行处理。本地存储资源池采用分布式存储搭建,通过统一管控平台来展现本地存储的资源情况和运维报警情况。此案例对于整个混合云的资源管理,最大的挑战来源于数据的本地安全性和云上的数据同步。以及数据的相关本地脱敏处理。

  技术特点:

  采用本地专有云与公有云集合的框架,即保证了本地的计算性,保证了数据的安全性,又充分使用了公有云的大计算、大数据处理能力。 整体架构包括统一管控平台,本地私有云环境,公有云大数据处理能力环境。创新性的采用专有云云下数据处理与云上大数据资源结合的方式。此类方式,即需要数据在本地脱敏处理等的能力,也需要数据实时同步传输的能力。总体来说,架构上,专有云6台X86机器组成的专有云,以及上面的大数据处理套件。 公有云上没有使用传统虚机而是直接对接公有云的大数据处理服务。通过专有云的大数据处理套件和公有云大数据处理服务直接打通。算法跑在公有云平台上。 同时通过光控做到了统一管控。典型的资源、数据、管控的混合。

  业务类型:

  本地平台负责本地数据的留存,数据整合、清洗整理、数据脱敏、赛题验算,而公有云平台负责数据的大数据分析。即充分的数据混合能力。将私有云数据和公有云大数据计算能力有机的打通。此种模式,既可以减少用户的IT投入,因为毕竟实际本地的大数据能力的投入是比较庞大的,充分发挥公有云大数据计算的能力,同时又充分了保证了数据的安全和数据的价值。可以说充分发挥了混合云的混合能力和资源充分利用的优势。

  用户价值:

  作为本次大赛的初衷,是希望通过真实的数据,真正的数据开发,获取到实际对社会有意义的研究成果。所以不管是从数据还是到算法,真实、有效、实用就是本次客户要求的重点。保证大赛的成果实用性,采用大量真实数据,而大量真实数据的公有云安全性是业界难题,采用混合云架构,即实现了数据的本地化,安全性,又使用了公有云的大数据能力。充分的保障了大赛的参赛能力。即保障了整个赛事对大数据环境的超大量诉求和计算能力的要求,又充分的满足了客户的数据安全性要求。

  总结:

  6月22日,全国“互联网+人社”推进座谈会上,中国社会保险学会会长胡晓义宣布启动人社行业首个大数据应用创新大赛,希望面向全社会广募优秀算法和创意方案,提升医疗保险智能监控能力,为“互联网+人社”助添动力。本次大赛由由数梦工场和阿里云提供平台支持。

  为力求解决实际场景问题,通过大赛可以形成一批可借鉴、可复制、可推广的应用模式和建设方案,数梦工场为人社部数据中心搭建一整套轻量级的DTCube专有云竞赛平台,支持人社部完成数据样本准备工作,包括数据整合、清洗整理、数据脱敏、赛题验算等,并提供整套互联网时代的混合云解决方案,在保证脱敏数据安全的前提下,实现对公共云和专有云的统一管控。

  提供整套互联网时代的混合云解决方案,在保证脱敏数据安全的前提下,实现对公共云和专有云的统一管控。结合用户的需求,将用户的实际数据放在本地平台,通过平台的数据混合能力,将数据经过脱敏处理后,交由公有云的大数据模块处理。即使用了本地云的数据安全性,用使用了公有云的数据分析计算能力。充分的体现了混合云解决方案中的云上云下数据混合和处理的能力。

  中国社会保险学会会长胡晓义表示本次大赛是社保协会的年度重大活动,也是人社部首次举办创新应用大赛。希望通过阿里云和数梦工场的丰厚经验携手办好大赛,扩大影响力。

13
相关文章