云计算 频道

EasyStack助力北方工业大学校企合作大数据项目

  【IT168 资讯】北方工业大学位于中国首都北京,前身是创立于1946年的“国立北平高级工业职业学校”。由中央与北京市共建,以北京市管理为主,是北京市重点建设的多科性高校,也是教育部“卓越工程师教育培养计划”院校,是国家首批“卓越工程师教育培养计划2.0”、“新工科研究与实践项目”入选高校。

  截至2018年12月,学校有北京市重点实验室2个,省部级研究中心6个,校级研究所10个。北方工业大学承担了国家自然科学基金,“863”计划、科技支撑计划等在内的国家和北京市重大和重点项目,完成了千余项企业合作横向课题,承担如国家电网、国家电厂、海洋大数据等数据存储、实时数据分析处理等第三方托管业务。

  作为国家电网、国家电厂、海洋科研院所等上千企业实时大数据科研平台,北方工业大学科研大数据平台承载了庞大的数据存储和分析处理任务,而传统架构无法灵活扩缩,缺少体系化的云平台支持大数据和AI工具,导致IT基础设施对大数据业务的支撑能力明显不足。

  基于中国开源云计算的领导者易捷行云EasyStack在教育、科研行业的诸多非常好的技术实践,经过严格的竞标与技术选型,北方工业大学决定选择EasyStack ECS易捷行云企业云构建科研大数据云平台,对北方工业大学的众多科研项目和大数据业务进行有力支撑。

  无缝整合云与大数据平台 助力科研效率提升

  北方工业大学科研大数据平台通过对具有来源多样化、海量以及增长快速特征的信息数据的分析,洞察,为企业和科研院所提供进行数据决策依据,以分析结果形成企业的输出能力创造新形态的业务模式。

  ECS易捷行云企业云平台通过与大数据平台软件的无缝整合,能以 Analysis-as-a-Service 的方式提供给高校,大幅降低了云平台大数据分析业务的技术门槛。该大数据分析服务支持大数据集群的自动化部署、弹性扩展和监控运维,支持一站式解决科研大数据平台的应用和管理难题;同时支持 Hadoop、Spark等多种大数据集群,满足可学校根据业务需要灵活地选择适合的集群执行分析任务的需求。

  “黑科技”解放科研人员双手

  值得注意的是,ECS企业云提供的 CDH 5.4.0 集 群 的 生 命 周 期 管 理从很大程度上解放了科研人员的双手, 在 集 群 中,ECS企业云平台预装了包括 HDFS 分布式文件系统、YARN 任务调度及资源管理系统、HIVE 数据仓库工具、ZOOKEEPER 配置一致性管理工具、OOZIE 工作流管理工具等大数据分析场景支撑组件,通过界面就可以快速创建,调整集群的大小。

  而面临不同品牌、多种型号的服务器、存储等混杂资源,该项目在利旧基础设施资源的同时,也对云平台的兼容性、弹性、稳定性提出了较高要求。ECS云主机管理模块支持与多种 Hypervisor 软件的管理集成,架构上是基于插件方式来实现,其带来的优势是不需要改变平台总体架构就可以方便地通过Hypervisor 层的驱动插件,实现对新种类的 Hypervisor 软件的支持。目前ECS领先业界支持多虚拟化平台包括 KVM、VMware、XEN 和 Hyper-v,同时还率先增加了对 PowerVM 小型机虚拟化的支持。

  ECS 云主机管理模块在资源层面对底层虚拟化技术的封装,对上层用户来说他们不再需要关心云主机是通过那种 Hypervisor 软件创建的,不需要考虑底层技术的兼容性问题,所有云主机抽象为一种按需使用的计算资源,并且具备秒级获取云资源、支持多种操作系统、实时监控、弹性灵活的特性。

  此次,北方工业大学科研大数据平台的云硬盘后端采用分布式架构存储,具备海量扩展能力,并且存储数据时基于多副本机制,支持数据的快速重建,有效避免了任意节点故障导致的数据丢失,大幅提升了存储系统的 SLA 水平,该云平台具备高性能、支持备份与恢复、弹性扩容、多后端支持的特性。

  未来,北方工业大学将逐步适应云平台资源使用方式,并持续验证平台的适用性和稳定性。北方工业大学在经历二期扩容后还将结合业务规模进行科研大数据云平台的后期升级。

特别提醒:本网信息来自于互联网,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。
0
相关文章