大数据创新科研环境建设方案 /

位置:首页 > 大数据专业 > 解决方案


大数据创新科研平台建设方案
 

  大数据科研条件需求



作为高科技人才的培养摇篮和大数据前沿技术攻关阵地,高校需要承担起大量的大数据相关科研任务和高层次研究型人才培养责任,传统的计算机和服务器在大数据科研项目管理、科研环境构建、科研成果展示等方面都存在短板。当前,为有效支撑师资团队的科研和人才培养,对科研平台有以下要求:



 



  大数据创新科研平台建设方案



大数据创新科研平台是涵盖数据存储、数据处理和数据展现,全环节、一体化的解决方案。本方案可提供PB级海量数据存储、查询、分析和挖掘能力,涵盖离线计算、实时计算、流式计算和分析挖掘等应用场景,可提升各院系大数据采集、组织、存储、计算、数据共享、综合分析与深度应用能力,为老师开展各类大数据科研和人才培养提供支持。



 



  系统架构



大数据创新科研平台底层是支持科研所需的硬件资源,通过虚拟化系统将硬件资源虚拟化为统一的资源池,可根据每个课题、每位老师的需求弹性分配虚拟集群。图形化网络爬虫系统为科研项目提供数据,之后用户可通过图形化数据分析及可视化系统实现数据的处理、分析、挖掘和可视化。


 



  科研项目开展流程



基于易优云大数据创新科研平台,科研团队通过以下8个步骤,快速完成大数据科研环境准备、数据爬取、数据源接入、数据ETL、数据挖掘、数据分析、数据可视化和动态任务调度等过程。
 





 【硬件系统】大数据科研一体机



大数据科研一体机基于华为FusionServer V5机架服务器调优设计,是聚焦于大数据科研的软硬件融合产品,内置企业级大数据套件,通过软硬件结合调优提升处理能力,实现大数据快速、高效、稳定的落地交付,支持TB至PB级海量数据的采集、存储、处理、分析、挖掘和分析,涵盖结构化、半结构化、非结构化数据,具有良好的水平扩展能力。
 



  【软件系统】大数据创新科研系统



平台提供一站式、图形化的大数据采集、分析系统,全面覆盖数据分析过程中的各个环节,包括数据采集、清洗、整合、存储、计算、建模、挖掘、展现、协作等,让老师可以在一个统一的平台上完成全流程数据分析任务,极大降低了科研课题研究的成本,缩短课题周期。同时,本科研平台是行业级高可靠性平台,可达到PB级数据秒级相应的数据处理能力。
 

 



  【软件系统】行业数据源



联创教育联合浪潮集团,为大数据科研提供门类齐全、安全可靠的行业数据资源, 涵盖商品零售、生活服务、企业画像、环境、天气、移动位置、判决文书、农业、医疗、金融证券、土地招拍挂等众多领域。