您好,欢迎来到绿色技术银行!
登录 注册
成果库
精选库
支持大规模信息处理与服务的集群系统

0

登记号:G20172103

所属行业:信息传输、软件和信息技术服务业

学科分类:并行处理;

关键词: 计算机集群 大规模信息处理与服务 资源发现 多集群通信 GPU集群

绿色分类:其他资源效率提升;

  • 基本信息
成果名称: 支持大规模信息处理与服务的集群系统
成果登记号: G20172103 学科分类: 并行处理;
绿色分类: 其他资源效率提升; 项目关键词: 计算机集群  大规模信息处理与服务  资源发现  多集群通信  GPU集群
推荐单位:

上海理工大学

成果所处阶段:
合作方式: 成果所属行业: 信息传输、软件和信息技术服务业
国家/地区: 上海 知识产权: 发明专利,实用新型专利,其他
简介: 点击查看

随着大数据分析、大规模视频监控、大规模支付系统等如火如荼地展开,提高大规信息处理能力已经成为业界的追逐的焦点。计算机集群技术成为重要手段并突飞猛进,如我曙光系列、天河系列、IBM深蓝等超级计算机。这些高端集群利用专用的计算节点、高速网路、特殊系统构成,具有成本高、维护代价高、运营成本贵等问题。利用普通的计算机、商业化的网络、通用的软件系统构成的普通计算机集群因其成本低、维护便宜,更适合广泛地构建大规模集群处理和服务系统。GOOGLE、Baidu、阿里、滕迅等公司对此青睐并获得成功。这些核心技术对外公开有限,普通信息技术公司无法有效获取或者存在技术壁垒。因此,基于开源的LINUX集群、Hadoop集群技术在中小公司普遍应用, ORACLE、HP、EMC等也开发了基于这些集群的数据库系统、存储系统、存储区域网络。基于LINUX、Hadoop集群的管理软件、性能检测软件、负载均衡软件、通信系统也逐渐出现。但面对大规模信息处理与服务的需求这些系统还不够,本项目核心的6项授权国家发明专利对基于普通计算机集群的大规模信息处理与服务应用的需求首次给出三个方面的创新贡献:      1)提出适合多计算机集群之间通信的轻便的并行通信系统和设备集群扩展系统. (1)" 简单对象存取协议(SOAP)的并行通信系统"针对SOAP可以穿透防火墙的优势,利用SOAP构建多个集群之间的并行通信系统,利用动态缓冲池机制、支持多节点间的数据流通信,扩展了集群通信互联的规模,并且额外消耗不多余10%;(2)"大规模物联网关系统"是针对集群外围设备的异构性,提出了基于二层数据融合机制的网关通信系统,增加了集群外围设备的扩展能力。      2)提出面向大规模数据流处理的GPU集群构建与处理技术. GPU集群因其良好的SPMD(单程序多数据并行模型)特性,适合大规模数据分析和处理。但是相关的工作还不多。"大规模并发数据流处理系统"为了发挥GPU的SPMD特性,提出了基于聚类机制的大规模并发数据流的处理架构和方法,有效地利用了GPU计算资源;      3)提出面向GPU集群的通信系统. "面向流处理器(GPU)并行环境的数据流通信系统"基于动态管道和私有管道机制,扩展了GPU计算进程为广义进程,使得普通人员无须了解MPI通信细节,可以编写GPU集群的并行计算程序,加快了GPU集群的普及。      项目得到国家自然科学基金(流处理器大规模网络环境下协同并行处理模型研究)、教育部博导基金(物联网大规模并发监控实时机制)、上海市重点科技攻关项目(基于流处理器并行环境的3G网络质量检测系统)、上海市重点科技攻关项目(广义网络环境下的协同信息处理和并行控制技术研究)的支持。获得发明专利授权6项、实用专利3项、发表SCI、EI论文30多篇。经权威机构查新,达到国际先进水平。      所述创新已经被成功地应用在政府、公安、机场、城市交通等大规模视频监控系统和国内外金融机构、互联网金融企业的银行卡收单、互联网支付、移动支付、跨境支付、虚拟帐户系统、跨区域的医院预交金系统、电子追溯清算、P2P网贷平台平台的集群支撑系统。近三年新增产值2.52亿元

姓名: 付莹莹 性别:
出生日期: 职务:
国籍(地区): 联系地址:
电子邮件: kjczlcg@126.com
相似的成果
匹配的需求

无记录

相关专家
绿色科技信息网