分布式硬盘系统及在其中进行数据迁移方法的技术需求
价格 双方协商
地区: 广东省 深圳市 南山区
需求方: 中国***究院
行业领域
电子信息技术
需求背景
在超算服务中,数据传输效率是带有普遍性的瓶颈因素。目前的分布式系统中的大数据传输,无论上传还是下载,一般通过单点复制的方式进行。即首先通过某台服务器,以全局拷贝的方式,将原业务系统中分布在各服务器硬盘或硬盘阵列上的相关数据传输到存贮介质上,而在超算端,则需要由另一台数据服务器,完成大数据的读取、上载并分配到超算指定区域。这种多对一、一对多的大规模数据汇聚、处理及复制过程,完全依赖于单台服务器的运算性能及IO水平,在数据传输过程中,其他运算节点的计算及IO能力则完全闲置。本发明将改变上述传输模式,通过改变数据传输模式,以同步、并行、多对多的数据复制模式,充分利用系统整体的处理能力,使数据的下载及上传效率获得几何增长。
需解决的主要技术难题
此技术需解决:
1.要解决的技术问题在于数据库的数据传输速率慢及使用效率低,需要一种新的硬盘系统
2.需要更大的容量,以保证数据在传输过程中的流畅,提高传输效率
期望实现的主要技术目标
a 通过设计多接口的移动式硬盘阵列及其硬盘阵列主控器系统,实现了从分布式文件系统中同步上传、下载数据
b 避免了大数据传输中在上传、下载时单点拷贝的瓶颈因素,可以有效加快数据传输及其使用效率
需求解析
解析单位:天津市滨海新区 解析时间:2023-02-15
吴正斌
天津中科先进技术产业有限公司
总经理
综合评价
处理进度