科创中国
一种大数据的数据配置方法和系统
发布时间: 2023-09-24
来源: 科技服务团
基本信息
合作方式：
技术许可
成果类型：
发明专利
行业领域：
电子信息技术,高技术服务业,计算机及网络技术
成果介绍
本发明涉及信息处理领域，公开了一种大数据的数据处理方法和系统，所述方法包括设置名称节点，数据节点和用户端，其中，所述名称节点被配置为中心管理服务器，将描述性元数据以列表形式存储在名称节点的内存中，响应于用户端对文件的访问请求，提供内部元数据服务；在所述名称节点处，设置有静态缓存队列，所述静态缓存队列，存储对应热点文件的分块访问数据，以及在数据节点设置重定向消息，将数据的访问和地址变更能够及时反馈到用户端，实现了用户对数据节点信息的访问的快捷性。
成果亮点
文件分片发送给选择的数据服务器集群进行存储；副本数据节点的选取考虑集群稳定性和负载均衡。当所有块副本保存完毕后，确认消息返回用户端。用户端通知名称节点数据上传完毕并且关闭连接通道。
团队介绍
大数据国家工程研究中心累计投资3亿余元条件建设和科研运行经费，完成科研条件建设，组建了一支330余人的科研团队，其中，专业技术人员271人，博士46人，硕士研究生142人，正高级职称23人，高级工程师55人。同时聘请了陈润生、沈昌祥、王陇德、杨小牛、岳清瑞、王坚等6位院士担任领军专家。
成果资料
成果综合评价报告
评价单位：“科创中国”贵州科技服务团 (贵州省科学技术协会) 评价时间：2023-10-30
马惠铃
观山湖区大数据局呼叫办
高级工程师
综合评价
经过细致的技术审查和深入的讨论，专家组对这种大数据的据配置方法和系统给予了高度的认可。该系统在解决现今大规模数据挑战时显现出卓越的技术优势。特别是其在海量数据挖掘的的能力，以及其独特储存结构、数据的副本备份，都让它在同类产品中脱颖而出。该系统采用的先进算法和实时分析工具为用户提供了深度、即时的数据洞察，这在许多关键决策场景中具有不可估量的价值。同时，该系统在数据安全、数据访问方面的设计也为数据保护设置了新的行业标准。但也有专家提出，随着行业发展和新技术的快速进化，该系统需要不断的迭代更新，以适应未来更复杂的数据处理需求。此外，针对特定行业或应用的定制能力也是系统未来发展的重要方向。期待其为推动整个行业技术进步做出更大贡献。
查看更多>
微信公众号
下载app
Copyright © 2022 中国科学技术协会 版权所有 | 京ICP备16016202号-20
京公网安备 11010202008974号