您所在的位置: 成果库 一种面向ftp服务的数据访问方法

一种面向ftp服务的数据访问方法

发布时间: 2023-07-12

来源: 科技服务团

基本信息

合作方式: 技术服务
成果类型: 发明专利
行业领域:
电子信息技术
成果介绍
本发明涉及通信技术领域,提供了一种面向ftp服务的数据访问方法,所述方法为:使用实现分级存储功能的集群作为ftp服务器数据的存储平台。本发明提供的面向ftp服务的数据访问方法,其存储能力强,访问性能好,且部署简单,成本低。根据权利要求1所述的面向ftp服务的数据访问方法,其特征在于,在存储自动分级时,所述存储层次至少包括2级,存储层次的划分标准为:存储层次越高,访问性能越好,处理用户请求的响应时间越短。
成果亮点
一种面向ftp服务的数据访问方法,其特征在于,所述方法为: 使用实现分级存储功能的hadoop集群作为ftp服务器数据的存储平台; 所述hadoop集群通过如下步骤实现分级存储功能: 存储自动分级:hadoop集群启动,根据主机名将各个节点划分为不同的存储层次; 定向存取:选择距离近、存储层次高的空闲节点存储和读取文件; 监控数据访问操作:记录文件访问信息,并判断迀移时机是否到来,若迀移时机到来,则执行下述操作; 数据估值:根据访问记录,使用信息估值模型对数据进行估值;所述信息估值模型中所用到的模型的建立方法为:利用搜集到的文件访问记录进行建模,计算出一个反映数据热度的数值,所述数值越大,说明所述数值对应的数据以后的访问概率就越大; 数据迀移:根据所述数据的估值结果,判断数据的位置是否满足数据越热存储层次越高的特点,若不满足,则进行数据迀移,使得数据的位置满足数据越热存储层次越高的特点;在数据迀移时,通过队列过滤模型和路径匹配模型,在信息估值模型处理后得到的数值队列的基础上,形成具体的数据迀移任务,利用迀移控制模型完成数据迀移。
团队介绍
中国科学院深圳先进技术研究院提升了粤港地区及我国先进制造业和现代服务业的自主创新能力,推动我国自主知识产权新工业的建立,成为国际一流的工业研究院。 深圳先进院目前已初步构建了以科研为主的集科研、教育、产业、资本为一体的微型协同创新生态系统,由九个研究平台,国科大深圳先进技术学院,多个特色产业育成基地、多支产业发展基金、多个具有独立法人资质的新型专业科研机构等组成。开展先进技术研究,促进科技发展。信息、电子、通讯技术研究新材料、新能源技术研究高性能计算、自动化、精密机械研究生物医学与医疗仪器研究相关学历教育、博士后培养与学术交流。
成果资料
产业化落地方案
点击查看