磁盘故障预测技术研究
价格 双方协商
地区: 北京市 市辖区 石景山区
需求方: 抖音***公司
行业领域
电子信息技术
需求背景
1.必要性:磁盘故障严重影响系统的可靠性:磁盘故障会影响系统服务,甚至导致数据丢失,对数据安全及业务系统的稳定运行产生严重的冲击。尽管磁盘中采用了RAID等防御机制以及SMART预警机制,但单纯的SMART预警机制的故障预测准确率低,系统的可靠性和可用性仍受到严重影响。2.磁盘故障预测的复杂性:字节磁盘数量庞大、种类繁多,包括HDD、SSD,来自不同厂商的不同型号,此外还有部分自研盘。这些对磁盘故障预测工作带来较大的挑战:不同类型的磁盘SMART存在差异,同样的属性可能存在不同的含义;不是所有的SMART属性都与故障相关;磁盘正负样本比例高度不均;部分类型磁盘样本不足等,需要借助专业的学术研究成果来完成。
需解决的主要技术难题
基于上述实际背景,本项目对字节数据中心磁盘故障问题展开研究,具体目标是高质量HDD和SSD故障预测模型的构建、并部署在字节数据中心取得良好实际性能表现。总体研究思路是:针对字节磁盘故障预测问题的特点,拟定总体技术路线。采用监督学习方法构建故障盘样本较丰富情况(如HDD磁盘)的预测模型;采用无监督学习方法构建故障盘样本稀缺情况(如SSD磁盘)的预测模型。
期望实现的主要技术目标
1 基于监督学习的HDD磁盘故障预测2 基于无监督学习的SSD磁盘故障预测3 基于多模态运维数据的磁盘故障预测技术研究(探索)
需求解析
解析单位:“科创中国”南开大学专业科技服务团(南开大学) 解析时间:2022-11-28
周达
南开大学
项目主管
综合评价
处理进度