工业领域通常需要处理时序数据,时序数据是指时间序列数据,时间序列数据是同一统一指标按时间顺序记录的数据列,即一段时间序列中的数据数据类型相同。随着越来越多的传感器被部署,时间序列的数据量逐渐增大,传统的关系型数据库已经不能满足当今时间序列的存储需求。
利用时间序列的频域特点,对时间序列值列按照需求进行频域和时域混合存储,能够适应不同的时间序列场景和用户需求,极大降低了存储空间,可通过用户设置参数实现磁盘占用和误差率间的平衡。
本发明提供一种基于时域和频域的时序数据存储方法和系统,所述方法包括将待存储的时序数据分为若干段时间序列数据,依次提取每段时间序列数据中值列的频域信息;计算所述频域信息的误差率,并与设定的可容忍误差率相比;若所述频域信息的误差率小于可容忍误差率,则该段时间序列数据的时间列存储时域信息,值列存储所述频域信息;若所述频域信息的误差率大于可容忍误差率,则该段时间序列数据的时间列存储时域信息,值列存储时域信息。
天谋科技由 Apache IoTDB 核心团队创立,团队聚焦大数据底层技术软件研发,针对企业组建物联网大数据平台时所遇到的数据体量大、采样频率高、数据乱序到达、分析需求多、存储与运维成本高等多种问题,为企业提供海量时序数据管理的高效解决方案。创始团队由 Apache(国际最大开源软件基金会)旗下 IoTDB、PLC4X 两大开源物联网项目的发起人和核心开发者组成,汇集了来自清华大学、UC Berkeley、微软、德国弗劳恩霍夫协会(Fraunhofer-Gesellschaft)、德国法兰克福能源集团等一批数据库核心技术科学家和工业资深专家,拥有十几年研究和服务工业用户的经验。在时序数据管理领域,团队成员拥有中国、美国、欧洲等发明专利30余项,并在 ICDE, SIGMOD, VLDB 等数据库顶级会议上发表论文多篇。
评价单位:“科创中国”开源产业科技服务团 (中国通信学会)
评价时间:2022-11-18
综合评价
该成果对于物联网工业场景下,企业如何更好的管理由工业场景产生的时序数据有一定的引领性作用,技术创新性很强,目标市场处于成长市场,发展空间大。
查看更多>