您所在的位置: 成果库 智能装修行业信息大数据整合软件

智能装修行业信息大数据整合软件

发布时间: 2022-08-27

来源: 科技服务团

基本信息

合作方式: 技术转让
成果类型: 发明专利
行业领域:
电子信息技术
成果介绍
1.系统采用一种基于JSON的数据中间格式。其行业数据将由数据网关层的数据网关服务器进行接收,将数据翻译成中间格式。采用这种分层的处理方式,能够很好地解除数据处理过程中不同组件之间的耦合,并且能实现较好的性能。 2.系统的大数据处理能力建立在Hadoop平台的基础之上,通过在同一个集群上部署HDFS集群和YARN集群,获得了能够应对大数据的存储资源和计算资源。利用YARN提供的计算资源,系统得以使用SparkStreaming处理流式数据,Spark处理批量数据。
成果亮点
1.采用了NiFi来整合这些来源的数据,可以通过其内置的数据处理器将各种类型的数据转化为数据流文件的形式并加以管理。通过选择合适的数据处理器,将获取的数据以数据流文件的形式在 NiFi的处理器之间传输。 2. 系统内置了一个基础的数据展现接口API服务器,该服务器可以通过一定格式的对外接口,将HDFS 集群中的文件,Kafka中的流式数据和暂存数据库中的数据提供给外部应用。
团队介绍
哈尔滨熊客科技有限公司成立于2019年7月5日,注册资金50万元整,主要从事互联网、电子信息、计算机软硬件的技术开发、技术咨询、技术服务、技术转化,设计、制作、代理发布国内广告业务、市场营销策划,商务咨询服务,网络工程,房地产经纪服务,室内装修,经销:计算机软硬件、通讯器材等相关业务。本公司由前身“旭美”装饰经过不断的转型升级成长为哈尔滨熊客科技有限公司,充分证实了创始人韩洪斌的创业经历,也见证了所有“熊客”团队的不懈努力。
成果资料