物联网30.物联网数据分析的基础-机器学习

CodeAllen2021 CodeAllen2021     2023-02-04     454

关键词:

机器学习可以说是高级分析的典型代表。机器学习领域汇集了众多技术,这些技术用于让计算机基于大量数据来学习数据的倾向并作出某些判断。机器学习的算法可以根据输入的数据类型分为“监督学习”和“非监督学习”两种。

监督学习和非监督学习

当用机器学习的算法让计算机学习数据倾向时,算法会根据用于学习的数据中是否含有“正确答案”的数据而有所不同。打个比方,假设现在要从传感器数据来判断分析设备的故障情况和建筑物的损坏情况等异常状况。如果采用监督学习的算法,就需要输入过去实际发生异常状况时的数据,即需要明确地输入“异常”的数据。说白了,算法要学习“正确答案”和“不正确答案”之间存在的差异。
相对而言,非监督学习不区分输入的数据是否存在异常,也就是说,非监督学习算法会学习数据整体的倾向,在整体中找出倾向不同的数据,将其判断为“异常值”。

 对于想要还原场景的情况,需要基于是否有当时的数据这一点来判断是采用监督学习还是非监督学习。特别是对于那些极少发生的异常情况,如果不能准备正确答案,就需要考虑采用非监督学习。另外,如果无法预测以后会发生什么异常状况,那么使用非监督学习来建立平常状态的模型,就能检测出和平常状态不同的状态(即异常)。

如果确定了想要发现的异常的种类,也采集到了足够的数据,那么采用监督学习会更加精确地检测出异常情况。

分析方法的种类

那么在理解了监督学习和非监督学习的基础上,接下来就以聚类和类别分类等为切入点来了解一下这些分析方法。根据其用法,分析方法可以分为几种。其中,图所示的3 种方法的使用频率特别高,接下来将详细讲解这3 种方法。

聚类分析 

聚类分析,其目的是基于样本(样本数据)具有的特征,把相似的样本分成多个组(聚类)。具体的聚类算法包括K-means 算法、自组织映射、层次聚类等。这些方法能够根据数据的特征找到并整合具有同样特征的数据。

K-means 算法就是针对数据的分布来事先指定要把数据分成多少个块,即分成多少个聚类,由此来机械性地生成数据块的一种算法。

类别分类

类别分类分析的目的在于把数据分成两组或者更多组。虽然有人可能会感觉它跟聚类分析很相似,但类别分析用在已经明确想好了要分类的对象,基于过去的数据来分出对象组和非对象组的场合。类别分类算法包括线性判别式分析、决策树分析、支持向量机(SVM)等。特别是支持向量机还被用于图像识别算法,即识别某张图像上都拍摄了什么内容。

维度压缩

维度压缩也叫“维度约简”或“降维”,即对于大型数据中的大量数据,尽全力留下其中的重要信息并压缩冗余的信息,借此来缩小数据量的分析方法。维度压缩包括主成分分析、因子分析、多维尺度法等。很多时候设备发来的传感器信息太多,或是要分析从无数台设备发来的海量信息时,还会出现很多不需要的信息,即对于获取结果来说没有什么用的信息。此时,通过进行维度压缩,就能切去不需要的信息,把数据转化成一种更易于分析的形式。

在物联网中应用机器学习(代码片段)

...专栏本项目探讨如何将机器学习(Machinelearning)应用到物联网(IoT,InternetofThings)中。我们将使用AndroidThings作为我们的物联网平台,并且采用GoogleTensorFlow作为我们的机器学习引擎。如今,机器学习与物联网都是技术话题中的大... 查看详情

有人物联网设4g设备为智能制造产品创业中提供通讯基础

...而不是专注于实现这种体验所需的基础设施。使用有人物联网的通讯设备收集数据,并通过有人云平台和前端设备的配合创建智能产品。 使用IoT、机器学习、人工智能和大数据等有人物联网服务来创新您的智能互联产品,以... 查看详情

物联网如何学习?

物联网如何学习?谁有好的建议呢想要成为一名物联网工程师,可以学习以下几个方面:1、物联网产业与技术导论:全面了解物联网RFID、M2M、传感网、两化融合等技术与应用。2、C语言程序设计:物联网涉及底层编程,C语言为... 查看详情

物联网必学清单

当然有!物联网(IoT)是一个非常热门的领域,涉及到数据采集、通信和智能设备等多个方面。在成为物联网专家的道路上,以下是一些建议和资源:1.学习基础知识熟悉物联网的基本概念,了解主要的应用场景和技术挑战。学... 查看详情

工业物联网笔记

...网的本质是将多种技术进行融合,通过机器学习、大数据分析、 查看详情

物联网学习之路——iot概况

物联网IoT概念  IoT,InternetofThings,即物物相连的互联网。它包含两层意思:一,以互联网为基础;二,物物相连,实现信息的交换和通信。物联网通过智能感知、识别技术与普适计算等通信感知技术,广泛应用于网络的融合... 查看详情

这几年爆火的智能物联网(aiot),到底前景如何?

...主导。因此,未来数百亿异构设备和用户并发联网产生的数据分析和融合需求将促成物联网与人工智能的深度融合。与以人为中心的互联网不同,AIoT是把电子、通信、计算机、人工智能四大领域的技术融合起来的新型网络,在... 查看详情

必须在2019年尝试的30个物联网平台

参考技术A物联网在一段时间内表现出稳定增长,专家表示,这种增长不会很快放缓。Gartner预测到2020年将有大约200亿台设备连接到物联网。相关技术的发展和解决相对较新的物联网领域仍然存在的挑战可以进一步推动该技术的大... 查看详情

嵌入式和物联网有什么关系?

嵌入式和物联网有什么关系?一文教你搞明白。物联网时代,物联网实现了人人互联,物物互联,还有就是人物互联,它是一种建立在互联网上的泛在网络。物联网技术的重要基础和核心仍旧是互联网,通过各种有线和无线网络... 查看详情

物联网工程学习路线

...,而是贯穿在前面4步中本回答被提问者采纳 参考技术B物联网的应用场景十分丰富,几乎涉及到生产生活的方方面面。物联网技术已经基本形成,物联网作为国家倡导的新兴产业备受关注。现在物联网产业也是发展迅速。现在市... 查看详情

几个物联网技术应该具备的基础功能

时下物联网的热度,一如二十年前的互联网一样,略有不同的地方可能仅仅是如今的人们能够更快的接受新技术并加以应用。前几日华为发布了业界首款5G芯片,标志着5G技术已成熟可商用,而物联网也因为5G技术而走到了工业领... 查看详情

阿里云物联网产品架构

...备集成SDK后,即可安全接入物联网平台,使用设备管理、数据分析、数据流转等功能。只有支持TCP/IP协议的设备可以集成IoTSDK。 查看详情

物联网信息安全备考精简

...0道20分判断5道 10分   计算2道 20分   问答3道 30分物联网安全体系什么物联网?概念、体系结构、特征、发展历程?物联网的概念    物联网就是一个将所有物体连接起来所组成的物-物相连的网络。它是通过使用... 查看详情

物联网解决方案架构及其流程

随着物联网或物联网解决方案的出现,许多行业都从提高生产力和运营可靠性的物联网技术中受益匪浅。物联网解决方案提供了一种设置,其中包括传感器、仪器、机器和许多其他连接设备,无需人工干预即可运行。... 查看详情

物联网数据网关支持哪些传输方式

物联网数据网关支持不同物联网设备的数据集中采集、传输和边缘计算处理,包括模拟量/状态量传感器、智能终端设备、智慧灯杆、智能配电房、工业机器人监测、冷冻机组监测、机械设备监测、智能制造设备等物联网系统... 查看详情

基于物联网的nodejs-5天学习入门指引

...一天第二天第三天第四天第五天面向读者群体❤️电子物联网专业同学,想针对硬件功能构造简单的服务器,不需要学习专业的服务器开发知识❤️❤️业余爱好物联网开发者,有简单技术基础,想针对硬件功能... 查看详情

12个数据,带你了解物联网的下一个十年

在过去的几年里,物联网(TheInternetofThings,简称IOT)从一个理论概念发展成为许多组织的首选方向,随着企业越来越多地将物联网设备集成到其网络基础设施中,他们正在寻找新的方法来利用这些设备并管理所收集的数据。接下来... 查看详情

物联网工程师分享资料

物联网工程师分享资料关于物联网的资料在闯客网技术论坛上有很多,各种毕业设计,综合案例,视频讲解都有,汇集了2018年全部的物联网资料,现在全部把它们分享出来,希望能帮到更多的人学习和项目需要的资料,资源共... 查看详情