automl学习---机器学习01

lifengb511 lifengb511     2022-12-13     592

关键词:

一、机器学习

 1、机器学习框架

  技术图片

  转换为网络结构,如下图所示:

 技术图片

2、框架分析

 (1)数值特性:

  ① 连续特征:log1P、|x| 、ex、归一化、离散化、顺序号等。

  ② 离散特征:频率、目标编码、One-hot 编码、合并、Label-Encoder 等。

(2)特征提取(以文本为例):

技术图片

  特征特征提取与特征选择有很大的不同:前者包括将任意数据(如文本或图像)转换为可用于机器学习的数值特征。后者是将这些特征应用到机器学习中。

(3)交叉特征:

  ① 文本交叉特征:文本相似度、N-gram 集合关系、词向量差、子串匹配、模糊匹配等。

  ② 数值交叉特征:a-b 、|a-b| 、a>b 、a*b 、 a/b 、 (a-b)2 等。

(4)特征选择、降维:

  ① 特征选择:Stepwise Regression(逐步回归)、特征重要性 ;

  ② 随机投影:Locality-Sensitive Hashing 、随机投影 ;

  注:随机投影矩阵的维度和分布是受控制的,所以可以保存任意两个数据集的距离。因此随机投影适用于基于距离的方法。

  ③ 线性投影:PCA(主分量分析)、LDA(线性判别分析);

  ④ 非线性投影:Auto-Encoder(自动编码??)、GDA(标准广义判别分析)。

 (5)模型选择、调参:

  ① 模型选择:暴力搜索 ;

  ② 超参数选择:网格搜索、随机搜索、Bayes Optimization(贝叶斯优化)。

二、深度学习

1、深度学习框架

技术图片

  转换为网络结构,如下图所示:

技术图片

2、框架分析

  类似于机器学习的分析。

3、Neural Architecture Search(神经网络搜索)

技术图片

4、控制器的两种方案

技术图片

 

第四范式涂威威:automl回顾与展望

...家人才的依赖?自动机器学习(Automatic/AutomatedMachineLearning,AutoML)应运而生。其研究目的就是为了使机器学习过程自动化,减少、甚至完全规避人类专家在这个过程中的参与度。理论出发点设计机器学习算法是一件困难重重的事情... 查看详情

一文彻底搞懂自动机器学习automl:evalml(代码片段)

...个常用框架:EvalML,一起学习如何在Python中将EvalML用于AutoML,并通过一个简单实例说明如何使用EvalML为二​分类任务。喜欢本文记得收藏、点赞、关注。完整版代码、数据、技术交流,文末获取一般来说,要构建一... 查看详情

云极datacanvas发布2021automl自动机器学习白皮书|附完整下载

...术支出占整体IT支出的比例也将从2020年的5.2%提升至9.1%。AutoML技术将为企业数智化升级带来何种机遇和可能?九章云极DataCanvas联合全球知名的研究机构IDC中国重磅发布《引入A 查看详情

不懂就学—什么是automl?

...训练和调优自动建模,希望机器能自己解决这一切。AutoML全称是自动化机器学习, 查看详情

不懂就学——什么是automl?

...训练和调优自动建模,希望机器能自己解决这一切。AutoML全称是自动化机器学习, 查看详情

什么是自动机器学习?它有哪些用处?

...器学习1、自动机器学习的概念:自动机器学习(AutoML)旨在通过让一些通用步骤(如数据预处理、模型选择和调整超参数)自动化,来简化机器学习中生成模型的过程。AutoML是指尽量不通过人来设定超参数,而... 查看详情

automl---machinelearningforautomatedalgorithmdesign.

 自动算法的机器学习:MachineLearningforAutomatedAlgorithmDesign.   http://www.ml4aad.org/ AutoML——降低机器学习门槛的利器:https://zhuanlan.zhihu.com/p/27792859 查看详情

什么是自动机器学习?它有哪些用处?

...器学习1、自动机器学习的概念:自动机器学习(AutoML)旨在通过让一些通用步 查看详情

什么是自动机器学习?它有哪些用处?

...器学习1、自动机器学习的概念:自动机器学习(AutoML)旨在通过让一些通用步 查看详情

什么是自动机器学习?它有哪些用处?

...器学习1、自动机器学习的概念:自动机器学习(AutoML)旨在通过让一些通用步 查看详情

第四范式涂威威:automl技术现状与未来展望

以下内容是对AutoML技术现状与未来展望讲座的总结。1.机器学习定义《西瓜书》中的直观定义是:利用经验来改善系统的性能。(这里的经验一般是指数据)Mitchell在《MachineLearning》一书中的较为形式化的定义是一个程序通过给... 查看详情

不懂就学——什么是automl?

...训练和调优自动建模,希望机器能自己解决这一切。AutoML全称是自动化机器学习,指的是根据任务目标,自动实现模型构建、筛选技术。对AutoML来说,模型的生成和评估是最难的,也是最重要的部分。构建模... 查看详情

salesforce开源transmogrifai:用于结构化数据的端到端automl库

AutoML即通过自动化的机器学习实现人工智能模型的快速构建,它可以简化机器学习流程,方便更多人利用人工智能技术。近日,软件行业巨头Salesforce开源了其AutoML库TransmogrifAI。SalesforceEinstein数据科学高级总监ShubhaNabar在Medium上... 查看详情

mooc机器学习-01机器学习

1关于机器学习  机器学习是实现人工智能的手段,其主要研究内容是如何利用数据或经验进行学习,改善具体算法的性能     多领域交叉,涉及概率论、统计学,算法复杂度理论等多门学科    广泛应用于网络搜索、... 查看详情

01_机器学习简介

机器学习目标: 以算法、案例为驱动的学习,浅显易懂的数学知识。目标: 熟悉机器学习各类算法的原理    掌握算法的使用,能够结合场景解决实际问题    掌握机器学习算法库和框架的技能 机器学习主要领... 查看详情

python机器学习01_机器学习概述

...深蓝到阿法狗,人工智能已经成为未来趋势。而机器学习又是人工智能的一大重要分支,所以学习机器学习也是一个很好的选择。本系列文章将使用通俗的语言讲解机器学习,并使用scikit-learn模块实现常用的机器学习... 查看详情

python机器学习01_机器学习概述

...深蓝到阿法狗,人工智能已经成为未来趋势。而机器学习又是人工智能的一大重要分支,所以学习机器学习也是一个很好的选择。本系列文章将使用通俗的语言讲解机器学习,并使用scikit-learn模块实现常用的机器学习... 查看详情

机器学习基石-01

  查看详情