这10个python机器学习库,你用过哪些?

Wang_AI Wang_AI     2022-12-05     800

关键词:

来源:量子位

1. Awkward Array

根据官方介绍,Awkward Array用于嵌套的、大小不一的数据,包括任意长度的列表、记录、混合的类型和缺失数据,使用起来类似NumPy

看起来像是升级版的NumPy呀。

果然,不同长度的数组可以直接放在一起运算。

并且,官方表示Awkward Array不仅使用起来更简便,在速度内存上也有量级的优势。

看看是不是可以安排上了~

https://pypi.org/project/awkward/

2. Jupytext

相信大家对Jupyter Notebook都不陌生。

当你有了Jupytext这个小插件就可以将Jupyter Notebook和IDE完美结合,听起来是不是很棒!

从此Jupyter Notebook可以被存储为Markdown文件或多种语言的脚本文件。

Jupytext可以做的事主要有:

  • Jupyter Notebook的版本控制

  • 在你喜欢的文本编辑器中编辑、合并或重构Notebook

  • 在Notebook上使用Q&A检查

在Python中使用的样子:

此项目在Github上已有5k+star。

https://github.com/mwouts/jupytext

3. Gradio

比Streamlit还轻量UI设计库Gradio让你轻松在浏览器中“玩转”你的模型,可以直接在浏览器中拖放图片,粘贴文字,录制声音,等等。

只要将launch()函数中的参数设置为share=True,还能得到一个可分享网址,拿到链接的朋友在电脑和手机端都能打开,活脱脱就是一个小程序

时常需要做Demo的小伙伴快看起来吧,此项目在Github上已有4.5k+star。

https://github.com/gradio-app/gradio

4. Hub

这个Hub在数据管理和数据预处理上可是一把好手。

它可以处理任何类型任何大小的数据,并且因为数据储存在云端上,所以可以无缝在任何机器上访问。

被压缩为二进制字节的数据可以被存储在任何地方,并且只有在需要的时候才会被获取,所以没有TB级硬盘也可以处理TB级数据

Hub贴心地提供了重要API,支持数据在常用工具(PyTorch等)上的使用,数据版本控制,数据转换等功能。

此项目在github上已有4.1k+star。

https://github.com/activeloopai/Hub

5. AugLy

AugLy是facebook最新推出的数据增强库,同时支持语音文本图像视频类型的数据,包含了100多种增强方式。

数据对于模型训练至关重要,而标注大规模数据十分困难。由于人力资源,和模型特性的限制,数据增强的应用越来越广泛。

AugLy的优点

  • 处理类型更为全面。其他的数据增强库,例如Albumentations和NVIDIA DALI,主要负责图像相关数据的处理,文字数据不支持。

  • 处理方式十分人性化。AugLy可以将一张图片做成备忘录,在图片/视频上叠加文字/Emojis,转发社交媒体上的截图,还可以帮助你处理诸如拷贝检测、仇恨言论检测或版权侵权等问题。

此项目在Github上已有4.1k+star。

https://github.com/facebookresearch/AugLy

6. Evidently

Evidently是用来监测模型效果的工具,可从Pandas DataFrame或csv文件中生成交互式可视化报告JSON格式效果简介。在Jupyter Notebook中可以使用。

目前可以提供6种报告:数据漂移、数值目标漂移、分类目标漂移、回归模型性能、分类模型性能和概率分类模型性能。

此项目在Github上已有1.8k+star。

https://github.com/evidentlyai/evidently

7. YOLOX

如果你熟悉YOLO的话,那你或许会对旷视今年推出的YOLOX感兴趣。

YOLO就是那个目标检测算法,可以被使用在汽车自动驾驶等前沿技术中。

YOLOX是YOLO的无锚版本,设计更简单,但性能更好!它的目标是在研究界和工业界之间架起一座桥梁,同时弥合两方之间的差距。


这个Github上的开源项目在短短半年内已获得5.2k+star。

https://github.com/Megvii-BaseDetection/YOLOX

8. LightSeq

正如它的名字一样,LightSeq是一款由字节跳动开发的支持BERT、GPT、Transformer等众多模型的超快推理引擎。

可以看到它的表现,比FasterTransformer还要Fast

LightSeq支持的模型也是非常全面

总之就是两个字“好用”。此项目在Github上已有1.9k+star。

https://github.com/bytedance/lightseq

9. Greykite

想预测COVID-19的恢复速度吗?那就来看看LinkedIn为了自家时间序列预测需求开发的Greykite吧。

功能全面(多种时间趋势),界面直观,预测速度快和可扩展性强是它最大的亮点。

被应用在上面的三大算法:

  • Silverkite (Greykite’s flagship algorithm)

  • Facebook Prophet

  • Auto Arima

感兴趣的话就去研究看看吧,此项目在Github上已有1.4k+star。

https://github.com/linkedin/greykite

10. Jina and Finetuner

如今,在搜索引擎等应用上,语义识别的地位越来越高,因为它可以有效避免字词匹配的局限。

不过语义识别涉及的神经网络可能会让很多人感到头大,JinaFinetuner可以帮你解决这些问题。

Jina是一个神经搜索框架,使任何人都能在几分钟内建立可扩展的深度学习搜索应用程序。

Finetuner配合Jina帮助你对神经网络进行调参,以获得神经搜索任务的最佳结果。

Jina和Finetuner适合没什么经验,又想尝试的朋友。

https://github.com/jina-ai/finetuner

参考链接:

https://tryolabs.com/blog/2021/12/21/top-python-libraries-2021

机器学习必知的10个python库

来源:网络python是最流行和使用最广泛的编程语言之一,它已经取代了业界许多编程语言。python在开发人员中流行的原因有很多。然而,最重要的一点是它有大量的库供用户使用。python的简单性吸引了许多开发人员使... 查看详情

机器学习必知的10个python库

来源:网络python是最流行和使用最广泛的编程语言之一,它已经取代了业界许多编程语言。python在开发人员中流行的原因有很多。然而,最重要的一点是它有大量的库供用户使用。python的简单性吸引了许多开发人员使... 查看详情

机器学习必知的10个python库

点上方人工智能算法与Python大数据获取更多干货在右上方 ··· 设为星标 ★,第一时间获取资源仅做学术分享,如有侵权,联系删除转载于:机器学习算法与Python实战Python是最流行和使用最广泛的编程语言之一&... 查看详情

机器学习必知的10个python库

点上方人工智能算法与Python大数据获取更多干货在右上方 ··· 设为星标 ★,第一时间获取资源仅做学术分享,如有侵权,联系删除转载于:机器学习算法与Python实战Python是最流行和使用最广泛的编程语言之一&... 查看详情

这14种嵌入式实时系统,你用过哪些?(代码片段)

满足实时控制要求的嵌入式操作系统(RTOS)以下介绍14种主流的RTOS,分别为μClinux、μC/OS-II、eCos、FreeRTOS、mbedOS、RTX、Vxworks、QNX、NuttX,而国产的嵌入式操作系统包括都江堰操作系统(djyos)、AliosThings、HuaweiLiteOS、R... 查看详情

这14种嵌入式实时系统,你用过哪些?(代码片段)

满足实时控制要求的嵌入式操作系统(RTOS)以下介绍14种主流的RTOS,分别为μClinux、μC/OS-II、eCos、FreeRTOS、mbedOS、RTX、Vxworks、QNX、NuttX,而国产的嵌入式操作系统包括都江堰操作系统(djyos)、AliosThings、HuaweiLiteOS、R... 查看详情

10个有趣又能编译为javascript的语言,你用过哪些?(代码片段)

现代应用相比普通的网页有不同的要求。但是浏览器是一个有着一套(大部分)固定可用的技术的平台,JavaScript依然是web应用的核心语言;任何需要在浏览器上跑的应用都需要使用这种语言。我们都知道Javascript并不是最好的语... 查看详情

25条实用的python一行代码,你用过哪些?

自从我用Python编写第一行代码以来,就被它的简单性、出色的可读性和特别流行的一行代码所吸引。在下面,我将给大家介绍并解释一些非常实用Python一行程序。可能有些你还不知道,但对你未来的Python项目很有用。... 查看详情

5个非常有用的laravelblade指令,你用过哪些?(代码片段)

接下来我将带大家认识下五个LaravelBlade指令,这些指令将让你在解决特定问题时如虎添翼。如果你是刚接触Laravel的用户,这些小技巧能带你认识到LaravelBlade模板引擎的便捷与高效。废话少说,让我们开始吧。1.检测用户是否认证... 查看详情

你用过哪些好用的开源软件?

参考技术A我推荐一个基于springcloud外延的一个开源项目,主要是针对企业信息化方向的,做得比较不错能开源,支持商用。里面实现了SaaS(用户与租户的多对多关系)、统一多模式登陆、在线表单配置、在线列表页配置,在线... 查看详情

你用过的 NSLog 都有哪些独特的用途?

】你用过的NSLog都有哪些独特的用途?【英文标题】:WhataresomeuniqueusesofNSLogyouhaveused?你用过的NSLog有哪些独特的用途?【发布时间】:2009-05-2312:42:50【问题描述】:您在调试时使用的NSLog有什么独特或特殊的用途吗?【问题讨论... 查看详情

2019年10个最佳linux发行版,你用过几个?如何选择适合自己的?

...源软件和Linux的普及度逐年增加,并且越来越多的人正在学习Linux。对于那些用户,选择具有平滑学习曲线的Linux发行版至关重要。这种易用性是为初学者推荐Linux发行版时要牢记的最有价值的一点。LinuxMint是发展最快的Linux发行... 查看详情

这12款idea插件你用过几款?

1.KeypromoterX2.StringManipulation3.BackgroundImagePlus4.CodeGlance5.Requestmapper6.Translation7.AlibabaJavaCodingGuidelines8.RainbowBrackets9.IndentRainbow10.GrepConsole11.MaterialThemeUI12.leetcodee 查看详情

[react]你用过react版本有哪些?

[react]你用过react版本有哪些?react@17.0.2 个人简介我是歌谣,欢迎和大家一起交流前后端知识。放弃很容易,但坚持一定很酷。欢迎大家一起讨论主目录与歌谣一起通关前端面试题 查看详情

python语言下的机器学习库

Python语言下的机器学习库Python是最好的编程语言之一,在科学计算中用途广泛:计算机视觉、人工智能、数学、天文等。它同样适用于机器学习Python语言下的机器学习库Python是最好的编程语言之一,在科学计算中用途广泛:计算... 查看详情

这10种神级性能优化手段,你用过几个?

推荐阅读:应用架构、技术架构、安全架构、部署架构上篇引言:取与舍软件设计开发某种意义上是“取”与“舍”的艺术。关于性能方面,就像建筑设计成抗震9度需要额外的成本一样,高性能软件系统也意味着... 查看详情

今天才发现,原来不使用工具,电脑也能快速截图,你用过哪些?

相信大家都用过截图,对于QQ微信截图,大家都已经会了,这里就不多说了,今天来教大家不使用工具,也能直接在电脑中截图的3种方法。下面这4个键盘上的按键,是我们在截图中需要用到的。•S键•Win键•Shift键•Pr... 查看详情

[react]在react项目中你用过哪些动画的包?

[react]在React项目中你用过哪些动画的包?react-transition-group个人简介我是歌谣,欢迎和大家一起交流前后端知识。放弃很容易,但坚持一定很酷。欢迎大家一起讨论主目录与歌谣一起通关前端面试题 查看详情