PyCaret:低代码自动化的机器学习工具

PyCaret简介

随着ChatGPT和AI画图的大火,机器学习作为实现人工智能的底层技术被大众越来越多的认知,基于机器学习的产品也越来越多。传统的机器学习实现方法需要较强的编程能力和数据科学基础,这使得想零基础尝试机器学习变得非常困难。

机器学习、深度学习和人工智能(AI)的关系

PyCaret 是 Python 中的开源低代码机器学习库,可自动执行机器学习工作流程。它是一种端到端的机器学习和模型管理工具,可以成倍地加快实验周期并提高您的工作效率。与其他开源机器学习库相比,PyCaret 是一个高度封装的低代码库,可以用几行代码代替数百行代码。这使得机器学习实验呈指数级快速和高效。 

PyCaret的设计和简单性受到了公民数据科学家这一新兴角色的启发,这是Gartner首次使用的术语。公民数据科学家是超级用户,他们可以执行简单和适度复杂的分析任务,而这些任务以前需要更多的专业知识。经验丰富的数据科学家通常很难找到,而且雇佣成本也很高,但公民数据科学家可以成为缓解这一差距并解决商业环境中与数据相关的挑战的有效途径。

Pycaret的主要功能,多数可以以极少的代码自动化实现

Pycaret的特色

低代码量

与其他开源机器学习库相比,PyCaret是一个替代的低代码库,可以用很少的单词替换数百行代码。这使得机器学习实验能以指数级的速度和效率进行。PyCaret本质上是一个Python包装器,围绕着几个机器学习库和框架,如scikit learn、XGBoost、LightGBM、CatBoost、spaCy、Optuna、Hyperopt、Ray等等。除模型选择外,调参,数据预处理等等也可以通过同样的方式进行处理。

在常规的机器学习方法中,如果想要比较多个机器学习算法的准确率和耗时等信息,需要挨个进行调用或编写,然后人工进行对比,而在PyCaret中仅需一行代码即可完成。

跨环境使用

PyCaret 是 Python 中的部署就绪库,这意味着在 ML 实验中执行的所有步骤都可以使用可重现并保证生产的管道重现。管道可以保存为可跨环境传输的二进制文件格式。

Pycaret训练的模型可以保存为二进制管道

无缝衔接主流数据平台

PyCaret 及其机器学习功能与支持 Python 的环境无缝集成,例如 Microsoft Power BI、Tableau、Alteryx 和 KNIME 等。这为这些 BI 平台的用户提供了巨大的力量,他们现在可以将 PyCaret 集成到他们现有的工作流中,并轻松添加一层机器学习。

PyCaret适用人群

  • 希望提高生产力的经验丰富的数据科学家。
  • 喜欢低代码机器学习解决方案的公民数据科学家。
  • 想要构建快速原型的数据科学专业人士。
  • 数据科学和机器学习的学生和爱好者。

安装 PyCaret

准备工作

PyCaret在以下64位系统上得到测试和支持,因此,安装前需要先准备好环境支持。

1.系统环境:Windows7+/unbantu 16.04+

2.编程环境:Python3.6-3.8/Python 3.9 for Ubuntu only

最简安装

最简单安装方式是使用Python的pip包管理器安装PyCaret,只需要一行代码:

pip install pycaret

虚拟环境安装

安装PyCaret是在PyCaret中构建第一个机器学习模型的第一步。由于PyCaret会自动安装所有硬依赖项,为了避免与其他软件包发生潜在冲突,强烈建议使用虚拟环境,例如conda环境。使用隔离环境,可以独立于以前安装的任何Python包安装特定版本的pycaret及其依赖项。

# 创建conda环境
conda create --name yourenvname python=3.8# 激活上一行创建的环境
conda activate yourenvname# 安装Pycaret
pip install pycaret# 创建一个笔记本内核并调用虚拟环境
python -m ipykernel install --user --name yourenvname --display-name "display-name"

PyCaret适用的问题

分类问题

分类问题指的是可以将具有不同特征的元素分类成组的一类的问题。其目标是预测离散的、无序的分类标签。一些常见的用例包括预测客户违约(是或不是),预测客户流失(客户将离开或留下),发现的疾病(预后积极或消极),花的类型等。

图中分界线尝试将红点和黑点分开,找到这种分界线是就是一种分类问题

回归问题

回归问题是指将用于估计因变量(通常称为 "结果变量",或 "目标")和一个或多个自变量(通常称为 "特征","预测因素",或 "协变量")之间的关系。回归的目的是预测连续值,如预测销售金额、预测数量、预测温度等。

聚类问题

聚类问题是将一组对象分组,使同一组(也称为聚类)的对象比其他组的对象更相似。这包括找到共同表达的酶或者适合同一个环境的植物等。

异常检测问题

异常检测是一种用于识别罕见的项目、事件或观察结果的问题,这些项目、事件或观察结果与大多数数据有很大的不同,会引起人们的怀疑。通常情况下,异常项目将转化为某种问题,如银行欺诈、结构缺陷、医疗问题或某些少见的错误。

PyCaret解决异常检测问题的可视化呈现,黄色为异常数据

主题模型问题

自然语言处理中有一类用来分析文本数据,产生可以用于训练文本数据的主题模型。主题模型是一种统计模型,用于发现文档集合中的抽象主题。

关联规则挖掘问题

这类问题可以理解为发现数据集中变量之间的关系。它旨在使用一些不同的度量来识别在数据库中发现的强规则。

图中所示为数据之间的包含关系

时间序列预测

时间序列预测是基于按时间顺序索引(或列出或绘制)的一系列数据点,预测在后续时间的数据点,包括海洋潮汐的高度、太阳黑子的数量和道琼斯工业平均指数的每日收盘值的预测。

一行代码实现多模型比较

比较不同模型在同一任务中的表现一直是机器学习中需要得到关注的问题,这一问题在PyCaret中可以通过一行代码得到解决,这可以大大加快实验机器学习模型的速度。

best = compare_models()

用多种指标描述不同模型在同一时间序列预测问题的表现

多种可视化方式分析模型和数据

在训练完成模型后,PyCaret集成了多种用于评价模型、数据和特征重要性的可视化方式,秩序一行代码即可实现。

evaluate_model(best)

对回归模型、所用数据和特征重要性的可视化呈现

一行代码进行参数调优

对参数进行调优在机器学习模型训练中占有较大工作量,Pycaret可以选择不同迭代次数、参数搜索方式等进行参数优化,而且仅需一行代码即可实现。

tuned_dt = tune_model(dt, n_iter = 50)

一行代码进行模型融合

blender = blend_models([lr, dt, knn])

结语

PyCaret是我用过效率最高的机器学习工具,它在高度封装和高度自动化的情况下较好的保留了可配置性。我认为,PyCaret端到端的属性适合刚刚入门机器学习领域或者想要应用已有的机器学习模型和算法处理实际问题的人们。

更多关于PyCaret的信息可以查看数据驱动建模中心。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/27951.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Science子刊带来新遗传证据:早期人类驯化了自己

来源:中国生物技术网 在开始驯化狗、猫、绵羊和牛等动物前,人类可能已经有了驯化一种完全不同动物的传统,就是我们人类自己。近日,发表在《Science Advances》上的一项新研究引用从某种程度上反映驯化元素的一种疾病的遗传证据表明…

人类早期驯化VS2019的珍贵记录

代码自动补全 在输入符号的时候VS会自动把代码补全,比如我想写一个函数名mai(),但是在我打出括号“( ”的时候,VS自动把代码补成了main( 解决方法: 打开选项窗口,按图找到那个“成员列表提交字符”的栏&am…

Chart GPT 暗黑版上线,网络安全问题已经显现

前言 Chart GPT刚刚发布,一位不知名的作者将它的孪生兄弟“DAN”就在世界上最黑暗的暗网上线了。 这个黑化的GPT刚刚上线的一周后,就已经有组织利用“DAN”犯罪了。 他们利用虚拟电话号码注册各种交友平台的账号,然后再模仿有魅力的男女人…

2023最新网络安全岗位面试题汇总

前言 一、渗透测试 如何绕过CDN找到真实IP,请列举五种方法 (★★★) redis未授权访问如何利用,利用的前提条件是?(★★★) mysql提权方式有哪些?利用条件是什么? (★) windowsmysql,存在sql注入,但是机器无外网权…

Bito AI——智能编程辅助软件,提升10倍开发效率!(New)

目录 前言 [Bito News] Updates更新于2023-06-15 1、Bito融资320万美元,加速下一代版本的研发 2、支持自定义设置输出语言(超过17种语言) 3、IDE 上下文菜单中自定义模板 4、Bito CLI中引入上下文记忆 5、自定义模板(Prompt…

干货渗透测试面试题汇总

干货|渗透测试面试题汇总 以下为信息安全各个方向涉及的面试题,星数越多代表问题出现的几率越大,没有填答案是希望大家如果不懂能自己动手找到答案,祝各位都能找到满意的工作:) 注:做这个List的目标不是全,因为无论如何都不可能…

ChatGPT模型大战:讯飞星火认知大模型、百度文心一言能否击败GPT-4(含个人内测体验测试邀请码获取方法,2小时申请成功,亲测有效)

目录 前言讯飞星火内测申请申请方式内测体验登录界面 百度内测申请内测对比基本问答事实性问答科普文写作小红书文案项目计划撰写古文理解模型的常识能力和反事实推理代码理解法律相关广告话术数字排序数值计算推理解题跨语言能力文生图 总结个人感受一、你有使用过这种对话式A…

OpenAI

OpenAI ChatGPT OpenAI: https://openai.com 禾斗 ChatGPT ChatGPT: https://chat.openai.com/chat zhuce 接码(zhuce需要国外手机号接收验证码) SMS-Activate: https://sms-activate.org zhuce登录 接码 登录 ChatGPT: https://chat.openai.com/chat

Aleo隐私智能合约__火箭准备发射

文章目录 走进误区大哥大时代 点对点电子现金系统智能机时代 去中心化状态机月球与地心引力火箭Aleo 我们,都是站在巨人的肩膀上,进行不断地探索、创新,完善这个人类生态。在此,感谢前人们对去中心化技术的不断探索。 走进误区 …

讯飞版大模型来了,现场发布四大行业应用成果

文章目录 人工智能福利文章前言SparkDesk讯飞星火认知大模型简介语言理解知识问答逻辑推理数学题解答代码理解与编写亲自体验写在最后 ✍创作者:全栈弄潮儿 🏡 个人主页: 全栈弄潮儿的个人主页 🏙️ 个人社区,欢迎你的…

美国版权局《AI生成作品版权申请指南》:大利好!

真的非常有意思。 2月22日,无界AI发布了《文生文、文生图……狂飙的AIGC,会先在哪里落地?》提到当时文生文大模型还没有一家选择开源,导致小模型生态难以发展。结果3月2日,ChatGPT就开放了API,甚至在3月14日…

[Python+Django]Web图书管理系统毕业设计之数据库及系统实现源码篇

前排提醒,本文干货超多,为避免消化不良建议配合目录食用 本系列博文献给即将毕业的程序猿们,系列文章共三篇,在编写的过程中可以说几乎是参照毕业设计目录样式来进行的. 相关图表和截图也都几乎按照毕业设计论文的要求来编制,完整阅读消化此系列博文套上一个毕业论文的目录和格…

SpringBoot + Websocket + Vue 构建聊天室

前言 关于 WebSocket: 1、WebSocket 是 html5 提供的通讯协议 2、特点是建立在单个 tcp 连接上的全双工协议 3、浏览器向服务器发起 WebSocket 连接请求,当成功获取到连接后,就可以实现浏览器和服务器之间的数据传输版本 后端: springboot 2.0 前端: vu…

Geoffrey Hinton、姚期智、张钹、Sam Altman等专家共话AI安全与对齐丨2023智源大会议程公开...

6月9日,2023北京智源大会,将邀请AI领域的探索者、实践者、以及关心智能科学的每个人,共同拉开未来舞台的帷幕,你准备好了吗?与会知名嘉宾包括,图灵奖得主Yann LeCun、OpenAI创始人Sam Altman、图灵奖得主Ge…

In-context learning如何工作?斯坦福学者用贝叶斯方法解开其奥秘

译者 | 黄灿安 单位 | 东北大学自然语言处理实验室 来自 | 机器翻译学堂 进NLP群—>加入NLP交流群 作者:Sang Michael Xie和 Sewon Min 引言 去年底,OpenAI研发的ChatGPT一经面世,在引起了大家惊讶的同时,也纷纷引发大家的思考…

chatgpt赋能python:Python动态规划详解:从入门到精通

Python动态规划详解:从入门到精通 什么是动态规划? 动态规划是一种常用的算法思想,它可以解决一类优化问题,例如路径规划、序列匹配等问题。动态规划算法的基本思路是将复杂的问题分解成若干个子问题,并对每个子问题…

ChatGPT 拓展资料: 强化学习-动态规划算法

ChatGPT 强化学习-动态规划算法 强化学习是一种机器学习方法,可以帮助智能体学习如何在一个环境中做出最优的决策。在强化学习中,动态规划是一种解决问题的方法,策略迭代是其中的一种核心技术。 动态规划可以帮助智能体解决包含多个阶段和决策的问题。在这种问题中,每个阶…

生成式AI“暴走”,BAT兵戎相见?

配图来自Canva可画 事实证明,互联网大厂不会让自己错过任何一个风口。今年以来,各大互联网巨头借着ChatGPT的高热度,吹响了进攻生成式AI赛道的号角。 百度开启对标ChatGPT的大语言模型“文心一言”产品的邀请测试;腾讯AI Lab推出…

ChatGPT们都在用哪些域名?

.chat 点击前往 .chat 首年注册仅售10元 .shop |.art 点击前往 .shop |.art等域名批量注册优惠中 说到AI,随着ChatGPT的风靡,各类AI工具、APP以及相关网站仿佛雨后春笋一般,瞬间遍布互联网的各个角落。 但其实不然&…

《Google Colab 搭建一个自己的ChatGPT》

1、点击文件——新建笔记 2、代码 输入pip install openai,点击运行 3、输入以下代码 import os import openaiopenai.api_key "这是你的api_key请全部删除再粘贴到引号里面来"response openai.ChatCompletion.create(model"gpt-3.5-turbo"…