VisualChatGPT: 微软发布可发送和接收图片的 ChatGPT

公众号关注 「奇妙的 Linux 世界」

设为「星标」,每天带你玩转 Linux !

76430cbfe8504e1c8bd8b5a09cff18e8.jpeg

Visual ChatGPT 连接了 ChatGPT 和一系列的 Visual Foundation 模型,以便在聊天过程中发送和接收图像。

下图为演示效果:

5851379aeeaafa75f0b60ebe43431dae.gif

对该应用实现感兴趣的可以查看其论文 Visual ChatGPT: Talking, Drawing and Editing with Visual Foundation Models(https://arxiv.org/abs/2303.04671)。

整个系统架构如下所示:

2cd1c43b50d0463f8f9a37136136b1d2.jpeg

要安装的话可以安装下面的命令步骤进行:

# create a new environment
conda create -n visgpt python=3.8# activate the new environment
conda activate visgpt#  prepare the basic environments
pip install -r requirement.txt# download the visual foundation models
bash download.sh# prepare your private openAI private key
export OPENAI_API_KEY={Your_Private_Openai_Key}# create a folder to save images
mkdir ./image# Start Visual ChatGPT !
python visual_chatgpt.py

下面列出了每个视觉基础模型的 GPU 内存使用情况,可以修改 self.tools 使用较少的视觉基础模型来节省您的 GPU 内存:

Foundation ModelMemory Usage (MB)
ImageEditing6667
ImageCaption1755
T2I6677
canny2image5540
line2image6679
hed2image6679
scribble2image6679
pose2image6681
BLIPVQA2709
seg2image5540
depth2image6677
normal2image3974
InstructPix2Pix2795

Github地址:https://github.com/microsoft/visual-chatgpt

​本文转载自:「Github爱好者」,原文:https://tinyurl.com/5ccdcsnh,版权归原作者所有。欢迎投稿,投稿邮箱: editor@hi-linux.com。

f72d696754813eeb7e869dcde47b8f86.gif

最近,我们建立了一个技术交流微信群。目前群里已加入了不少行业内的大神,有兴趣的同学可以加入和我们一起交流技术,在 「奇妙的 Linux 世界」 公众号直接回复 「加群」 邀请你入群。

dc56ac2bd2e88d306c27578b9d06949b.png

你可能还喜欢

点击下方图片即可阅读

8841058e4509f57f3823b7e2c837f1c5.jpeg

Code to Image: 一款高颜值的代码截图效果美化工具

f5ee6bc2071e9a2886f563f0d7e7f903.png
点击上方图片,『美团|饿了么』外卖红包天天免费领

78de98b7aff856d2950b2bfedcef32b9.png

更多有趣的互联网新鲜事,关注「奇妙的互联网」视频号全了解!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/1153.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

调用chatgpt官方api实现聊天和绘图

首先要学会科学上网 1官方api文档 https://platform.openai.com/docs/api-reference/chat/create 2 获取key https://platform.openai.com/ 登录账号 之后点击右上角的头像,再点击View API keys 3 http调用聊天接口 调用地址https://api.openai.com/v1/chat/com…

解决chatgpt网络错误,频繁掉线的问题,那就使用KeepChatGPT

文章目录 解决chatgpt出现An error occurred. If this issue persists please contact us through our help center at help.openai.com问题起因对比原作者github地址安装步骤浏览器要求安装油猴安装KeepChatGPT插件使用方法功能栏说明功能说明如下关于 取消审计 功能关于 调整…

ChatGPT 速通手册——让 ChatGPT 来写正则表达式

regex 生成 正则表达式可谓是一门让广大程序员们又爱又恨的技术。它易学难精,而且可维护性又差,别说交接给其他同事,同一个人写的正则表达式,三个月后回头再看,也可能完全不知所云。 因此,让 ChatGPT 来写…

轻松解决ChatGPT网络报错,畅享沟通

ChatGPT的确很不错,无论是在什么岗位,使用它都可以让工作的你提升效率,可是我们经常会遇到一个神奇的网络报错(当我们一会不使用就来个这样的效果提示),是不是头大? 好了,开始进入正…

完美解决ChatGPT网络错误,不再频繁地刷新网页(分享好用的插件KeepChatGPT)

最近发现一个好用的浏览器插件KeepChatGPT!完美解决ChatGPT网络错误,不再频繁地刷新网页,敲好用!!! 废话不多说上链接! 安装渠道如下 1 Github:https://github.com/xcanwin/KeepCh…

ChatGPT报错“network Error“?

文章目录 问题一、为什么ChatGPT会报错"network Error"?二、ChatGPT Plus -GPT4如何开通?结尾 问题一、为什么ChatGPT会报错"network Error"? ChatGPT报错“Network Error”,通常意味着它无法连接到服务器或API服务不可用。以下是…

chatgpt api极简入门(参考官网教程)

写在前面 心血来潮,复试完结束很摆,研究点东西玩玩,之前之知道nonebot搭建qq机器人的方法和步骤,这次记录下自己使用openai,gpt3.5的api的代码,参考自openai的官网。 环境 要求 python 版本 >3.8 &…

解决ChatGPT网络总是掉线问题

解决ChatGPT网络总是掉线问题 问题描述 1.我们在使用ChatGPT时,总是会遇到如下图网络掉线问题,是什么原因呢?简而言之,服务器检测到1-2分钟内你没有与之发生数据交互,认为你已经掉线了,就主动断开了链接&…

在 1 分钟内使用 ChatGPT 构建一个完整的网站

欢迎来到令人兴奋的自然语言处理和机器学习世界!今天,我们将探索 ChatGPT 的功能,这是一种由 OpenAI 开发的最先进的语言模型。ChatGPT 最令人印象深刻的功能之一是它能够根据简单的描述生成源代码。想象一下,无需自己编写一行代码…

ChatGPT,真香!谷歌顶级AI人才组团叛逃OpenAI

【导读】据The Information爆料,OpenAI在最近几个月里挖了至少十几名谷歌AI的员工,而这些工程师都在ChatGPT的研究中发挥了至关重要的作用。 如今已经没人能否认,OpenAI凭ChatGPT火遍了全球。 所有AI从业者和投资人都想知道,一家…

ChatGPT通过谷歌L3入职测试,人类码农危矣?

一条消息最近在硅谷热传:“ChatGPT成功通过了谷歌的面试,拿到了年薪18万美元的L3工程师offer!” 既给科学论文当共同作者,又能替代人类码农,还能给总统讲话写稿子,这个ChatGPT,怕是真要通天了。…

为什么 ChatGPT 会引起 Google 的恐慌?

在 ChatGPT 尚未全面开放使用之际,它散发的巨大威力,似乎已经让行业内的竞争对手感到了威胁。 整理 | 屠敏 出品 | CSDN(ID:CSDNnews) 距离 ChatGPT 上线不足一个月的时间,其已经成为各行各业智囊团中的“网…

chatGPT的谷歌浏览器Monica插件的使用

前提说明: 我们使用Monica插件,可以在使用谷歌浏览器的时候使用ChatGPT,平常可以和快速地解决我们遇到的开发问题。 1、需要使用的的插件百度云盘连接如下:链接:https://pan.baidu.com/s/1IWiDS19U9qSlBcQzFrznMA 提取…

首个“开源ChatGPT”来了:基于谷歌5400亿参数大模型,华人小哥出品,网友吐槽:这谁能跑?

就说程序员的手速有多快吧,首个开源ChatGPT项目已经出现了! 基于谷歌语言大模型PaLM架构,以及使用从人类反馈中强化学习的方法(RLHF),华人小哥Phillip Wang复刻了一个ChatGPT出来。 项目GitHub星已经超过1…

ChatGPT有多厉害,影响到谷歌地位?

Datawhale干货 技术:ChatGPT,来源:量子位 AI神器 ChatGPT 火了。 能直接生成代码、会自动修复bug、在线问诊、模仿莎士比亚风格写作……各种话题都能hold住,它就是OpenAI刚刚推出的——ChatGPT。 有脑洞大开的网友甚至用它来设计…

ChatGPT能够干翻谷歌吗?

目前大多数人对于ChatGPT的喜爱,主要源自于其强大的沟通能力,当我们向ChatGPT提出问题时,它不仅能够为我们提供结论,而且还能够与我们建立沟通,向ChatGPT提出任何问题,感觉都像是在与一个真实的人类进行交谈…

【ChatGPT案例】10大ChatGPT谷歌插件神器

ChatGPT相信大家都用过,但是如何高效使用,并真正挖掘出ChatGPT的强大能力呢?关键之处就在于Prompts! 可是,编写prompts是一门熟能生巧的技术活,我们能不能一键拥有那些惊艳的prompts呢?答案就是…

[chatGPT] 如何通过JNI在Android上显示实时视频流

目录 背景正文layout xmljavaCjava 总结一: 追问:CC 总结二:答疑解惑C 画蛇添足 视频不显示黑屏 最后感叹科技的更新速度,真的程序员都可能会被替代,下一个时代最大的问题应该是劳动力过剩,导致社会性结构改…

使用Chat gpt提高Android开发效率

简介 在过去几周里,我进行了一项令人大开眼界的实验,将 Chat-GPT(我使用的是 Bing Chat,它在后台使用了 GPT-4,并且可以免费使用)融入到我的日常 Android 开发工作流程中,以探索它是否能够提高…

ChatGPT解答:安卓APP耗电量测试方案和源码,用Android代码实现

ChatGPT解答:安卓APP耗电量测试方案和源码,用Android代码实现 安卓APP耗电量测试方案和源码,用Android代码实现 作为一名AI助手,我不会编写代码,但我可以为您提供一些关于安卓APP耗电量测试方案和源码的信息和建议。 …