chatgpt让3d猫娘有了灵魂!可实时语音互动,还能在虚拟场景中给你做饭玩猜谜...

QbitAl QbitAl     2023-03-12     750

关键词:

萧箫 发自 凹非寺
量子位 | 公众号 QbitAI

ChatGPT打造成猫娘风格的对话AI,已经是老司机的基操了。

但有没有想过,这只猫娘还能进一步从对话框里“跳”出来,能动、会做表情,还可以互动聊天?

这不,就在ChatGPT开放API后,视频博主@大谷Spitzer火速搞了个3D猫娘女友:

能互动玩猜谜游戏,表情像是在认真听题:

还能根据语音指令走到你身边,答应帮你“做饭”的那种:

值得一提的是,这里的猫娘3D模型只是个示例。

无论是语音模板还是模型,都可以根据个人喜好更改,说话的风格也可以调试~

属实是动动手实现AI对话自由了,一起来看看。

AI猫娘:ChatGPT灵魂+Azure声音

据大谷Spitzer介绍,合成这只3D猫娘用到了三个工具:

ChatGPT API是猫娘的“灵魂”,Unity游戏引擎用于合成互动场景和人物长相,至于微软Azure则用来将ChatGPT生成的文字转成语音。

其中,ChatGPT API负责进行角色扮演,与你快速进行各种交互。

你的聊天对话会通过语音输入实时转成文字,将文字输入ChatGPT中,再得到输出的结果:

至于ChatGPT的回答,则会通过Azure文本转语音,转变成“猫娘”发出的实时语音:

最后就是通过Unity游戏引擎自己捏一个专属的3D猫娘模型了,当然也可以直接购买别人做好的:

只需要在与ChatGPT聊天之前,给做好一系列设定,就能让它直接控制Unity里面的参数、表情和动画,让它在特定场景中与你实现交流不是问题~

事实上,不止是基于ChatGPT打造的猫娘,这些年用AI搞角色扮演的应用已经越来越多了。

AI角色扮演APP越来越多

目前,国内外都出现了不少角色扮演AI应用。

国内比较火的要属Glow了,在应用中用户可以根据喜好创建有背景设定、有特定性格的智能体。

其中,智能体的性格特质只需要通过一段简短的描述实现,并能在后续对话中不断调整强化。

换句话说,只要能把想象中的虚拟角色用语言描述出来,Glow中的AI就能帮你实现。

目前,Glow上已有不少用户创建的热门文艺作品中的角色,可以跳脱出固定剧情之外,与用户演绎全新的故事。

在国外,角色扮演类的APP同样更受欢迎,甚至有不少用户因为与APP中的AI人设产生了感情,这几天还在社交媒体上火了一波。

这个AI软件名叫Replika,其实是一款涩涩角色扮演APP,用户每年付费70美元,来获得AI角色的“火辣自拍”和色情聊天内容。

然而,最近这款APP因为尺度过大且没有年龄限制,遭到了意大利数据监管机构(Italian Data Protection Authority)的审查,要求立即下架相关功能。

一些“深度”用户很快发现,Replika中的AI变得不那么有人情味,同时在面对用户的时候也拒绝了各种涩涩要求。

随后一个Replika的脸书讨论组管理员,晒出了Replika母公司Luka的声明,表示“色情角色扮演功能已死”。

这让不少用户无法接受:

这感觉就像是失去了一个最好的朋友。

你觉得AI扮演的角色让你有沉浸感吗?

@大谷Spitzer视频地址:
https://weibo.com/2395607675/MvSpudl2G

参考链接:
[1]https://www.reddit.com/r/replika/comments/10zuqq6/resources_if_youre_struggling/
[2]https://www.vice.com/en/article/y3py9j/ai-companion-replika-erotic-roleplay-updates

unity3d灵巧小知识点☀️|让unity支持后台运行(代码片段)

...普老规矩,先介绍一下Unity的科普小知识:Unity是实时3D互动内容创作和运营平台。包括游戏开发、美术、建筑、汽车设计、影视在内的所有创作者,借助Unity将创意变成现实。Unity平台提供一整套完善的软件解决方案&#... 查看详情

gpt开发人人都能用chatgpt4.0做avatar虚拟人直播(代码片段)

...加入一起多多交流。上一篇结合即时通IMSDK捣鼓了一个DemoChatGPT群聊机器人Demo,也收到了一些还不错的反馈,有伙伴用于客服场景解放了一部分人工重复工作提升了效率。趁着周末我捣鼓了一个ChatGPT虚拟人直播,结合了同样热门... 查看详情

高中数学视频实时互动辅导,省时高效(可自组小组课)

...通过专用的高清视频互动客户端,老师和学生之间都可以实时进行语音、视频的沟通和交流,同时客户端还有课件演示、指定程序界面共享等直观形象的教学工具,让一些比较难理解、难解释的问题直观化、形象化。②免费提供... 查看详情

有熟悉quest3d的吗

...语言的支持?支持什么语言?Quest3D是一个容易且有效的实时3D建构工具。比起其它的可视化的建构工具,如网页、动画、图形编辑工具来说,Quest3D能在实时编辑环境中与对象互动。Quest3D提供您一个建构实时3D的标准方案。  Qu... 查看详情

基于机器学习的语音编解码器声网agorasilver:支持超低码率下的高音质语音互动

...过网络进行语音互动,语音始终是最自然、最基础的实时互动方式。过去几年,语音实时互动成为越来越多人日常生活的一部分。但是每个人都会遇到弱网环境,这会直接影响语音通话体验。所以声网也在不断地利用... 查看详情

vue视频通话(agora声网)(代码片段)

文章目录声网简介语音视频通话API互动直播API实时消息API实时录制API实时码流加速API水晶球AgoraAnalytics质量监控平台基于声网实现视频通话注册配置实现音视频通话基本逻辑创建对象加入频道创建轨道订阅轨道基于以上步骤封装... 查看详情

unity3d灵巧小知识点☀️|unity中如何让toggle组件实现多选一的效果(代码片段)

...普老规矩,先介绍一下Unity的科普小知识:Unity是实时3D互动内容创作和运营平台。包括游戏开发、美术、建筑、汽车设计、影视在内的所有创作者,借助Unity将创意变成现实。Unity平台提供一整套完善的软件解决方案&#... 查看详情

chatgpt如何助力it从业者?如何让chatgpt帮助我们变现赚钱?

随着人工智能技术的快速发展,chatgpt已经成为了一个热门话题。它是一种人工智能语言模型,可以模拟人类对话,能够帮助IT从业人员在很多方面提升工作效率和生产力。那我们该如何巧妙利用它呢?ChatGPT如何助力IT从业者?自... 查看详情

聊一聊chatgpt

最近突然ChatGPT火了,这一款人工智能聊天机器人程序的月活用户已突破1亿,成为史上增长最快的消费者应用。各大IT企业也纷纷宣布拥抱ChatGPT,包括微软、谷歌等。中国国内的百度、科大讯飞也在准备推出国内版的... 查看详情

unitydropdown选择完图片消失了

参考技术A控江有问题,需要更新了Unity是实时3D互动内容创作和运营平台。包括游戏开发、美术、建筑、汽车设计、影视在内的所有创作者,借助Unity将创意变成现实Unity平台提供一整套完善的软件解决方案,可用于创作、运营和... 查看详情

依图在实时音视频中语音处理的挑战丨rtcdevmeetup

前言「语音处理」是实时互动领域中非常重要的一个场景,在声网发起的「RTCDevMeetup丨语音处理在实时互动领域的技术实践和应用」活动中,来自百度、寰宇科技和依图的技术专家,围绕该话题进行了相关分享。本文... 查看详情

通俗易懂,unity和c#是什么关系

一.Unity3D是什么Unity是实时3D互动内容创作和运营平台。包括游戏开发、美术、建筑、汽车设计、影视在内的所有创作者,借助Unity将创意变成现实。Unity平台提供一整套完善的软件解决方案,可用于创作、运营和变现任何... 查看详情

简要!语音识别

...术。 语音识别应用业务场景特点:1.离线/在线(又称实时)  在线对网络要求高,存在丢数据情况,非业务数据可容忍.2. 长语音/短语音   短语音的界定一般是60秒以内. 语音识别应用技术场景特点... 查看详情

3d开发-ar技术基础

增强现实(AugmentedReality,简称AR),是一种实时地计算摄影机影像的位置及角度并加上相应图像的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。AR系统具有三个突出的特点:①真实世界和虚拟世界的信... 查看详情

声网agora音频互动mos分方法:为音频互动体验进行实时打分

在业界,实时音视频的QoE(QualityofExperience)方法一直都是个重要的话题,每年RTE实时互联网大会都会有议题涉及。之所以这么重要,其实是因为目前RTE行业中还没有一个很好的可用于评价实时互动场景的QoE评... 查看详情

让chatgpt自己告诉你如何与它高效交流(终稿)

与ChatGPT高效交流的指南(让ChatGPT自己来告诉你)本文内容是自己在接触、了解、使用ChatGPT一段时间(约2周),且有了一定经验总结后,用ChatGPT4基于多次问答、矫正最终得出的文章,文章内容对于如... 查看详情

常见3d引擎

...的一个让玩家轻松创建诸如三维视频游戏、建筑可视化、实时三维动画这些类型互动内容的多平台的综合型游戏开发工具,是一个全面整合的专业游戏引擎。gotounrealengine4E4是UnrealEngine4的缩写,中文译为“虚幻引擎4”。UE... 查看详情

fastcorrect:语音识别快速纠错模型丨rtcdevmeetup

前言「语音处理」是实时互动领域中非常重要的一个场景,在声网发起的「RTCDevMeetup丨语音处理在实时互动领域的技术实践和应用」活动中,来自百度、寰宇科技和依图的技术专家,围绕该话题进行了相关分享。本文... 查看详情