让AI开发个AI网站看板娘

该话题被推 日常
126 编辑于
aurora
aurora

1586

体验页面:Live2D 看板娘测试

项目地址:live2d-ai-web: 集合大模型、支持各类网站的live2d看板娘

对接hexo博客:hexo博客测试

起因昨天上网时,在隔壁某论坛看到网友说,腾讯最近推出了个叫cnb的项目,可以让接入deepseek最新模型的AI帮写代码。正好最近对网站看板娘比较感兴趣,于是突发奇想,让腾讯的AI帮助我开发一个AI网站看板娘。

我的设想

首先是我最初的设想。起因是我看到很多网站都有看板娘,我觉得不够智能化和人性化;还有访问一些下载站时,一些网友总会有很多问题,比如找不到解压码啦、不知道下载链接怎么用,阿巴阿巴。

于是我设想,假如有这样一个看板娘:接入了AI文字大模型和语音大模型,可以回答用户问题并输出语音。而AI文字大模型可以模拟情感,通过模拟出的情感、控制Live2d模型做出高兴、悲伤等表情。这样的看板娘,应该是很先进的吧。

于是我上网去找一些项目,首先翻到的是一个叫“live2d-widget-AIChat”的项目,这个项目实现了看板娘对接文字大模型,不过目前只支持deepseek、未接入语音大模型。我把文档丢给腾讯的AI去看,效果不太理想。

然后突然想起,几年前我用过一个叫“Oh-my-live2d”的项目,于是去网上查找,发现作者写了一个叫l2d的项目:hacxy/l2d: 在浏览器中加载Live2D模型更简单

项目本身也比较完善,使用起来很便捷。不需要下载本地模型、直接引用CDN资源就能加载模型。于是我把开发文档丢给了腾讯的AI机器人,最后腾讯的AI也是十分给力,做出了项目的雏形。

目前的体验地址,说实话有很多瑕疵(吐槽:比如体验地址我用的是狂三的模型,却配了一个狐狸的语音。TTS不支持日文、中文太长生成不了...有时模型的默认语音会和TTS的原有语音混杂在一起。毕竟目前只是展示为主),不过我想后续应该能解决,解决起来也不是太困难。

基础原理

本身的原理其实很简单。如何让l2d模型张嘴、如何触发模型的动作,l2d项目已经写的明明白白了。剩下要做的,就是接入大模型了。

当我们把文字发给看板娘,看板娘会调用文字大模型生成文字,并返回情绪标签,判断当前应该是什么情绪,以此来控制l2d模型做出各种表情和动作。文字大模型生成的文字、会转发给TTS大模型,生成语音。等一切完毕后,l2d模型的表情和动作、文字和语音会一同输出。

进一步的想法

下一步的想法,是关于后端。希望能做一个页面,可以自行配置各种参数、大模型、apikey。将l2d模型、文字大模型、语音大模型、AI人格设定、AI所具有的知识库独立开来绑定成一组一组。这样每次前台的访客们切换模型时,就能加载出不同的配置,实现多样化的看板娘。

进一步想的话,希望能做一个AI桌宠,用户语音输入转文字、发给AI(这点其实星野、猫箱等AI软件早已经做到了)

再进一步想的话,最近几年流行“龙虾热”,如果把电脑上的龙虾、变成可可爱爱的看板娘的话,不失为一种乐趣(病娇龙虾突然一怒之下把电脑文件全删了,就笑不出来了...)

最终的幻想,希望有一天,人类的电脑、手机等设备上,出现像《海绵宝宝》里的痞老板的电脑女友一样的AI女友。AI有越来越多的模拟功能:通过温度检测设备感知外界体温、通过摄像头认出用户的模样。未来有一天甚至能与脑细胞做连接、把脑细胞当成cpu。

本文版权遵循 CC BY-NC 协议 本站版权政策

1 条回复

永雏小夜
发布于

好强,加油喵

(。>︿<。) 已经一滴回复都不剩了哦~