Luna AI
是一款结合了最先进技术的虚拟AI主播。它的核心是一系列高效的人工智能模型和平台,包括 ChatterBot、GPT、Claude、langchain、chatglm、text-generation-webui、讯飞星火、智谱AI、谷歌Bard、通义星尘、阿里云百炼(通义千问、百川、月之暗面、零一万物、MiniMax)、千帆大模型(文心一言)、Gemini、Kimi Chat、QAnything、koboldcpp、FastGPT、Ollama、One-API、AnythingLLM、LLM_TPU、Dify、火山引擎(豆包)
。这些模型既可以在本地运行,也可以通过云端服务提供支持。当然,为了让对话照进现实,还结合了多模态模型,包括 Gemini、glm-4v、Blip
的图像识别能力,获取电脑画面进行分析讲解。
Luna AI
的外观由 Live2D、Vtube Studio、xuniren、UE5 结合 Audio2Face、EasyAIVtuber、数字人视频播放器(Easy-Wav2Lip、Sadtalker、GeneFace++、MuseTalk、AniTalker、本地视频)、metahuman-stream(ernerf、musetalk、wav2lip)、DH_live、live2d-TTS-LLM-GPT-SoVITS-Vtuber
技术打造,为用户提供了一个生动、互动的虚拟形象。这使得 Luna AI
能够在各大直播平台,如 Bilibili、抖音、快手、微信视频号、拼多多、1688、斗鱼、淘宝、让弹幕飞、YouTube、Twitch 和 TikTok
,进行实时互动直播。当然,它也可以在本地环境中与您进行个性化对话。
为了使交流更加自然,Luna AI
使用了先进的自然语言处理技术,结合文本转语音系统,如 Edge-TTS、VITS-Fast、elevenlabs、bark-gui、VALL-E-X、睿声AI、OpenVoice、GPT_SoVITS、clone-voice、Azure TTS、fish-speech、ChatTTS、CosyVoice、F5-TTS、MultiTTS、MeloTTS
。这不仅让它能够生成流畅的回答,还可以通过 so-vits-svc 和 DDSP-SVC
实现声音的变化,以适应不同的场景和角色。
此外,Luna AI
还能够通过特定指令与 Stable Diffusion
协作,展示画作。用户还可以自定义文案,让 Luna AI 循环播放,以满足不同场合的需求。
评论