当前位置: 首页 > article >正文

fast-voice-assistant

首先我们来到这个据说50行代码就可以创建个人语音助手的github地址
GitHub - dsa/fast-voice-assistant: ⚡ Insanely fast AI voice assistant with <500ms response times

按照readme 完成环境的配置

but,你发现,这只是第一步,真正的难点在于完成.env中各个key的配置

1)Using the API — Cartesia

一个最快的文本转语音模型Sonic

2)https://inference.cerebras.ai/ 

一个提供大模型api-key的平台,类似于altogether

这里需要申请,需要我用openai的key代替使用

    assistant = VoiceAssistant(

        vad=ctx.proc.userdata["vad"],

        stt=deepgram.STT(),

        llm=openai.LLM(

            base_url="https://api.openai.com/v1/chat/completions",

            api_key=os.environ.get("OPEN_API_KEY"),

            model="gpt-4o-mini",

        ),

        tts=cartesia.TTS(voice="248be419-c632-4f23-adf1-5324ed7dbf1d"),

        chat_ctx=initial_ctx,

    )

3)https://cloud.livekit.io/projects/p_2tdv1p4liil/settings/keys

LiveKit是一个开源的实时通信平台,基于WebRTC,主要用于构建高质量的音视频通话、实时数据传输和互动应用。

LiveKit除了方便以外的大优势就是它提供了丰富的APISDK,支持多种平台,包括WebiOSAndroid服务端

4)运行


后端python  main.py dev

前端如下
https://github.com/livekit/agents-playground

扩展

linux 运行开源音视频livekit,实现html视频语音聊天。-CSDN博客

GitHub - livekit/livekit: End-to-end stack for WebRTC. SFU media server and SDKs.


http://www.kler.cn/a/291955.html

相关文章:

  • 为正在运行的 Docker 容器重启策略,以提高服务的可用性
  • 【Chapter 3】Machine Learning Classification Case_Prediction of diabetes-XGBoost
  • 论文解析:计算能力资源的可信共享:利益驱动的异构网络服务提供机制
  • SAFETY LAYERS IN ALIGNED LARGE LANGUAGEMODELS: THE KEY TO LLM SECURITY
  • 《应用数学学报》
  • C函数如何返回参数lua使用
  • C++ 在变量前面加上(void)的作用
  • Jsoncpp的安装与使用
  • 【免越狱】iOS任意版本号APP下载
  • Apache Spark简介
  • 振动分析-26-频域分析之深入理解功率谱和功率谱密度的计算过程
  • 全国大学生数学建模竞赛全国奖项评阅工作规范(2023年修订稿)
  • 干货分享|分享一款免费开源的动态壁纸软件 Lively Wallpaper
  • LeetCode491 非递减子序列
  • Docker部署项目时的服务端口设置——给容器添加新端口映射
  • Android Studio gradle下载太慢了!怎么办?(已解决)
  • Leetcode每日刷题之155.最小栈
  • FPGA——VGA协议
  • 【Redis】深入解析 Redis 事务:特性、操作及其与 MySQL 事务的区别
  • Fiddler安卓设备抓包基础
  • ffmpeg音视频开发从入门到精通——ffmpeg下载编译与安装
  • iOS App快捷指令(App Intents)在系统搜索服务中注册shortcuts
  • Monkey日志ANR、CRASH、空指针异常及其他异常数据分析
  • 文件夹图标工具类 - C#小函数类推荐
  • JS中的【Symbol】全面讲解
  • 启动spring boot项目时,第三方jar包扫描不到的问题。