尧图建网站 尧图建网站 YAOTU WEB BUILD 免费咨询
ARTICLE DETAIL

资讯详情

深耕网站建设与建站编程的一线实战洞察。

从零到跑通:Fay 数字人框架完整上手实录

从零到跑通:Fay 数字人框架完整上手实录 从零到跑通Fay 数字人框架完整上手实录【免费下载链接】Fayfay是一个帮助数字人2.5d、3d、移动、pc、网页或大语言模型openai兼容、deepseek连通业务系统的agent框架。项目地址: https://gitcode.com/GitHub_Trending/fay/FayFay 是一个开源数字人框架可以把 2.5D、3D 数字人或者大语言模型直接连通业务系统自带带货、助理、agent 三种版本。想做虚拟导购、直播应答或者一个能控制设备的智能助手从它入手比较顺。项目名片10 秒看懂 Fay 的定位项目说明一句话定位让数字人和大模型接通业务系统的 agent 框架核心价值对话链路、语音、设备对接都已搭好你只做业务最短路径拿到能用的数字人适用场景虚拟导购、直播带货、家庭助理、前台接待、教学答疑、移动端语音助手技术亮点任意 OpenAI 兼容大模型可换TTS/ASR 可插拔工具化 agent 编排多端设备接入核心能力一套框架三种产品形态Fay 把代码拆成带货版、助理版、agent 版三个分支。带货版面向直播电商能听 B 站弹幕和微信视频号、回答观众提问还带违禁词检查助理版偏人机交互你可以用嘴让它开关设备agent 版更主动会自己决策、管日程、主动给微信发消息。按场景挑一个分支就行不用为别的场景写多余代码。接入任意 OpenAI 兼容大模型大模型这一层走 OpenAI 兼容接口。DeepSeek、Moonshot、GPT或者你用 vllm、fastchat 部署的本地模型改一下 base_url 和 key 就能用。换模型像换接口线不会被绑死在某一家测试和上线成本都低。语音识别、情绪与打断的全链路语音侧集成了 ASR支持 funasr 热词识别、情绪分析TTS 可接 GPT-SoVITS、阿里云、Azure 等多家。数字人说话说到一半你插话它能立刻停下接着聊这种打断体验是让对话显得“像人”的关键。知识库走 RAG把 PDF 资料喂进去数字人就能照着内容回答问题。工具系统与多端设备接入core/ 下有一组工具模块Python 执行器、网页检索、获取网页内容、本地知识库查询、面板发消息。agent 版会按需要调度这些工具干活再配合 UE5 工程、metahuman-stream 或 Android 连接器同一个数字人可以在网页、PC、手机上跑起来。快速上手跑通 Fay 的最短路径克隆代码。终端里执行git clone https://gitcode.com/GitHub_Trending/fay/Fay。三个版本是分开的分支按你的场景选对分支再开工。填写配置。打开项目根目录的 config.json填入大模型的 key 和 base_url走代理的话把代理字段补上再选一套 TTS/ASR 服务。用本地大模型就先用 vllm 或 fastchat 部署好把地址指过去。启动服务。运行根目录入口文件 main.py系统会加载配置、接通大模型和语音服务。控制器网页里能和数字人正常聊天就算跑通了。验证语音与设备可选。助理版接上麦克风测一下热词唤醒和打断要上 3D 形象就接对应 UE5 工程顺便看连接状态显示是否正常。进阶提示与避坑⚠️先说三个常见坑。一是版本选错带货版和助理版分支不同克隆错分支会白忙一场二是 GPT 代理字段某些 base_url 搭配空代理会报错连不上时优先查这里三是 TTS 开头几个字不读的问题老版本有过保持代码更新能省不少排查时间。再说能往哪扩。想让它更懂你的业务可以启用 RAG 知识库喂资料带货版可以加弹幕监听和情绪分析做到观众一提问就接话要移动体验就接 Android 连接器。这些模块在仓库里都有参考实现照着样例改最省力。Fay 适合谁如果你想在直播间、门店或自己桌面上放一个数字人又不想从对话、语音、设备对接这些脏活累活做起Fay 就是省掉这些环节的起点。可以先把仓库 star 下来带着具体场景再回来动手。【免费下载链接】Fayfay是一个帮助数字人2.5d、3d、移动、pc、网页或大语言模型openai兼容、deepseek连通业务系统的agent框架。项目地址: https://gitcode.com/GitHub_Trending/fay/Fay创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
返回列表