站内搜索「推理」共 58 条结果

推荐教程
vibevoice-mlx - VibeVoice TTS MLX 推理实现(Mac Studio 部署指南)微软删除官方推理代码后,社区补上的完整 MLX 实现。支持 1.5B/7B 语音合成、零样本语音克隆、量化加速。
3个月前

推荐教程
VibeVoice 社区版 - PyTorch/CUDA 多 GPU 推理完整代码微软删除官方 TTS 推理代码后,社区 fork 保留的 PyTorch 完整实现。支持单卡/多卡推理、语音克隆、Gradio Demo。
3个月前

推荐源码
TeaCache - 扩散模型免训练推理加速,视频/图片/音频生成提速神器CVPR 2025 Highlight,通过智能缓存跳过冗余时间步,无需重训模型即可大幅加速扩散模型推理。支持Wan2.1/FLUX/HunyuanVideo等20+主流模型
2个月前

推荐源码
Honcho - AI Agent 推理优先的记忆基础设施Agent记忆不是存文本块做匹配,而是从对话中提取结论,持续理解用户和Agent。支持MCP集成Claude Code/OpenCode/Hermes等,托管或自托管。
2个月前

推荐Skills
DFlash - 块扩散加速LLM推理的推测解码方案轻量级块扩散模型,专为 LLM Speculative Decoding 设计,支持 vLLM/SGLang/MLX,已适配 20+ 主流大模型
3个月前

推荐源码
DwarfStar 4 — DeepSeek V4 Flash 本地推理引擎antirez新作:DeepSeek V4 Flash的Metal/CUDA原生推理引擎,2-bit量化128GB Mac跑百万token上下文
3个月前

推荐Skills
MingLi-Bench - 中文命理LLM评测基准(八字+紫微斗数)评估大语言模型在八字和紫微斗数方面的推理能力,160道全球算命师大赛真题,支持 GPT/Claude/Gemini/DeepSeek 等主流模型
3个月前
推荐Skills
gemma-skills - Google Gemma 官方 AI 编码技能包Google 官方出品的 Gemma 模型技能库,让 AI 编码助手自动掌握 Gemma 选型、部署、MTP 加速推理,支持 Vercel/Context7 CLI 一键安装
2个月前

推荐软件
Sakana Fugu - 多模型编排即服务,一个API调度顶级模型军团Sakana AI 推出的多智能体编排系统,用AI学出来的协作方式协调GPT/Claude/Gemini等顶级模型,一个API搞定复杂编程与推理任务
1个月前

推荐软件
mlx-video - Mac原生MLX视频生成库(LTX-2.3+Wan2.2)一个库在Apple Silicon上原生跑LTX-2.3和Wan2.2两大视频模型,纯MLX加速,CLI一行出片,比PyTorch MPS快1.7倍
1个月前

推荐软件
Rapid-MLX - 专为 Apple Silicon 打造的极速本地 AI 引擎比 Ollama 快 4.2 倍,17 种工具调用解析器,0.08 秒首字延迟,完整兼容 OpenAI API
3个月前







