推理输出

关于推理输出的技术文章和开发文档。

基于PHP+FFmpeg+本地大模型的全自动视频字幕翻译方案

基于PHP+FFmpeg+OpenCC+Ollama本地大模型搭建全自动视频字幕翻译系统,Windows离线批量处理MKV视频,自动提取字幕、繁简转换、上下文AI翻译、字幕自动换行,硬压字幕输出MP4,全程不上传素材,保护视频隐私,适合自媒体、教学视频本地化汉化。

2026-09-26 43 人工智能
使用 Ollama 构建电子元件列表分类器

使用 Ollama 构建电子元件列表分类器

本文介绍如何使用 Ollama 和 Llama 3.2 模型构建本地 AI 应用,实现电子设备列表自动分类。通过 Python 脚本读取原始数据、设计提示词并与本地大模型交互,将未分类物品按类别排序输出至终端及文件。项目完全离线运行,无需云端或 API 密钥,具备高隐私性,适合自动化日常任务并灵活调整模型与提示词。

2026-10-22 8 人工智能

【Ollama 中文手册】思考

本文介绍具备思考能力的模型如何通过特定字段分离推理轨迹与最终答案。用户可审计模型步骤、在UI中动画展示思考过程或隐藏推理内容。文章详细说明了在chat和generate请求中启用思考的API参数设置,包括布尔值开关及字符串级别选择,并解释了流式传输时推理令牌与答案令牌的交错发送机制。

2026-11-04 1 人工智能

【Ollama 中文手册】常见问题

本文详细介绍 Ollama 常见问题解决方案,涵盖 macOS、Windows 及 Linux 系统的模型升级方法、GPU 兼容性检查与配置。内容包括如何通过环境变量调整上下文窗口大小、在 Docker 中启用 GPU 加速、禁用云端功能以保护隐私、设置代理服务器访问模型、优化 Flash Attention 与 K/V 缓存量化以减少内存占用,以及管理并发请求和模型加载策略。

2026-11-04 0 人工智能

【Ollama 中文手册】故障排除

本文详细介绍 Ollama 常见故障的排查方法。涵盖如何在不同操作系统(Mac、Linux、Windows)及容器中查看日志,解决 NVIDIA 和 AMD GPU 识别失败问题,处理 Linux noexec 限制,以及修复 Docker cgroup 管理导致的 GPU 切换异常。同时提供强制指定 LLM 库、升级驱动等优化建议,帮助用户快速定位并解决运行难题。

2026-11-04 0 人工智能

【Ollama 中文手册】流式传输

本文介绍流式传输技术,支持在模型生成文本时实时渲染。通过 REST API 默认启用,SDK 需手动配置。涵盖聊天、思考及工具调用等关键概念,指导如何累积部分字段以维护对话历史,适用于 Python 和 JavaScript 开发场景。

2026-11-04 0 人工智能

【Ollama 中文手册】欢迎

探索在桌面应用和编码代理中使用开放模型,或将它们构建到您的应用程序中。支持通过 Ollama、OpenAI 或 Anthropic API 调用云端模型,也可在本地计算机运行模型,无需 GPU。提供丰富的模型库用于编码、视觉及推理任务,并集成文档与 API 参考,助您快速开发。

2026-11-04 1 人工智能

【Ollama 中文手册】结构化输出

本文介绍 Ollama 云端目前不支持结构化输出的现状,并探讨如何通过 JSON schema 强制实施模型响应格式。文章涵盖使用 Pydantic、Zod 等工具验证数据的方法,以及结合视觉模型实现图像确定性描述的实用技巧,帮助开发者构建更可靠的 AI 应用。

2026-11-04 1 人工智能

【Ollama 中文手册】语音

本文介绍 Ollama 语音模型 Phonon 的使用方法。支持流式传输音频,实现边生成边播放。可配置不同声音,通过终端或 API 调用生成 WAV 格式音频。适用于 macOS、Linux 和 Windows 系统,支持将音频保存至文件或重定向输出,适合服务器环境及远程收听需求。

2026-11-04 1 人工智能

【Ollama 中文手册】CLI 参考

本文介绍 Ollama CLI 参考,涵盖模型启动、外部应用集成配置及交互式设置方法。支持 OpenCode、Claude Code、Codex、VS Code 等工具集成。详解多行输入处理、决策模型状态查询、语音交互功能以及模型的下载、删除、登录与自定义创建等完整操作流程。

2026-11-04 0 人工智能