时间无法提交

关于时间无法提交的技术文章和开发文档。

基于PHP+FFmpeg+本地大模型的全自动视频字幕翻译方案

基于PHP+FFmpeg+OpenCC+Ollama本地大模型搭建全自动视频字幕翻译系统,Windows离线批量处理MKV视频,自动提取字幕、繁简转换、上下文AI翻译、字幕自动换行,硬压字幕输出MP4,全程不上传素材,保护视频隐私,适合自媒体、教学视频本地化汉化。

2026-09-26 48 人工智能
如何在 Ubuntu 26.04 LTS 上离线运行 ChatGPT 等 AI

如何在 Ubuntu 26.04 LTS 上离线运行 ChatGPT 等 AI

本文详细介绍如何在Ubuntu 26.04 LTS系统上,利用Ollama和Open WebUI完全离线运行ChatGPT风格的AI助手。无需API密钥或互联网连接,即可在本地CPU上部署Llama 3.2等小型模型。教程涵盖安装步骤、模型选择及浏览器界面配置,确保数据隐私且无持续成本,适合日常代码解释与文本处理任务。

2026-11-09 6 人工智能
预填充与解码

【Llama 中文手册】预填充与解码

本文深入解析大语言模型推理的两个核心阶段:预填充与解码。预填充阶段处理提示词,受计算能力限制;解码阶段生成答案,受内存带宽限制。文章详细探讨了影响各阶段性能的关键因素,如上下文长度、模型大小及硬件瓶颈。同时介绍了 KV Cache 机制如何加速注意力运算,并分析了 TTFT、TPOT 等用户体验指标及其优化策略,旨在帮助开发者提升推理效率与吞吐量。

2026-11-05 5 人工智能

【Ollama 中文手册】常见问题

本文详细介绍 Ollama 常见问题解决方案,涵盖 macOS、Windows 及 Linux 系统的模型升级方法、GPU 兼容性检查与配置。内容包括如何通过环境变量调整上下文窗口大小、在 Docker 中启用 GPU 加速、禁用云端功能以保护隐私、设置代理服务器访问模型、优化 Flash Attention 与 K/V 缓存量化以减少内存占用,以及管理并发请求和模型加载策略。

2026-11-04 7 人工智能

【Ollama 中文手册】故障排除

本文详细介绍 Ollama 常见故障的排查方法。涵盖如何在不同操作系统(Mac、Linux、Windows)及容器中查看日志,解决 NVIDIA 和 AMD GPU 识别失败问题,处理 Linux noexec 限制,以及修复 Docker cgroup 管理导致的 GPU 切换异常。同时提供强制指定 LLM 库、升级驱动等优化建议,帮助用户快速定位并解决运行难题。

2026-11-04 3 人工智能

【Ollama 中文手册】硬件支持

本文详细介绍 Ollama 对各类硬件的 GPU 加速支持情况。涵盖 Nvidia CUDA、AMD ROCm、Apple Metal 及 Vulkan 等后端配置,提供不同显卡型号(如 RTX 40/50 系列、Radeon RX)的驱动版本要求与兼容性列表。同时讲解多卡选择、CPU 回退设置及 Linux 容器权限等高级用法,助您优化本地大模型运行性能。

2026-11-04 2 人工智能

【Ollama 中文手册】语音

本文介绍 Ollama 语音模型 Phonon 的使用方法。支持流式传输音频,实现边生成边播放。可配置不同声音,通过终端或 API 调用生成 WAV 格式音频。适用于 macOS、Linux 和 Windows 系统,支持将音频保存至文件或重定向输出,适合服务器环境及远程收听需求。

2026-11-04 6 人工智能
网页搜索

【Ollama 中文手册】网页搜索

Ollama Web Search API 为模型提供最新信息,减少幻觉并提高准确性。通过创建免费账户获取 API Key 即可访问。该 API 支持 REST 调用及 Python、JavaScript 库集成,能返回网页标题、URL 和内容片段。适用于构建搜索代理或集成至 Cline、Goose 等工具,需确保模型上下文长度足够以处理大量搜索结果。

2026-11-04 5 人工智能
上下文长度

【Ollama 中文手册】上下文长度

本文介绍 Ollama 的上下文长度设置及其与 VRAM 内存的关系。根据显存大小,默认支持 4k、32k 及 256k token 上下文。针对网页搜索、智能体及代码工具等需大上下文任务,建议至少配置 64000 tokens。同时提供通过 App 滑块或 CLI 启动参数调整的方法,并强调避免模型卸载至 CPU 以保障最佳性能。

2026-11-04 5 人工智能

【Ollama 中文手册】Docker

本文介绍如何在 Docker 中安装 NVIDIA Container Toolkit,支持通过 Apt、Yum 或 Dnf 配置仓库。同时讲解如何为 NVIDIA JetPack 系统设置环境变量以选择版本,以及使用特定标签在 AMD GPU 上运行 Ollama。此外,还说明了 Vulkan 的默认启用状态及禁用方法,帮助用户在本地顺利运行各类模型。

2026-11-04 3 人工智能