函数实现

关于函数实现的技术文章和开发文档。

基于PHP+FFmpeg+本地大模型的全自动视频字幕翻译方案

基于PHP+FFmpeg+OpenCC+Ollama本地大模型搭建全自动视频字幕翻译系统,Windows离线批量处理MKV视频,自动提取字幕、繁简转换、上下文AI翻译、字幕自动换行,硬压字幕输出MP4,全程不上传素材,保护视频隐私,适合自媒体、教学视频本地化汉化。

2026-09-26 48 人工智能

【Ollama 中文手册】工具调用

本文介绍 Ollama 支持的工具调用功能,包括单次、并行及多轮工具调用模式。涵盖 Agent 循环机制与流式传输处理技巧,并提供 Python SDK 和 JavaScript 库的安装及使用指南,帮助用户高效集成函数作为工具 schema。

2026-11-04 4 人工智能

【Ollama 中文手册】结构化输出

本文介绍 Ollama 云端目前不支持结构化输出的现状,并探讨如何通过 JSON schema 强制实施模型响应格式。文章涵盖使用 Pydantic、Zod 等工具验证数据的方法,以及结合视觉模型实现图像确定性描述的实用技巧,帮助开发者构建更可靠的 AI 应用。

2026-11-04 3 人工智能

【Ollama 中文手册】常见问题

本文详细介绍 Ollama 常见问题解决方案,涵盖 macOS、Windows 及 Linux 系统的模型升级方法、GPU 兼容性检查与配置。内容包括如何通过环境变量调整上下文窗口大小、在 Docker 中启用 GPU 加速、禁用云端功能以保护隐私、设置代理服务器访问模型、优化 Flash Attention 与 K/V 缓存量化以减少内存占用,以及管理并发请求和模型加载策略。

2026-11-04 7 人工智能

【Llama 中文手册】API 服务器

本文介绍 API 服务器功能,支持多种格式暴露 REST API。提供 OpenAI 和 Anthropic 兼容端点,涵盖 Chat Completions、Embeddings 及原生补全等。支持结构化输出、工具调用、多模态输入处理,并包含推理模型与性能监控指标,适用于各类 AI 应用场景。

2026-11-05 7 人工智能
预填充与解码

【Llama 中文手册】预填充与解码

本文深入解析大语言模型推理的两个核心阶段:预填充与解码。预填充阶段处理提示词,受计算能力限制;解码阶段生成答案,受内存带宽限制。文章详细探讨了影响各阶段性能的关键因素,如上下文长度、模型大小及硬件瓶颈。同时介绍了 KV Cache 机制如何加速注意力运算,并分析了 TTFT、TPOT 等用户体验指标及其优化策略,旨在帮助开发者提升推理效率与吞吐量。

2026-11-05 5 人工智能