工具介绍与办公应用
LLMWare
LLMWare 为本地、边缘和自行托管的大语言模型应用提供统一接口,整合模型目录与 RAG 管道,支持文档解析、知识库摄取、检索以及带来源的提示生成。
LLMWare 能做什么
LLMWare 为本地、边缘和自行托管的大语言模型应用提供统一接口,整合模型目录与 RAG 管道,支持文档解析、知识库摄取、检索以及带来源的提示生成。
- 本地资料问答与智能体
- 围绕文档资料阅读与问答
如何使用 LLMWare
对本地文档进行带来源的问答
准备输入
- 本地文档文件夹、查询问题,以及所选模型。
操作步骤
- 用 Prompt 加载模型,并通过 add_source_document 指定文档和查询。
- 调用 prompt_with_source 生成基于文档上下文的回答。
- 运行 evidence_check_sources,再用 review_sources_summary 查看附入提示的来源材料。
预期交付物
- 文档问答响应、来源检查结果和提示中使用的来源摘要。
框架提供生成后的来源检查方法;人工仍需打开原文核查回答,不能把检查函数运行成功视为所有事实均正确。
开始前需要了解
账号权限、费用与可用功能请以官方入口的当前说明为准。重要结果应先检查,再用于实际工作。