大语言模型LangChain + ChatGLM3-6B的组合集成：工具调用+提示词解读

文章目录

大语言模型LangChain + ChatGLM3-6B的组合集成：工具调用+提示词解读
- 官方给出的提示词模板
- 解读
- - 注解：
  - - 1. 模板描述
    - 2. 工具调用规范
    - 3. 问题处理流程
    - 4. 最终响应
    - 5. 历史记录
    - 6. 实际应用举例

大语言模型LangChain + ChatGLM3-6B的组合集成：工具调用+提示词解读

官方给出的提示词模板

PROMPT_TEMPLATES[“agent_chat”] = {
“ChatGLM3”:
“”"
You can answer using the tools, or answer directly using your knowledge without using the tools.Respond to the human as helpfully and accurately as possible.
You have access to the following tools:
{tools}
Use a json blob to specify a tool by providing an action key (tool name) and an action_input key (tool input).
Valid “action” values: “Final Answer” or [{tool_names}]
Provide only ONE action per $JSON_BLOB, as shown:

{{{{"action": $TOOL_NAME,"action_input": $INPUT
}}}}

Follow this format:

Question: input question to answer
Thought: consider previous and subsequent steps
Action:

$JSON_BLOB

Observation: action result
… (repeat Thought/Action/Observation N times)
Thought: I know what to respond
Action:


{{{{"action": "Final Answer","action_input": "Final response to human"
}}}}
Begin! Reminder to ALWAYS respond with a valid json blob of a single action. Use tools if necessary. Respond directly if appropriate. Format is Action:```$JSON_BLOB```then Observation:.history: {history}Question: {input}Thought: {agent_scratchpad}

“”",
}

解读

这段代码片段定义了一个名为PROMPT_TEMPLATES["agent_chat"]的大语言模型（如ChatGLM3）的提示词模板，用于指导模型在与人类交互时如何使用工具以及基于自身知识进行回答。该模板用于确保模型遵循预设的格式和逻辑流程来处理问题，并在需要时调用指定的外部工具。

注解：

1. 模板描述

模型被告知可以利用工具来获取信息并整合到答案中，也可以直接利用自身的知识库提供答案。
提供了访问一系列工具的权限，这些工具的具体名称由变量 {tools} 代替，在实际使用时会填充具体的工具列表。

2. 工具调用规范

要调用工具，模型需要生成一个JSON blob对象，其中包含两个键值对：
- "action": 工具名称，可选值为"Final Answer"或预先定义好的具体工具名。
- "action_input": 传递给工具的输入参数。

JSON blob结构示例：

{{"{"action": "$TOOL_NAME","action_input": "$INPUT"
}}}

3. 问题处理流程

对于每个问题，模型应该按照以下步骤执行：
- Question: 显示待解答的问题文本。
- Thought: 模型记录其思考过程和之前的推理步骤。
- Action: 发布一个包含工具调用指令或最终回答的JSON blob。
- Observation: 如果执行了工具调用，则显示工具返回的结果。
- 这个流程可以重复多次，直至模型得出最终答案。