【理解工具调用的流程,本质体现了大模型智能性】

1、工具调用

调用完结果看里面tool_calls 是否为空,不为空就调用工具函数处理,
如果为空就中断循环。大模型返回的message结果智能判断是否继续调用
在这里插入图片描述
输入输出如下:

请输入:深圳西安天气 
------------------------------------------------------------1轮大模型输出信息:{'choices': [{'message': {'content': '', 'tool_calls': [{'id': 'call_edbdb1743a724c9c9662a5', 'type': 'function', 'function': 
{'name': 'get_current_weather', 'arguments': '{"location": "深圳"}'}}]}}]}
需要调用工具,工具调用信息:[{'id': 'call_edbdb1743a724c9c9662a5', 'type': 'function', 'function': {'name': 'get_current_weather', 'arguments': '{"location": "深圳"}'}}]
工具输出信息:深圳今天是雨天。------------------------------------------------------------
深圳今天的天气是雨天。第2轮大模型输出信息:{'content': '深圳今天的天气是雨天。', 'tool_calls': [{'id': 'call_79341955209940628a5a98', 'type': 'function', 'function': {'name': 'get_current_weather', 'arguments': '{"location": "西安"}'}}]}工具输出信息:西安今天是雨天。------------------------------------------------------------
西安今天的天气也是雨天。请注意携带雨具。第3轮大模型输出信息:{'content': '西安今天的天气也是雨天。请注意携带雨具。', 'tool_calls': None}最终答案:西安今天的天气也是雨天。请注意携带雨具。
PS D:\swarm> & d:/swarm/.conda/python.exe d:/swarm/test_auzrapi/test_qwen.py请输入:深圳西安天气
------------------------------------------------------------1轮大模型输出信息:{'choices': [{'message': {'content': '', 'tool_calls': [{'id': 'call_71fa625dc1a543319dfe9d', 'type': 'function', 'function': 
{'name': 'get_current_weather', 'arguments': '{"location": "深圳"}'}}]}}]}location": "深圳"}'}}]
工具输出信息:深圳今天是雨天。------------------------------------------------------------2轮大模型输出信息:{'content': '', 'tool_calls': [{'id': 'call_188d490f167e4b109c681f', 'type': 'function', 'function': {'name': 'get_current_weather', 'arguments': '{"location": "西安"}'}}]}工具输出信息:西安今天是雨天。------------------------------------------------------------
深圳今天的天气是雨天,西安今天的天气也是雨天。请记得带伞哦!第3轮大模型输出信息:{'content': '深圳今天的天气是雨天,西安今天的天气也是雨天。请记得 
带伞哦!', 'tool_calls': None}最终答案:深圳今天的天气是雨天,西安今天的天气也是雨天。请记得带伞哦!
import os
from openai import OpenAIfrom openai import OpenAI
from datetime import datetime
import json
import osclient = OpenAI(# 若没有配置环境变量,请用百炼API Key将下行替换为:api_key="sk-xxx",# api_key=os.getenv("DASHSCOPE_API_KEY"),api_key="sk-112222", # 修改成你的阿里的qwen的api keybase_url="https://dashscope.aliyuncs.com/compatible-mode/v1",  # 填写DashScope SDK的base_url
)# 定义工具列表,模型在选择使用哪个工具时会参考工具的name和description
tools = [# 工具1 获取当前时刻的时间{"type": "function","function": {"name": "get_current_time","description": "当你想知道现在的时间时非常有用。",# 因为获取当前时间无需输入参数,因此parameters为空字典"parameters": {}}},  # 工具2 获取指定城市的天气{"type": "function","function": {"name": "get_current_weather","description": "当你想查询指定城市的天气时非常有用。","parameters": {  "type": "object","properties": {# 查询天气时需要提供位置,因此参数设置为location"location": {"type": "string","description": "城市或县区,比如北京市、杭州市、余杭区等。"}}},"required": ["location"]}}
]# 模拟天气查询工具。返回结果示例:"北京今天是雨天。"
def get_current_weather(location):return f"{location}今天是雨天。 "# 查询当前时间的工具。返回结果示例:"当前时间:2024-04-15 17:15:18。"
def get_current_time():# 获取当前日期和时间current_datetime = datetime.now()# 格式化当前日期和时间formatted_time = current_datetime.strftime('%Y-%m-%d %H:%M:%S')# 返回格式化后的当前时间return f"当前时间:{formatted_time}。"# 封装模型响应函数
def get_response(messages):# 添加系统消息if not any(msg.get('role') == 'system' for msg in messages):messages.insert(0, {"role": "system","content": "你是一个有用的助手,可以帮助用户查询天气和时间。"})# 确保所有消息都有正确的 rolefor msg in messages:if 'role' not in msg or msg['role'] not in ['system', 'assistant', 'user', 'tool', 'function']:if 'name' in msg and msg['name'] in ['get_current_weather', 'get_current_time']:msg['role'] = 'function'else:msg['role'] = 'user'completion = client.chat.completions.create(model="qwen-plus",messages=messages,stream=True,tools=tools)# 处理流式响应content_buffer = []tool_call_buffer = Nonefor chunk in completion:try:# 处理内容if chunk.choices[0].delta.content:content_buffer.append(chunk.choices[0].delta.content)print(chunk.choices[0].delta.content, end='', flush=True)# 处理工具调用if hasattr(chunk.choices[0].delta, 'tool_calls') and chunk.choices[0].delta.tool_calls:tool_call = chunk.choices[0].delta.tool_calls[0]if not tool_call_buffer:tool_call_buffer = {'id': tool_call.id,'type': tool_call.type,'function': {'name': tool_call.function.name,'arguments': ''}}if hasattr(tool_call.function, 'arguments') and tool_call.function.arguments:tool_call_buffer['function']['arguments'] += tool_call.function.arguments# 检查参数是否完整try:if tool_call_buffer['function']['arguments']:json.loads(tool_call_buffer['function']['arguments'])return {'choices': [{'message': {'content': ''.join(content_buffer),'tool_calls': [tool_call_buffer]}}]}except json.JSONDecodeError:continueexcept Exception as e:print(f"Error processing chunk: {e}")continue# 如果没有工具调用,返回普通消息return {'choices': [{'message': {'content': ''.join(content_buffer),'tool_calls': None}}]}def call_with_messages():print('\n')messages = [{"role": "system","content": "你是一个有用的助手,可以帮助用户查询天气和时间。"},{"role": "user","content": input('请输入:'),  # 提问示例:"现在几点了?" "一个小时后几点" "北京天气如何?"}]print("-"*60)# 模型的第一轮调用i = 1first_response = get_response(messages)assistant_output = first_response['choices'][0]['message']print(f"\n第{i}轮大模型输出信息:{first_response}\n")if assistant_output['content'] is None:assistant_output['content'] = ""messages.append({"role": "assistant","content": assistant_output['content'],"tool_calls": assistant_output.get('tool_calls')})# 如果不需要调用工具,则直接返回最终答案if not assistant_output['tool_calls']:print(f"无需调用工具,我可以直接回复:{assistant_output['content']}")returnelse:print(f"\n需要调用工具,工具调用信息:{assistant_output['tool_calls']}")while assistant_output['tool_calls']:tool_call = assistant_output['tool_calls'][0]func_name = tool_call['function']['name']# 根据工具名称调用相应的函数if func_name == 'get_current_weather':tool_result = get_current_weather(json.loads(tool_call['function']['arguments'])['location'])messages.append({"role": "tool",  # 使用 tool 而不是 function"tool_call_id": tool_call['id'],  # 添加 tool_call_id"name": "get_current_weather","content": tool_result})elif func_name == 'get_current_time':tool_result = get_current_time()messages.append({"role": "tool",  # 使用 tool 而不是 function"tool_call_id": tool_call['id'],  # 添加 tool_call_id"name": "get_current_time","content": tool_result})print(f"工具输出信息:{tool_result}\n")print("-"*60)# 获取助手的响应response = get_response(messages)assistant_output = response['choices'][0]['message']if assistant_output['content'] is None:assistant_output['content'] = ""messages.append({"role": "assistant","content": assistant_output['content'],"tool_calls": assistant_output.get('tool_calls')})i += 1print(f"第{i}轮大模型输出信息:{assistant_output}\n")# 如果助手的回复中没有工具调用,就结束循环if not assistant_output.get('tool_calls'):breakprint(f"最终答案:{assistant_output['content']}")if __name__ == '__main__':call_with_messages()

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/893385.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

excel实用工具

持续更新… 文章目录 1. 快捷键1.1 求和 2. 命令2.1 查找 vloopup 1. 快捷键 1.1 求和 windows: alt mac : command shift T 2. 命令 2.1 查找 vloopup vlookup 四个入参数 要查找的内容 (A2 6xx1)查找的备选集 (C2:C19)…

【C++】模板(进阶)

本篇我们来介绍更多关于C模板的知识。模板初阶移步至:【C】模板(初阶) 1.非类型模板参数 1.1 非类型模板参数介绍 模板参数可以是类型形参,也可以是非类型形参。类型形参就是我们目前接触到的一些模板参数。 //类型模板参数 …

一文学会YOLO系列算法(从V3到11)实现遥感图像目标检测

目录 前言 数据集介绍 数据集转换 YOLO代码的下载 YOLO的配置 1.数据集的配置 2.模型的配置 YOLO11模型的训练 其它版本YOLO的训练 前言 遥感技术的快速发展,特别是在高分辨率遥感图像的获取能力上的显著提升,已经大大拓宽了遥感数据在环境监测…

图解Git——分布式Git《Pro Git》

分布式工作流程 Centralized Workflow(集中式工作流) 所有开发者都与同一个中央仓库同步代码,每个人通过拉取、提交来合作。如果两个开发者同时修改了相同的文件,后一个开发者必须在推送之前合并其他人的更改。 Integration-Mana…

【高阶数据结构】布隆过滤器(BloomFilter)

1. 概念 1.1 背景引入 背景:在计算机软件中,一个常见的需求就是 在一个集合中查找一个元素是否存在 ,比如:1. Word 等打字软件需要判断用户键入的单词是否在字典中存在 2. 浏览器等网络爬虫程序需要保存一个列表来记录已经遍历过…

【json_object】mysql中json_object函数过长,显示不全

问题:json只显示部分 解决: SET GLOBAL group_concat_max_len 1000000; -- 设置为1MB,根据需要调整如果当前在navicat上修改,只有效本次连接和后续会话,重新连接还是会恢复默认值1024 在my.ini配置文件中新增或者修…

计算机网络 (52)秘钥分配

一、重要性 在计算机网络中,密钥分配是密钥管理中的一个核心问题。由于密码算法通常是公开的,因此网络的安全性主要依赖于密钥的安全保护。密钥分配的目的是确保密钥在传输过程中不被窃取或篡改,同时确保只有合法的用户才能获得密钥。 二、方…

第35天:安全开发-JavaEE应用原生反序列化重写方法链条分析触发类类加载

时间轴: 序列化与反序列化图解: 演示案例: Java-原生使用-序列化&反序列化 Java-安全问题-重写方法&触发方法 Java-安全问题-可控其他类重写方法 Java-原生使用-序列化&反序列化 1.为什么进行序列化和反序列化&#xff1…

MindAgent:基于大型语言模型的多智能体协作基础设施

2023-09-18 ,加州大学洛杉矶分校(UCLA)、微软研究院、斯坦福大学等机构共同创建的新型基础设施,目的在评估大型语言模型在游戏互动中的规划和协调能力。MindAgent通过CuisineWorld这一新的游戏场景和相关基准,调度多智…

Excel 技巧17 - 如何计算倒计时,并添加该倒计时的数据条(★)

本文讲如何计算倒计时,并添加该倒计时的数据条。 1,如何计算倒计时 这里也要用公式 D3 - TODAY() 显示为下面这个样子的 然后右键该单元格,选 设置单元格格式 然后点 常规 这样就能显示出还书倒计时的日数了。 下拉适用到其他单元格。 2&a…

rocketmq基本架构

简介 Name server 负责broker注册、心跳,路由等功能,类似Kafka的ZKname server节点之间不互相通信,broker需要和所有name server进行通信。扩容name server需要重启broker,不然broker不会和name server建立连接producer和consum…

国产编辑器EverEdit - 大纲视图

1 大纲视图 1.1 应用场景 在编辑较长代码文件时,使用大纲视图可以方便的检视当前文件的变量、函数等信息,方便在不同函数间跳转,对整个文档的全貌了然于胸。   在编辑XML文档时,通过展示XML文件的层次结构、节点布局&#xff0…

Linux中的基本指令(一)

一、Linux中指令的存在意义 Linux中,通过输入指令来让操作系统执行,以此达到控制操作系统的目的,类似于Windows中的双击,右键新建文件,新建文件夹等 1.补:关于屏幕的几个操作指令 ①清屏指令 clear 回…

2025/1/21 学习Vue的第四天

睡觉。 --------------------------------------------------------------------------------------------------------------------------------- 11.Object.defineProperty 1.在我们之前学习JS的时候&#xff0c;普通得定义一个对象与属性。 <!DOCTYPE html> <h…

Go Map 源码分析(一)

Go语言中的map是通过哈希表实现的&#xff0c;其底层结构和实现机制如下&#xff1a; 一、hash 结构 hmap结构体&#xff1a;是map的头部结构&#xff0c;主要字段及含义如下&#xff1a; count&#xff1a;表示当前哈希表中的元素数量&#xff0c;与len()函数相对应。flags…

Linux-C/C++--深入探究文件 I/O (上)(文件的管理、函数返回错误、exit()、_Exit()、_exit())

经过上一章内容的学习&#xff0c;相信各位读者对 Linux 系统应用编程中的基础文件 I/O 操作有了一定的认识和理解了&#xff0c;能够独立完成一些简单地文件 I/O 编程问题&#xff0c;如果你的工作中仅仅只是涉及到一些简单文件读写操作相关的问题&#xff0c;其实上一章的知识…

【机器学习实战中阶】音乐流派分类-自动化分类不同音乐风格

音乐流派分类 – 自动化分类不同音乐风格 在本教程中,我们将开发一个深度学习项目,用于自动化地从音频文件中分类不同的音乐流派。我们将使用音频文件的频率域和时间域低级特征来分类这些音频文件。 对于这个项目,我们需要一个具有相似大小和相似频率范围的音频曲目数据集…

Walrus Learn to Earn计划正式启动!探索去中心化存储的无限可能

本期 Learn to Earn 活动将带领开发者和区块链爱好者深入探索 Walrus 的技术核心与实际应用&#xff0c;解锁分布式存储的无限可能。参与者不仅能提升技能&#xff0c;还能通过完成任务赢取丰厚奖励&#xff01;&#x1f30a; 什么是 Walrus&#xff1f; 数据主权如今正成为越…

git 常用命令 git archive

git archive 是 Git 中用于创建一个包含指定提交或分支中所有文件的归档文件&#xff08;如 .tar 或 .zip&#xff09;的命令。这个命令非常适合用于分发项目快照、备份代码库或导出特定版本的文件。 git archive --formatzip --outputproject.zip HEAD …

Excel 技巧15 - 在Excel中抠图头像,换背景色(★★)

本文讲了如何在Excel中抠图头像&#xff0c;换背景色。 1&#xff0c;如何在Excel中抠图头像&#xff0c;换背景色 大家都知道在PS中可以很容易抠图头像&#xff0c;换背景色&#xff0c;其实Excel中也可以抠简单的图&#xff0c;换背景色。 ※所用头像图片为百度搜索&#x…