如何禁用并行工具调用
OpenAI-specific
此API目前仅由OpenAI支持。
OpenAI 工具调用默认情况下是并行执行的。这意味着如果我们提出一个问题,比如“东京、纽约和芝加哥的天气如何?”并且我们有一个获取天气的工具,它将并行调用该工具3次。我们可以通过使用parallel_tool_call
参数强制它只调用一次单个工具。
首先,让我们设置我们的工具和模型:
from langchain_core.tools import tool
@tool
def add(a: int, b: int) -> int:
"""Adds a and b."""
return a + b
@tool
def multiply(a: int, b: int) -> int:
"""Multiplies a and b."""
return a * b
tools = [add, multiply]
API Reference:tool
import os
from getpass import getpass
from langchain_openai import ChatOpenAI
if "OPENAI_API_KEY" not in os.environ:
os.environ["OPENAI_API_KEY"] = getpass()
llm = ChatOpenAI(model="gpt-4o-mini", temperature=0)
API Reference:ChatOpenAI
现在让我们展示一个快速示例,说明禁用并行工具调用是如何工作的:
llm_with_tools = llm.bind_tools(tools, parallel_tool_calls=False)
llm_with_tools.invoke("Please call the first tool two times").tool_calls
[{'name': 'add',
'args': {'a': 2, 'b': 2},
'id': 'call_Hh4JOTCDM85Sm9Pr84VKrWu5'}]
正如我们所看到的,尽管我们明确告诉模型调用工具两次,但通过禁用并行工具调用,模型被限制为只能调用一个。