PAL (Program-Aided Language Models)

ต้นฉบับ : PAL (Program-Aided Language Models) PAL (แบบจำลองภาษาที่ใช้โปรแกรมช่วย)

Gao et al., (2022) นำเสนอวิธีการที่ใช้ LLM ในการอ่านปัญหาภาษาธรรมชาติและสร้างโปรแกรมเป็นขั้นตอนการให้เหตุผลระดับกลาง โมเดลภาษาที่สนับสนุนโดยโปรแกรม (PAL) ที่สร้างขึ้นนั้นแตกต่างจากการแจ้งแบบลูกโซ่ของการคิดตรงที่แทนที่จะใช้ข้อความรูปแบบอิสระเพื่อรับโซลูชัน มันจะถ่ายขั้นตอนโซลูชันไปยังรันไทม์แบบเป็นโปรแกรม เช่น ตัวแปล Python

ที่มาของภาพ: Gao et al., (2022)

มาดูตัวอย่างการใช้ LangChain และ OpenAI GPT-3 กัน เราสนใจที่จะพัฒนาแอปพลิเคชันง่ายๆ ที่สามารถตีความคำถามที่ถูกถามและให้คำตอบโดยใช้ประโยชน์จากล่าม Python

โดยเฉพาะอย่างยิ่ง เราสนใจที่จะสร้างฟังก์ชันที่อนุญาตให้ใช้ LLM เพื่อตอบคำถามที่ต้องมีความเข้าใจเกี่ยวกับวันที่ เราจะแจ้ง LLM ซึ่งรวมถึงตัวอย่างบางส่วนซึ่งนำมาใช้จากที่นี่

นี่คือการนำเข้าที่เราต้องการ:

import openai

from datetime import datetime

from dateutil.relativedelta import relativedelta

import os

from langchain.llms import OpenAI

from dotenv import load_dotenv

ก่อนอื่นเรามากำหนดค่าบางสิ่งกันก่อน:

load_dotenv()

# API configuration

openai.api_key = os.getenv("OPENAI_API_KEY")

# for LangChain

os.environ["OPENAI_API_KEY"] = os.getenv("OPENAI_API_KEY")

ตั้งค่าอินสแตนซ์โมเดล:

llm = OpenAI(model_name='text-davinci-003', temperature=0)

พร้อมท์การตั้งค่า + คำถาม:

question = "Today is 27 February 2023. I was born exactly 25 years ago. What is the date I was born in MM/DD/YYYY?"

DATE_UNDERSTANDING_PROMPT = """

# Q: 2015 is coming in 36 hours. What is the date one week from today in MM/DD/YYYY?

# If 2015 is coming in 36 hours, then today is 36 hours before.

today = datetime(2015, 1, 1) - relativedelta(hours=36)

# One week from today,

one_week_from_today = today + relativedelta(weeks=1)

# The answer formatted with %m/%d/%Y is

one_week_from_today.strftime('%m/%d/%Y')

# Q: The first day of 2019 is a Tuesday, and today is the first Monday of 2019. What is the date today in MM/DD/YYYY?

# If the first day of 2019 is a Tuesday, and today is the first Monday of 2019, then today is 6 days later.

today = datetime(2019, 1, 1) + relativedelta(days=6)

# The answer formatted with %m/%d/%Y is

today.strftime('%m/%d/%Y')

# Q: The concert was scheduled to be on 06/01/1943, but was delayed by one day to today. What is the date 10 days ago in MM/DD/YYYY?

# If the concert was scheduled to be on 06/01/1943, but was delayed by one day to today, then today is one day later.

today = datetime(1943, 6, 1) + relativedelta(days=1)

# 10 days ago,

ten_days_ago = today - relativedelta(days=10)

# The answer formatted with %m/%d/%Y is

ten_days_ago.strftime('%m/%d/%Y')

# Q: It is 4/19/1969 today. What is the date 24 hours later in MM/DD/YYYY?

# It is 4/19/1969 today.

today = datetime(1969, 4, 19)

# 24 hours later,

later = today + relativedelta(hours=24)

# The answer formatted with %m/%d/%Y is

today.strftime('%m/%d/%Y')

# Q: Jane thought today is 3/11/2002, but today is in fact Mar 12, which is 1 day later. What is the date 24 hours later in MM/DD/YYYY?

# If Jane thought today is 3/11/2002, but today is in fact Mar 12, then today is 3/12/2002.

today = datetime(2002, 3, 12)

# 24 hours later,

later = today + relativedelta(hours=24)

# The answer formatted with %m/%d/%Y is

later.strftime('%m/%d/%Y')

# Q: Jane was born on the last day of Feburary in 2001. Today is her 16-year-old birthday. What is the date yesterday in MM/DD/YYYY?

# If Jane was born on the last day of Feburary in 2001 and today is her 16-year-old birthday, then today is 16 years later.

today = datetime(2001, 2, 28) + relativedelta(years=16)

# Yesterday,

yesterday = today - relativedelta(days=1)

# The answer formatted with %m/%d/%Y is

yesterday.strftime('%m/%d/%Y')

# Q: {question}

""".strip() + '\n'

llm_out = llm(DATE_UNDERSTANDING_PROMPT.format(question=question))

print(llm_out)

สิ่งนี้จะส่งออกดังต่อไปนี้:

# If today is 27 February 2023 and I was born exactly 25 years ago, then I was born 25 years before.

today = datetime(2023, 2, 27)

# I was born 25 years before,

born = today - relativedelta(years=25)

# The answer formatted with %m/%d/%Y is

born.strftime('%m/%d/%Y')

เนื้อหาของ llm_out เป็นเพียงข้อมูลโค้ด Python ด้านล่างนี้ คำสั่ง exec ใช้เพื่อรันข้อมูลโค้ด Python นี้