From GPT-3 to Auto-Written Prompts: A Quick History of Prompt Engineering

Bối cảnh của prompt engineering bắt nguồn từ sự phát triển của GPT-3 khi các nhà nghiên cứu nhận thấy hiệu suất mô hình phụ thuộc lớn vào cách thiết kế prompt. Nguyên nhân kỹ thuật nằm ở việc mô hình ngôn ngữ lớn như GPT-3 cần hướng dẫn rõ ràng để phát huy khả năng, dẫn đến các kỹ thuật như chain-of-thought và few-shot learning xuất hiện. Hệ quả là prompt engineering trở thành lĩnh vực riêng biệt với nghiên cứu như "Automatic Prompt Engineering with Language Models" cho phép tự động tối ưu prompt. Điều đáng học là việc hiểu rõ prompt engineering không chỉ là kỹ năng tạm thời mà là nền tảng tương tác hiệu quả với các hệ thống AI như GPT-4 và Claude 3 trong tương lai.