過去一年來，提示詞工程已經(jīng)成為AI行業(yè)內(nèi)的新興熱門崗位，而Anthropic則有意開發(fā)工具將它推向自動(dòng)化——或者說，至少是一部分自動(dòng)化。

根據(jù)Anthropic的博客文章，它在本周二公布了多項(xiàng)新功能，以幫助開發(fā)人員使用它的大語言模型Claude創(chuàng)建出更具實(shí)用性的應(yīng)用程序。開發(fā)人員現(xiàn)在可以使用Claude 3.5 Sonnet來生成、測試和評(píng)估提示詞，使用提示詞工程技術(shù)進(jìn)一步優(yōu)化輸入內(nèi)容，從而改進(jìn)Claude在特定任務(wù)上的回答質(zhì)量。

當(dāng)我們要求語言模型執(zhí)行某些任務(wù)時(shí)，它對(duì)于輸入內(nèi)容一般比較寬容，但有時(shí)對(duì)提示措辭的微小變更則可能大大提升輸出結(jié)果的質(zhì)量表現(xiàn)。以往我們必須親自調(diào)試措辭，或者聘請(qǐng)?zhí)崾驹~工程師專門負(fù)責(zé)此事，但這次公布的新功能提供快速反饋、能幫助用戶輕松找到符合預(yù)期的改進(jìn)方向。

這些功能就旋轉(zhuǎn)在Anthropic控制臺(tái)的新增Evaluate評(píng)估選項(xiàng)卡下。控制臺(tái)是該公司專門為開發(fā)人員提供的測試平臺(tái)，旨在吸引更多企業(yè)客戶使用Claude構(gòu)建產(chǎn)品。其中一項(xiàng)功能正是Anthropic內(nèi)置的提示詞生成器，已經(jīng)于今年5月推出。這款生成器利用Anthropic內(nèi)部原研的提示詞工程技術(shù)，可對(duì)任務(wù)做出簡短描述，也可構(gòu)建出更長、更詳盡的提示內(nèi)容。雖然Anthropic的工具可能還無法徹底取代提示詞工程師，但該公司表示它有助于降低新用戶的上手門檻，也能為經(jīng)驗(yàn)豐富的提示詞工程師們節(jié)約時(shí)間。

在評(píng)估選項(xiàng)卡中，開發(fā)人員可以測試自己的AI應(yīng)用提示詞在各類場景下的實(shí)際效果。開發(fā)人員可以將真實(shí)示例上傳至該測試套件，也可以要求Claude提供一系列由AI生成的測試用例。之后，開發(fā)人員可以直接比較各類提示詞的有效性，并以五分制對(duì)示例答案進(jìn)行評(píng)分。

Anthropic在文章中列舉的示例中，開發(fā)人員發(fā)現(xiàn)自己的應(yīng)用程序在多個(gè)測試用例中都存在答案長度太短的問題。開發(fā)人員只需調(diào)整提示詞中的一行就能擴(kuò)展答案長度，并將它同時(shí)應(yīng)用于所有測試用例。這無疑將為開發(fā)人員節(jié)省大量時(shí)間和精力，特別是那些幾乎或者完全不具備提示詞工程經(jīng)驗(yàn)的開發(fā)人員。

Anthropic公司CEO兼聯(lián)合創(chuàng)始人Dario Amodei在今年早些時(shí)候在Google Cloud Next大會(huì)上接受采訪時(shí)表示，提示詞工程是企業(yè)廣泛采用生成式AI的關(guān)鍵因素、甚至說前提之一。Amodei總結(jié)稱：“這事看似簡單，但讓專業(yè)提示詞工程師上手30分鐘，往往可以決定一種應(yīng)用到底能不能順利運(yùn)行、達(dá)成目標(biāo)。”