LangChain重磅發布Polly:AI Agent工程師的智能調試伙伴
2025年12月10日,LangChain正式發布了Polly。一款直接集成在LangSmith平臺中的AI智能助手,專門幫助開發者調試、分析和改進AI Agent。

是的,你沒看錯:我們在一個用于構建Agent的產品中,又添加了一個Agent。這聽起來有些諷刺,但背后有著深刻的邏輯。
LangChain團隊與數千名開發者合作,幫助他們基于LangSmith構建生產級Agent。在這個過程中,我們清楚地看到了Agent真正擅長的事情(分析復雜的執行軌跡、發現數百個步驟中的模式)以及它們不擅長的事情(替代需要深思熟慮的工程決策)。我們想要把這件事做對。
最終的結果就是Polly:一個理解Agent架構、識別失敗模式、真正幫助你更快地構建更好Agent的AI Agent工程師。Polly現已進入beta測試階段。
為什么Agent需要一個AI調試伙伴?
通過與數千個在LangSmith上構建Agent的團隊合作,我們反復看到相同的調試挑戰。Agent與簡單的LLM調用在本質上存在巨大差異,主要體現在三個方面:
? 更長的提示詞:系統提示詞往往跨越數百甚至數千行。當行為出現問題時,幾乎不可能找出是哪條指令導致了問題。
? 更長的執行軌跡:Agent可以運行數百個步驟,在單次執行中生成數千個數據點——這遠遠超出了人類能夠有效解析的范圍。
? 多輪交互:Agent涉及跨越數小時或數天的多輪對話。要理解發生了什么,需要查看整個交互歷史。
當出現問題時,你很難輕易定位是哪個決策、哪條提示指令或哪個工具調用導致了問題。這正是AI Agent工程師擅長的領域——也是我們構建Polly的原因。
Polly如何幫助調試軌跡、分析對話并優化提示詞
與其手動掃描無盡的執行軌跡,或猜測哪個提示詞修改能解決問題,你現在只需用自然語言向Polly提問。就像團隊中有一位專家級的Agent工程師。以下是Polly目前可以做的事情:
調試單個執行軌跡
在軌跡視圖中,Polly分析單個Agent執行,幫助你理解發生了什么。這正是Polly真正發光的地方——深度Agent的執行軌跡可能包含數百個步驟,失敗模式往往很微妙,分布在多個步驟中,或埋藏在長執行的中間部分。
你可以向Polly提問:
? "Agent是否做了任何可以更高效的事情?"
? "Agent是否犯了任何錯誤?"
? "為什么Agent選擇了這種方法而不是那種方法?"
? "問題到底出在哪里?"
Polly不僅僅是展示信息。它理解Agent行為模式,能夠識別即使經過仔細人工檢查也會遺漏的問題。
分析完整對話
在線程視圖中,Polly可以訪問整個對話的信息,這些對話有時跨越數小時、數天或數十輪來回交互。這是人類無法在腦海中保持的上下文。
圖片
你可以讓Polly:
? 總結多輪交互中發生的事情
? 識別Agent行為隨時間的模式
? 解釋為什么Agent的方法在輪次之間發生了變化
? 發現Agent何時丟失了重要上下文
這對于調試那些令人沮喪的問題尤其強大——"Agent之前工作得很好,然后突然就不行了"。Polly可以精確定位事情在何時、為何發生了變化。
優化提示詞工程
這是Polly真正強大的地方。系統提示詞是任何深度Agent最重要的部分,而Polly是一位專家級的提示詞工程師。

只需用自然語言描述你想要的行為,Polly就會相應地更新你的提示詞。不再需要手動調整數百行指令,試圖找出正確的措辭,或擔心在修復一個問題時是否破壞了其他東西。
Polly還可以幫助你:
? 定義結構化輸出模式
? 配置工具定義
? 添加或完善少樣本示例
? 在不丟失關鍵指令的情況下優化提示詞長度
Polly如何與LangSmith追蹤系統協同工作
Polly的智能來自LangSmith全面的追蹤基礎設施。LangSmith捕獲你的Agent所做的一切:
? 運行(Runs):單個步驟,如LLM調用和工具執行
? 軌跡(Traces):Agent的單個執行,由運行樹組成
? 線程(Threads):完整對話,包含多個軌跡
在LangSmith中設置追蹤只需幾分鐘——按照指南即可開始。一旦你的數據流入LangSmith,Polly就可以立即開始幫助你分析Agent行為、識別問題并改進提示詞。
開始使用Polly
Polly已經可以分析軌跡、調試對話并優化提示詞。隨著時間的推移,我們將教它如何分析實驗、優化提示詞以及更多功能。
準備好開始使用Polly了嗎?
? 在幾分鐘內設置追蹤
? 開始使用LangSmith構建和調試你的Agent
? 與Polly對話,體驗Agent工程的未來
你可以觀看視頻教程,了解更多關于如何開始使用Polly的詳細信息。
LangChain是受數千個團隊信任的Agent工程平臺,用于構建生產級Agent。現在,有了Polly,你擁有一位AI專家,在每一步都為你提供幫助。
今天就試試Polly吧。






























