以下為個人筆記整理:
Transformer的能力限制:
a) 幾乎無法應付超出資料集範圍的問題或任務
b) 無法組合不同任務家族的技能
合格的 AI agent的定義:
能夠找出並成功執行組合技的能力，並且要能夠機伶地調用外部工具來輔助。
Note: 擅長組合技之外，還可以靠著外插推論出自己原本沒有的知識
Note:
如果只是想要創造一個完成特定任務的 AI agent，其實走回 RPA(Robotic process automation) 的老路就夠了。用 LLM 作為基底不見得是適合的，大部分的時候可能都會落入拿著鎚子到處找釘子的窘況。