「千字評測」體驗不同的AI Agent構建平臺
最近體驗到了幾款AI Agent構建平臺,其中Betteryeah、Coze在產品形態上有所相似,本文將選取這兩大平臺,從產品經理視角拆解通過不同平臺構建AI Agent體驗對比。
01 產品評測范圍
Betteryeah和Coze從產品形態來說更像是平臺型產品,從全局視角來說, Betteryeah和Coze除了提供AI Agent的創建功能,還構建了一系列的生態服務,例如Agent應用市場、Bot應用市場等發布分享AI 應用的生態。避免思路發散,本文將聚焦于AI Agent的構建流程進行產品評測,從搭建應用視角具象認識和理解AI Agent。
▲ 產品評測范圍一覽
02 單元產品概念
Betteryeah:Agent
▲ Betteryeah Agent概念圖
Betteryeah的Agent代表了用戶可以構建的最基本的AI產品單元。換句話說,在Betteryeah平臺上開發AI應用實質上就是創建Agent。這些Agent支持流程集成、插件擴展和數據管理,用戶可以通過直觀地拖放操作來完成最小單元產品的構建。
Coze:Bot
▲ Bot的兩種模式
Coze的Bot代表了用戶在該平臺上可以構建的最小AI產品模塊。換言之,創建AI應用在Coze平臺本質上就是生成一個Bot。與Betteryeah的Agent相比,Coze平臺的Bot最大的不同是,它不僅支持單一Agent,還能實現多個Agent的協同集成。用戶可以利用知識庫、工作流等高級功能來定制Bot,確保其對用戶查詢的響應既準確又高效,滿足用戶的預期需求。
03 應用創建流程
Betteryeah
▲ Agent創建流程
1)創建Agent
▲ 創建Agent
首頁左上角點擊創建Agent,可以選擇從空白創建、也可選擇從模版中選擇創建。
2)角色定義
▲ 角色定義
在創建Agent之后,首要步驟是為所創建的Agent進行詳盡的角色定義。這一定義過程涉及以下幾個關鍵要素:
- 角色設定:首先,為您的Agent賦予一個恰當的名稱。隨后,從目標、需求、技能、工作流程到輸出模式等多個維度,對角色進行細致而結構化的定義。
- 開場白設計:這是Agent與用戶初次接觸時的問候語。一個有效的開場白不僅要友好,還要清晰地向用戶傳達Agent的能力和限制,使用戶對Agent的功能有一個初步的了解。
- 開場提問引導:根據Agent所扮演角色的典型應用場景,精心設計開場提問。例如,如果Agent扮演的是某位學校領導的秘書角色,那么可以設置一些關于領導日常安排的常見咨詢問題,以便更自然地引導對話流程。
3)設置知識庫
▲ 設置知識庫
完成角色創建后,從側邊欄的引導來看,下一步就是導入知識庫。知識庫是對大模型能力邊界的拓展,眾所周知大模型的訓練數據,是公開而普世的知識數據,當你問它你的企業、或者某個領域非常專業的問題時,它無法給出準確的回答。知識庫相當于Agent的“外部資料庫”,當被問到不懂的問題時,Agent先去知識庫里查詢一番,根據查詢出的內容,自己總結以后再回答給你。
▲ 知識庫原理
(1)添加文檔
▲ 添加文檔
Betteryeah的Agent支持文檔、問答、手動輸入、網頁等不同形式的知識庫導入。
(2)命中測試
▲ 命中測試
系統會對導入知識庫的文檔進行格式化解析,根據主題進行分段,如果對分段結果有異議,點擊右上角進行重新分段修改,通過命中測試可以進行測試答案輸出的效果。
▲ 查詢方法
測試效果時可以選擇不同查詢方法,關鍵詞查詢、語義查詢、混合查詢三種模式。
- 關鍵詞查詢:精確查詢,適合通過人名、地名等查詢具體內容
- 語義查詢:語義相似查詢,適合通過描述、問題語義查詢相似答案
- 混合查詢:使用語義和關鍵詞綜合查詢,效果最好
(3)知識庫設置
▲ 知識庫設置
導入知識庫的知識,可以通過后臺設置Agent按需查詢知識庫或者強制查詢知識庫,知識查詢、查詢結果也可以進行匹配算法。
4)添加插件
完成知識庫的設置后,順著側邊欄下一步就是插件設置。點擊右上角添加插件,會有一系列插件列表。選擇需要對接的外部平臺插件,目前平臺支持抖音、微博、小紅書、新浪財經、第一財經、艾瑞咨詢、攜程、去哪兒、釘釘、企微、飛書、Notion、淘寶、京東、拼多多等外部平臺的部分能力插件。
▲ 添加插件
▲ 插件列表
▲ 插件市場
Betteryeah的插件需要等官方開發,不支持自定義新建。
5)工作流設置
完成知識庫的設置后,順著側邊欄下一步是工作流設置。工作流設置,通過可視化流程編排界面,融合知識庫、AI模型和代碼塊,簡化了復雜業務流程的構建。
Flow適用于需要多步驟執行或復雜邏輯處理的任務,以及對輸出準確性和格式有高要求的場景。使用方式靈活,可以作為AI助手Agent的技能擴展,獨立運行進行調試,批量處理大量數據,設置定時任務自動執行,或通過API被外部系統調用,如集成到AI私信機器人中,以擴展現有系統的AI能力。
▲ 工作流創建流程
▲ 工作流編輯
6)數據設置
完成知識庫的設置后,順著側邊欄下一步就是數據設置。數據設置支持創建表或導入表數據。
▲ 數據設置
▲ 創建數據表
7)發布使用
Batteryeah的Agent創建完成后支持以網頁鏈接、平臺對話、外部系統使用。同時在Batteryeah平臺上可以定義用戶權限及可見范圍。
▲ 發布使用
Coze
▲ Bot創建流程
1)創建Bot
首頁左/右上角點擊創建Bot,在創建時可以將Bot的名稱、功能介紹進行填寫。這一步驟類似于,Bot的角色定義。
2)Bot編排
Bot編排支持?設以及回復邏輯、模型選擇、編排模式選擇等功能。
- ?設與回復邏輯:輸?Bot 要執?的指令信息,即編寫提示詞。建議在編寫提示詞時,為 Bot 設置?個??,例如產品問答助?、翻譯助理等等,并采?結構化的寫法。
- 模型選擇:選擇需要使用的?模型。
- 編排模式:默認采?采?單 Agent 模式。當需要搭建更復雜、功能更全?的時,可選擇 Multi-agent模式。你可以為不同的 agent配置不同的將復雜的任務分解為?組更簡單的任務,?不是在?個 Bot 的提示所有的判斷條件和使?限制。
▲ 單Agent模式
▲ 多Agent模式
3)添加Bot技能
Bot編排中可以為Bot添加知識、插件等技能解決模型幻覺、專業領域知識不足等問題。
(1)插件
通過 API 連接集成各種平臺和服務,擴展了 Bot 能力。Coze平臺有內插件可供直接調用,用戶也可以創建自定義插件,將所需要的 API 集成在Coze內作為工具來使用。
▲ 內置插件
▲ 新建插件
(2)工作流
工作流是一種用于規劃和實現復雜功能邏輯的工具。用戶可以通過拖拽不同的任務節點來設計復雜的多步驟任務,提升 Bot 處理復雜任務的效率。
▲ 創建工作流
▲ 工作流編排
(3)觸發器
觸發器功能支持 Bot 在特定時間或特定事件下自動執行任務。
▲ 創建觸發器
(4)知識
知識庫功能支持用戶添加本地或線上文本內容和表格數據供 Bot 使用,以提升大模型回復的可用性和準確性。
▲ 知識類型
▲ 創建知識
(5)變量
變量功能可用來保存用戶的個人信息,例如語言偏好,讓 Bot 記住這些特征,使回復更加個性化。
▲ 創建變量
(6)數據庫
Coze的數據庫功能提供了一種簡單、高效的方式來管理和處理結構化數據,開發者和用戶可通過自然語言插入和查詢數據庫中的數據。同時,也支持開發者開啟多用戶模式,支持更靈活的讀寫控制。
▲ 創建數據表
(7)長期記憶
長期記憶功能模仿人類大腦形成對用戶的個人記憶,基于這些記憶可以提供個性化回復,提升用戶體驗。
▲ 長期記憶
4)Bot發布
完成Bot的編排后,可發布Bot使用。
▲ 編輯Bot對話
▲ 選擇發布平臺
04 總結
優勢分析
1、相較而言,Betteryeah平臺用戶創建Agent的步驟更清晰。
Betteryeah平臺通過其精心設計的用戶界面和流程,為用戶創建Agent提供了一個條理清晰、邏輯嚴謹的步驟化指南。
該流程從對Agent的精準定位著手,經過細致的個性化設置,一直延伸到調試階段的每一個細節,每個環節都配備了直觀的導航提示和操作指引。
這種設計不僅極大地簡化了用戶的入門過程,提升了開發工作的效率,而且更重要的是,它通過明確的步驟引導,培養了用戶系統化的思考模式。
在AI應用開發的全過程中,用戶能夠更深刻地理解并掌握每個環節的精髓,從而構建出既高效又精準的AI解決方案。
2、相較而言,Coze平臺插件創建流程更為靈活。
用戶不僅可以自主設計并開發個性化的插件,還能將這些創新成果發布至Coze的插件市場,與廣大開發者和用戶共享。
此外,Coze還提供強大的API支持,使用戶能夠輕松實現與外部平臺的自定義對接,進一步擴展了應用的功能性和適用范圍。
劣勢分析
1、創建過程中,弱化角色協同,無形增加使用門檻。
在傳統的互聯網應用開發過程中,角色分工明確:產品經理負責需求分析,研發團隊負責實現需求,質量保證團隊負責測試和發現bug。然而,在這兩個平臺的AI應用創建過程中,從AI應用的構建路徑來看,角色定義(即需求分析)、插件與工作流的配置(即需求實現),以及應用的調試(即bug測試)等所有環節,默認都由單一用戶來完成。這種做法在無形中提高了對平臺用戶綜合技能的要求,從而增加了使用的門檻。
▲ 工作流創建困難
2、平臺的用戶角色賬號體系相對獨立,組織化應用挑戰巨大
在Betteryeah和Coze這兩個平臺中,用戶角色賬號體系均保持相對獨立性,這雖然為平臺帶來了一定的安全性和封閉性,但也給組織化應用的推廣帶來了不小的挑戰。
當用戶將創建的Bot或Agent部署到其他應用場景時,必須進行賬號角色的映射工作,這一步驟可能會涉及復雜的權限管理和角色轉換,增加了操作的復雜性。
05 AI時代下的一點個人感想
這個世界永遠不缺聰明人;自然會有千千萬萬優秀的AI主題產品,任何優秀的產品,都需要懂它的人去應用,才能發揮出更大的價值,能應用好優秀產品的人,是需要極具空杯心態的行業專家
參考文檔
1.Betteryeah幫助文檔
https://xq5s55765m8.feishu.cn/wiki/TgEOwtlqsio7GXkbi05cquVxnCh
2.Coze使用指南
https://www.coze.cn/docs/guides/prebuilt_bot
本文由 @是湘湘呀 原創發布于人人都是產品經理。未經作者許可,禁止轉載
題圖來自Unsplash,基于CC0協議
該文觀點僅代表作者本人,人人都是產品經理平臺僅提供信息存儲空間服務。
寫得好