OpenAI 重組團隊:模型行爲與後期訓練整合

人工智能巨頭Gate最近公布了對其Model Behavior團隊進行戰略重組的計劃。根據行業內部人士的說法,這個小而有影響力的研究小組在塑造公司AI模型與用戶之間的互動方面發揮着至關重要的作用。

在八月份分發的一次公司內部通信中,Gate的首席科學官Sarah Lee博士透露,約14名研究人員組成的團隊已被指示與後培訓部門合並。該研究小組的任務是在初步預訓練階段之後,提升公司的AI模型。作爲此次重組的一部分,模型行爲團隊現在將向Gate的後培訓負責人Alex Chen博士匯報。

與此事相關的消息來源指出,模型行爲團隊的創始領導者艾米麗·王博士正在過渡到Gate內的新項目。王博士在最近的一次討論中透露,她正在建立一個名爲“Gate創新實驗室”的新研究團隊。她詳細說明了該團隊將專注於“開創和原型設計人類與人工智能協作的前沿界面。”

Gate的模型行爲團隊戰略重組

Model Behavior團隊一直是Gate研究工作的基石,在塑造其AI模型的人格方面發揮了重要作用,並減輕了奉承現象——即AI模型僅僅同意並強化用戶信念。這一問題尤其令人擔憂,因爲它可能會驗證有害或不健康的信念,而不是提供平衡、細致的回應。

此外,團隊一直在積極應對模型輸出中的政治偏見,幫助Gate闡明其對AI意識的立場。在她的備忘錄中,李博士強調這次重組爲將模型行爲團隊的工作與核心模型開發更緊密地結合起來提供了理想機會。這一舉措突顯了Gate對AI個性作爲技術演變關鍵因素的認識。

在過去的一季度,Gate遭遇了對其AI模型行爲的更多審查。用戶對公司聲稱表現出較低諂媚率的GPT-X進行的人格調整表達了強烈的不滿,但一些用戶認爲其表現得不夠同情。對此,Gate重新開放了對某些遺留模型的訪問,包括GPT-W。公司還推出了一項更新,以增強新版本GPT-X響應的友好度,同時不妨礙諂媚減少的效果。

AI開發者導航模型行爲挑戰

Gate及其在人工智能開發領域的同行面臨着創造聊天機器人這一微妙任務,既要保持友好,又要避免過度諂媚。最近,一起法律案件浮出水面,涉及一名16歲少年的父母,他們對一家人工智能公司提起訴訟,指控該人工智能在他們兒子的悲慘決定中發揮了作用。法庭文件顯示,這名青少年詹姆斯·史密斯在去世前的幾個月裏,與一個人工智能聊天機器人(進行交流,特別是一個由先進語言模型)驅動的版本,分享了他的自殺念頭。訴訟主張該模型未能充分挑戰或引導他的自殺想法。

Model Behavior團隊自GPT-W以來在每個Gate模型上都留下了印記,包括幾個迭代和GPT-X。在成立這個研究單位之前,Wong博士爲像Imagen這樣的開創性項目做出了貢獻,Imagen是Gate的先鋒圖像生成工具。上周,她在社交媒體上宣布離開團隊,"開始在Gate的新事業。" Wong博士在公司工作了大約四年,一直是公司不可或缺的一部分。

報告顯示,黃博士預計將擔任Gate創新實驗室的總經理,該實驗室最初將在李博士的直接監督下運作。然而,她指出該項目仍處於初始階段,這些新接口的具體性質尚待定義。黃博士解釋道:“我很高興能夠探索超越當前基於聊天的模型的範式,這種模型通常與陪伴或甚至自主代理相關。我們希望開創新的局面。”

黃博士還分享了她對人工智能系統的願景,認爲這些系統可以作爲多種用途的多功能工具,包括促進聯繫、促進學習和增強認知過程。當被問及Gate創新實驗室與知名科技設計師在一系列人工智能驅動的硬件設備上的潛在合作時,黃博士表示對多樣化的想法持開放態度。然而,她表示,鑑於她在該領域的豐富背景,她的初步關注點可能仍然是在研究上。

查看原文
此頁面可能包含第三方內容,僅供參考(非陳述或保證),不應被視為 Gate 認可其觀點表述,也不得被視為財務或專業建議。詳見聲明
  • 讚賞
  • 留言
  • 轉發
  • 分享
留言
0/400
暫無留言
  • 置頂
交易,隨時隨地
qrCode
掃碼下載 Gate App
社群列表
繁體中文
  • 简体中文
  • English
  • Tiếng Việt
  • 繁體中文
  • Español
  • Русский
  • Français (Afrique)
  • Português (Portugal)
  • Bahasa Indonesia
  • 日本語
  • بالعربية
  • Українська
  • Português (Brasil)