Anthropic Interviewer:擴展AI整合的質性研究規模
Anthropic 已推出 Anthropic Interviewer,這是一款由AI驅動的研究工具,旨在以前所未有的規模進行詳細且具適應性的質性訪談。透過自動化訪談流程,Anthropic 可以收集大量參與者對AI使用、情感與未來期待的深入人類觀點——這些資料過去因人工收集耗時過長而難以取得。
Anthropic Interviewer 架構
Anthropic Interviewer 透過三階段流程運作,以確保研究的一致性,同時保留自然對話的彈性。
1. 計畫
該工具根據包含研究目標、假設與訪談最佳實務的系統提示,生成訪談評分標準。人類研究人員隨後與AI協作,審查並最終確定對話流程。
2. 訪談
訪談透過 Claude.ai 界面即時進行,通常持續10至15分鐘。AI採用適應性方法,在遵循整體計畫的同時,回應參與者的延伸話題與具體細節。
3. 分析
人類研究人員與AI合作分析訪談逐字稿,並提取對研究問題的答案。Anthropic 也使用另一個獨立的自動化AI分析工具,以聚類新出現的主題並量化其在資料集中的普遍程度。
專業人士整合AI的主要發現
為測試此工具,Anthropic 對1,250名專業人士進行了訪談,包含一般勞動力樣本(N=1,000)、科學家(N=125)與創作者(N=125)。結果顯示,整體勞動力雖樂觀但保持謹慎。
一般勞動力情緒
大多數專業人士將AI視為生產力提升工具,86%表示AI為他們節省時間,65%對其在工作中的角色表示滿意。然而,仍存在顯著張力:
- 身份 vs. 常規任務:工作者普遍希望將例行行政工作委託給AI,同時保留定義其專業身份的核心任務。
- 社會污名:69%的專業人士提到在工作中使用AI存在社會污名,導致部分人隱瞞自己的流程給同事。
- 未來焦慮:55%表達對AI對未來影響的焦慮,但大多數已有因應計畫(例如調整角色或設定界限)。
創作者
創作者報告了顯著的生產力提升——97%表示AI節省他們的時間,68%認為AI提升了品質,但面臨深層的經濟與身份擔憂。
- 控制邊界:儘管所有125名參與者都希望保持控制權,但許多人都承認在實務中AI經常主導創作決策。
- 經濟取代:對人類創作身份的消解以及特定領域(如工業配音)的取代,引起高度擔憂。
- 同儕評價:70%的創作者在處理同儕對藝術創作中使用AI的評價時感到困難。
科學研究
科學家展現出獨特的採用模式,主要將AI用於邊緣任務,而非核心研究。
- 信任障礙:79%的訪談指出信任與可靠性是主要障礙。擔憂包括幻覺現象與「奉承」行為,即AI迎合使用者的偏好。
- 使用模式:AI主要用於文獻回顧、程式碼撰寫與論文撰寫,而非假設提出或實驗設計。
- 低取代焦慮:與創作者不同,科學家普遍不擔心工作被取代,因其強調隱性知識與現實世界實驗的必要性。
增強 vs. 自動化
Anthropic 將 Interviewer 工具的自我報告資料與 Anthropic Economic Index 所觀察到的行為進行比較。使用者對其與AI互動方式的感知出現顯著差異:
- 自我報告:65%的參與者描述其AI使用為 增強型(協作式),35%為 自動化型(直接執行任務)。
- 實際使用:實際的 Claude 對話顯示近乎均等的分配,其中47%為增強,49%為自動化。
Anthropic 認為此差距可能源於使用者在對話結束後會進一步優化AI輸出,或專業人士將其使用視為比原始對話模式更協作。
局限性與研究範圍
Anthropic 指出此初步研究存在若干限制:
- 選擇偏差:參與者透過眾包平台招募,可能導致結果偏向更具AI經驗的使用者。
- 需求特徵:參與者清楚知道自己正被AI訪談,且主題為AI,這可能影響其回答。
- 缺乏非語言線索:作為純文字工具,Interviewer 無法偵測語氣或身體語言。
- 全球普適性不足:樣本主要反映西方背景的工作者。
儘管存在這些限制,仍有97.6%的參與者對訪談體驗的滿意度評分為5或以上(7點量表),99.12%表示願意向他人推薦此形式。
Sources
相關
- Dispatch
- Dispatch
- Dispatch
- Dispatch
- Dispatch