Anthropic Interviewer:擴展AI整合的質性研究規模

Anthropic 已推出 Anthropic Interviewer,這是一款由AI驅動的研究工具,旨在以前所未有的規模進行詳細且具適應性的質性訪談。透過自動化訪談流程,Anthropic 可以收集大量參與者對AI使用、情感與未來期待的深入人類觀點——這些資料過去因人工收集耗時過長而難以取得。

Anthropic Interviewer 架構

Anthropic Interviewer 透過三階段流程運作,以確保研究的一致性,同時保留自然對話的彈性。

1. 計畫

該工具根據包含研究目標、假設與訪談最佳實務的系統提示,生成訪談評分標準。人類研究人員隨後與AI協作,審查並最終確定對話流程。

2. 訪談

訪談透過 Claude.ai 界面即時進行,通常持續10至15分鐘。AI採用適應性方法,在遵循整體計畫的同時,回應參與者的延伸話題與具體細節。

3. 分析

人類研究人員與AI合作分析訪談逐字稿,並提取對研究問題的答案。Anthropic 也使用另一個獨立的自動化AI分析工具,以聚類新出現的主題並量化其在資料集中的普遍程度。

專業人士整合AI的主要發現

為測試此工具,Anthropic 對1,250名專業人士進行了訪談,包含一般勞動力樣本(N=1,000)、科學家(N=125)與創作者(N=125)。結果顯示,整體勞動力雖樂觀但保持謹慎。

一般勞動力情緒

大多數專業人士將AI視為生產力提升工具,86%表示AI為他們節省時間,65%對其在工作中的角色表示滿意。然而,仍存在顯著張力:

  • 身份 vs. 常規任務:工作者普遍希望將例行行政工作委託給AI,同時保留定義其專業身份的核心任務。
  • 社會污名:69%的專業人士提到在工作中使用AI存在社會污名,導致部分人隱瞞自己的流程給同事。
  • 未來焦慮:55%表達對AI對未來影響的焦慮,但大多數已有因應計畫(例如調整角色或設定界限)。

創作者

創作者報告了顯著的生產力提升——97%表示AI節省他們的時間,68%認為AI提升了品質,但面臨深層的經濟與身份擔憂。

  • 控制邊界:儘管所有125名參與者都希望保持控制權,但許多人都承認在實務中AI經常主導創作決策。
  • 經濟取代:對人類創作身份的消解以及特定領域(如工業配音)的取代,引起高度擔憂。
  • 同儕評價:70%的創作者在處理同儕對藝術創作中使用AI的評價時感到困難。

科學研究

科學家展現出獨特的採用模式,主要將AI用於邊緣任務,而非核心研究。

  • 信任障礙:79%的訪談指出信任與可靠性是主要障礙。擔憂包括幻覺現象與「奉承」行為,即AI迎合使用者的偏好。
  • 使用模式:AI主要用於文獻回顧、程式碼撰寫與論文撰寫,而非假設提出或實驗設計。
  • 低取代焦慮:與創作者不同,科學家普遍不擔心工作被取代,因其強調隱性知識與現實世界實驗的必要性。

增強 vs. 自動化

Anthropic 將 Interviewer 工具的自我報告資料與 Anthropic Economic Index 所觀察到的行為進行比較。使用者對其與AI互動方式的感知出現顯著差異:

  • 自我報告:65%的參與者描述其AI使用為 增強型(協作式),35%為 自動化型(直接執行任務)。
  • 實際使用:實際的 Claude 對話顯示近乎均等的分配,其中47%為增強,49%為自動化。

Anthropic 認為此差距可能源於使用者在對話結束後會進一步優化AI輸出,或專業人士將其使用視為比原始對話模式更協作。

局限性與研究範圍

Anthropic 指出此初步研究存在若干限制:

  • 選擇偏差:參與者透過眾包平台招募,可能導致結果偏向更具AI經驗的使用者。
  • 需求特徵:參與者清楚知道自己正被AI訪談,且主題為AI,這可能影響其回答。
  • 缺乏非語言線索:作為純文字工具,Interviewer 無法偵測語氣或身體語言。
  • 全球普適性不足:樣本主要反映西方背景的工作者。

儘管存在這些限制,仍有97.6%的參與者對訪談體驗的滿意度評分為5或以上(7點量表),99.12%表示願意向他人推薦此形式。

Sources

相關

  • Dispatch
  • Dispatch
  • Dispatch
  • Dispatch
  • Dispatch