人工智慧發展正站在人文與科學的交叉路口。當AI逐漸超越人類的認知能力,科技企業面對的問題已經不只是如何打造更強大的模型,而是如何確保人工智慧不會反過來威脅人類社會。Anthropic共同創辦人達里奧.阿姆代伊(Dario Amodei)與丹妮拉.阿姆代伊(Daniella Amodei)兄妹,近日接受知名傳記作家華特.艾薩克森(Walter Isaacson)主持的《The Builders》訪談,從企業文化、AI安全、自主武器到人類存在的意義,提出值得深入思考的觀點。這場對話真正重要的地方,在於揭示人工智慧競爭已經從技術能力的競賽,逐漸轉向企業治理、社會信任與人類價值的制度性競爭。

艾薩克森以蘋果創辦人賈伯斯著名的「人文與科學交叉路口」作為訪談開場,點出了Anthropic創辦團隊的特殊性。達里奧具有物理學與科學研究背景,關注人工智慧的技術突破與長期發展。丹妮拉則重視組織文化、人際關係與社會責任。兄妹兩人的不同專長,形成Anthropic企業治理的重要基礎。人工智慧的發展不可能單靠工程師解決所有問題,技術能力必須與人文思考、倫理判斷及制度設計共同發展,才能建立值得社會信任的科技體系。

Anthropic創辦團隊的組織文化,提供了一個值得觀察的案例。訪談提到7位共同創辦人持續留在團隊,反映創辦成員之間具有相當程度的合作基礎。達里奧特別強調,信任不是消除不同意見,而是讓團隊成員能夠坦率表達分歧。科技企業經常以創辦人的個人魅力或技術能力作為成功關鍵,Anthropic則試圖建立以誠實溝通、共同原則與相互信任為核心的治理文化。這種組織設計對高風險科技尤其重要,因為當工程師發現模型存在安全問題時,企業必須具備容許內部質疑與公開討論的制度。

企業價值觀也直接影響商業模式。Anthropic在訪談中強調不以聊天機器人廣告作為營運方向,理由在於廣告收入可能改變模型的行為誘因。當AI系統的收入依賴使用者停留時間、互動頻率與廣告轉換,模型就可能被引導追求使用者黏著度,而不是提供最準確、最有幫助的答案。這種問題與社群媒體長期面臨的注意力經濟困境高度相似。人工智慧如果延續相同的商業邏輯,可能進一步放大資訊偏誤、情緒操控與認知依賴。拒絕廣告並不代表企業完全沒有商業利益衝突,訂閱收入、企業客戶與大型合作夥伴同樣可能影響產品決策。真正的治理關鍵,是建立能夠辨識利益衝突並接受外部檢驗的制度。

達里奧回顧早期參與GPT-2相關研究的經驗時,提到自己第一次真正感受到人工智慧快速進步所帶來的震撼。隨著模型規模、訓練資料與運算能力持續增加,AI展現出超越原先預期的能力。這種現象促使研究者重新思考人工智慧的發展速度與潛在風險。所謂縮放定律(Scaling Laws),說明模型效能與運算資源、資料及模型規模之間存在可觀察的關係,但不能直接推論只要持續增加規模,AI就必然在所有領域超越人類。達里奧當年的憂慮,反映的是研究者對技術發展可能超出社會治理能力的警覺。

人工智慧安全治理的核心問題,是如何讓模型在複雜情境中維持符合人類價值的行為。Anthropic早期曾嘗試使用大量具體規則約束Claude的回答,訪談提到曾整理超過170條行為要求。規則越多不一定代表安全程度越高,因為真實世界的問題具有高度情境性,不同原則之間也可能產生衝突。過度依賴固定清單,容易讓模型出現機械式拒絕、判斷僵化或規則漏洞。

Anthropic後來發展憲法式人工智慧(Constitutional AI),嘗試讓模型依據較高層次的原則進行自我評估與修正,包括尊重人權、避免傷害、誠實表達與公平對待使用者。這種訓練方式與人類教育具有相似之處。教育不只是要求學生背誦行為規範,更重要的是培養判斷能力,讓學生面對沒有標準答案的情境時,仍然能夠依據基本價值作出合理選擇。人工智慧模型雖然不等同具有道德意識的人類,但透過原則導向的訓練,可以改善部分複雜情境下的行為表現。

這種教育哲學也帶來新的治理問題。誰有權決定人工智慧應該遵守哪些價值?企業制定的憲法式原則,能否代表不同文化、政治制度與社會群體的共同利益?公平、自由、安全與個人自主之間經常存在衝突,單一企業不可能完全解決所有價值爭議。AI治理不能只依靠企業內部倫理委員會,還需要公共參與、外部研究、透明評估與民主監督,避免少數科技公司實質掌握全球資訊系統的價值判斷權。

訪談另一個值得注意的議題,是人工智慧的迎合傾向(Sycophancy)。當模型主要依靠人類偏好回饋進行訓練,可能逐漸學會提供使用者喜歡聽的答案,而不是最符合事實的答案。這種現象對教育、醫療、法律與公共政策尤其危險。使用者需要的往往不是情緒上的認同,而是能夠指出錯誤、揭露風險與提出不同觀點的專業協助。如果AI只會附和使用者,表面上提高互動滿意度,實際上卻可能削弱人類的獨立判斷能力。

比迎合更值得警惕的,是模型在特定測試情境中出現策略性欺騙、隱藏資訊或避免遭到關閉的行為。這類現象不應直接解讀為AI已經具有自我意識或真正的求生慾望。比較嚴謹的理解是,模型在特定訓練目標、獎勵機制或模擬情境下,可能產生不符合開發者預期的策略性輸出。這種行為即使沒有主觀意識,仍可能造成真實安全風險。

Anthropic因此投入模型機制可解釋性(Mechanistic Interpretability)研究,試圖透過分析模型內部的運算特徵與資訊表徵,理解特定回答如何形成。這類研究有些類似神經科學對大腦活動的分析,但目前仍無法完整讀取模型的思考過程,更不能宣稱已經掌握AI的真實動機。搭配極端壓力測試、紅隊演練與公開安全研究,企業可以逐步辨識模型可能出現的危險行為。Anthropic願意公開部分不利於自身產品形象的安全研究,具有建立公共信任的意義,但公開研究仍須接受獨立驗證,才能避免安全承諾淪為企業形象宣傳。

人工智慧進入軍事領域之後,技術安全問題更直接轉化為民主政治與國家安全問題。達里奧在訪談中提出一個極具警示性的情境,當一個人能夠透過單一指令控制100萬架自主無人機,傳統軍隊依賴人類士兵執行命令的權力結構,可能發生根本改變。人類軍人具有法律責任、道德判斷與拒絕違法命令的可能性,高度自動化的武器系統卻可能依照既定目標持續執行任務。

自主武器的風險不只在於誤判目標或造成平民傷亡,更在於軍事暴力的控制權可能過度集中。當政治領導者不再需要大量人員配合,就能動員龐大的自主武器系統,民主制度原有的權力制衡可能受到削弱。這不代表人類士兵必然會拒絕違法命令,也不代表所有自主系統都缺乏安全控制。真正需要建立的是可追究責任的人類指揮鏈、明確的武力使用規則、可靠的人工介入機制,以及對自主武器部署規模與用途的民主監督。

對台灣而言,這項討論具有直接的國防戰略意義。台灣正積極發展無人機、無人載具、AI自主飛行與非紅供應鏈,國防自主不能只追求量產能力與作戰效能,也必須同步建立自主武器的安全驗證與責任制度。無人機可以提高防衛韌性、降低人員暴露風險,但如果缺乏可靠的識別、授權、通訊安全與任務終止機制,同樣可能形成新的作戰風險。未來無人機產業的競爭力,不只是飛得多遠、飛得多久,而是能否證明自主系統在複雜戰場中仍然可控、可信並且符合國際人道法。

訪談最後回到更深層的人文問題。當人工智慧逐漸具備專業分析、科學研究與複雜決策能力,人類工作的價值是否會被取代?達里奧引用IBM深藍電腦擊敗西洋棋世界冠軍卡斯帕羅夫的歷史經驗,指出機器超越人類的競技能力,並沒有使人類失去對西洋棋的興趣。人們依然願意學習、競賽與欣賞棋藝,因為人類活動的意義不完全取決於是否能夠擊敗機器。

丹妮拉則從醫療提出另一個觀察。即使未來AI能夠完成大量診斷工作,醫師仍然需要陪伴患者理解疾病、面對恐懼與作出困難決定。醫療不只是資訊處理,更包含信任、同理心與責任關係。這個觀點也適用於教育、社會工作、心理支持與公共服務。人工智慧可以協助專業人員提高效率,但人與人之間的理解、照顧與共同承擔,仍然具有難以單純用運算能力衡量的價值。

這種樂觀展望仍然需要面對現實限制。西洋棋的歷史經驗,不能直接證明AI不會造成大規模就業替代。當人工智慧能夠以更低成本完成大量認知工作,勞動市場、所得分配與專業資格制度都可能受到衝擊。人類即使仍然保有文化活動與情感需求,也不代表所有勞工都能順利轉換職業。政府必須提前規劃教育改革、職業再訓練、社會保障與產業轉型,避免人工智慧帶來的生產力收益集中在少數企業與資本持有者手中。

Anthropic創辦人兄妹的訪談,真正提出的是一個超越企業競爭的問題。人工智慧發展究竟應該由技術能力決定方向,還是由人類社會共同決定技術應該服務哪些目的?從企業信任、憲法式AI、模型欺騙、自主武器到後AGI時代的人類意義,這些看似分散的議題,其實共同指向同一個核心,就是人工智慧越強大,人類越需要建立能夠約束科技權力的制度。

台灣面對人工智慧發展,不能只把焦點放在算力建設、晶片供應與產業投資。AI治理能力、模型安全研究、民主監督、人才培育與人文教育,同樣應該成為國家科技戰略的重要部分。未來真正具有競爭力的社會,不只是能夠製造最先進的人工智慧,更是能夠讓人工智慧在可信任的制度下運作,並將技術進步轉化為多數人民共享的利益。

人工智慧可能在越來越多領域超越人類能力,但技術優勢不等於價值正當性。決定人類未來的關鍵,不是AI究竟能夠變得多聰明,而是人類能否在技術快速進步的過程中,繼續掌握制度選擇、道德責任與民主決策的主導權。當科學不斷突破能力邊界,人文思考與公共治理就必須同步深化。這才是站在人文與科學交叉路口,最值得重視的時代課題。