防AI遭濫用!Anthropic重金海選化武專家 強化AI模型安全機制

商傳媒|責任編輯/綜合外電報導

根據英國《BBC》報導,據 BBC 報導,美國人工智慧公司 Anthropic 近期發布招聘訊息,尋找具備化學武器與爆炸物防禦經驗的專業人士,協助評估與防範 AI 系統可能遭到「災難性濫用」的風險。該公司表示,此舉旨在確保旗下 AI 助手 Claude 不會被用於生成與大規模毀滅性武器相關的危險資訊。此舉也反映生成式 AI 產業在快速發展的同時,正加強對安全與風險管理的重視。

Anthropic 在 LinkedIn 上發布的職缺指出,應徵者需具備至少五年以上與化學武器、爆炸物或相關防護領域的實務經驗,並熟悉包括「放射性散布裝置」(俗稱髒彈)在內的安全風險評估。該公司表示,這類跨領域專家將協助測試 AI 模型在極端情境下的回應能力,確保系統能有效阻止與危險武器製作相關的內容生成。

AI 企業近年持續加大在安全領域的投入。除了 Anthropic 外,OpenAI 也在招聘與生物與化學風險相關的研究人員,部分職位薪資上限可達約 45 萬美元。業界認為,隨著大型語言模型在科學研究與工程領域的應用日益廣泛,企業需要更完善的安全機制,以避免技術被惡意利用。

部分研究人員也對 AI 在敏感領域的應用提出警告。科技政策研究員 Stephanie Hare 表示,當 AI 系統涉及化學或爆炸物相關資訊時,必須特別謹慎,因為目前全球尚缺乏明確的國際規範來管理 AI 在這些高風險領域的應用。

Anthropic 共同創辦人 Dario Amodei 也曾多次公開指出,人工智慧仍處於快速發展階段,在安全機制尚未成熟之前,不應將其用於高風險的自動化決策領域。隨著生成式 AI 技術持續進步,如何在推動創新的同時建立有效的安全防線,正成為科技產業與政策制定者共同面臨的重要課題。

頭條留言
商傳媒
商傳媒https://sunmedia.tw/
商傳媒是一個提供財經、科技、智慧製造、醫療、產業資訊,為主要服務內容的金融、科技網路媒體,其宗旨在於提供台灣中小企業一個產品新聞的平台,未來更將推廣至世界各國!
- 廣告 -
- 廣告 -

最新文章

桃竹攜手打造未來城市 徐欣瑩請益張善政智慧治理經驗...

墨新聞|記者姚霞芬/新竹報導國民黨新竹縣長參選人、...

端午節送禮最對味 高雄林皇宮推出多款頂級粽品及禮盒...

墨新聞|記者林錫淵/高雄報導下(6)月19日就是端...

從案例中學教訓!基隆消防局強化工廠火災初期應變能力...

墨新聞|記者江育銓/基隆報導為提升工廠火災初期應變...

AI檢測助升學 上陞文教機構以小班輔導落實適性發展...

墨新聞|記者卞金峰/台北報導國高中升學體制日益著重...

新北八里愛心教養院戰將閃耀全障運 張孜維四連霸、許...

墨新聞|記者孫筱華/新北報導115年全國身心障礙國...