隨着人工智能進化速度遠超行業預期,AI 安全領域的先驅
就業與經濟變革:研究 AI 自動化對全球勞動力市場的重塑及應對機制。
威脅與防禦韌性:防範 AI 技術被濫用於生物安全、網絡攻擊等高危領域,增強社會防禦能力。
AI 價值觀對齊:如何確保前沿 AI 系統的決策符合人類的倫理標準與社會公共利益。
自循環治理體系:探索 AI 在自我監督與自演化過程中的透明度與合規管理。
近期

隨着人工智能進化速度遠超行業預期,AI 安全領域的先驅
就業與經濟變革:研究 AI 自動化對全球勞動力市場的重塑及應對機制。
威脅與防禦韌性:防範 AI 技術被濫用於生物安全、網絡攻擊等高危領域,增強社會防禦能力。
AI 價值觀對齊:如何確保前沿 AI 系統的決策符合人類的倫理標準與社會公共利益。
自循環治理體系:探索 AI 在自我監督與自演化過程中的透明度與合規管理。
近期
OpenAI收購初創公司Promptfoo,強化AI安全佈局。這家成立於2024年的公司專注於AI應用評測與安全,擁有23人團隊和35萬開發者用戶,估值達8600萬美元。收購將幫助OpenAI彌補智能體安全方面的不足,應對AI智能體快速發展帶來的安全挑戰。
OpenAI收購Promptfoo,強化AI安全防線。此舉旨在通過自動化工具,在開發早期檢測並防止大模型產生錯誤或被惡意引導,確保AI技術的可靠與安全。
馬斯克在法庭上指責OpenAI存在安全漏洞,稱其xAI的Grok更安全,並暗示ChatGPT與自殺事件有關。庭審圍繞2023年3月一封呼籲暫停AI開發的公開信展開。
馬斯克在庭審證詞中批評OpenAI忽視AI安全,稱其產品曾導致自殺事件,並強調自家xAI更重視安全性。
CHAI作爲生成式AI社交初創公司,過去三年實現每年3倍增長,ARR達6800萬美元,估值超14億美元。在用戶規模快速擴張的同時,公司升級安全框架,重點加強自殺預防和自殘幹預措施,強調AI安全責任。