隨着人工智能進化速度遠超行業預期,AI 安全領域的先驅
就業與經濟變革:研究 AI 自動化對全球勞動力市場的重塑及應對機制。
威脅與防禦韌性:防範 AI 技術被濫用於生物安全、網絡攻擊等高危領域,增強社會防禦能力。
AI 價值觀對齊:如何確保前沿 AI 系統的決策符合人類的倫理標準與社會公共利益。
自循環治理體系:探索 AI 在自我監督與自演化過程中的透明度與合規管理。
近期

隨着人工智能進化速度遠超行業預期,AI 安全領域的先驅
就業與經濟變革:研究 AI 自動化對全球勞動力市場的重塑及應對機制。
威脅與防禦韌性:防範 AI 技術被濫用於生物安全、網絡攻擊等高危領域,增強社會防禦能力。
AI 價值觀對齊:如何確保前沿 AI 系統的決策符合人類的倫理標準與社會公共利益。
自循環治理體系:探索 AI 在自我監督與自演化過程中的透明度與合規管理。
近期
MiniMax(稀宇科技)啓動“10x Team”全球人才合作計劃,旨在匯聚各行業頂尖專家,結合行業深度認知與前沿AI技術,推動大模型在垂直領域的應用,將生產力從通用擴展至專業場景,實現行業效率“十倍增長”,並開放多模態核心資源以驗證行業認知價值。
Anthropic公司開發的Claude Mythos AI模型因網絡安全能力過強而未公開發布,但遭黑客在測試期間非法獲取。該事件凸顯AI安全挑戰,使注重安全的Anthropic陷入困境。
螞蟻AI安全實驗室對開源智能體框架OpenClaw進行安全審計,發現33個漏洞。最新版本已修復其中8個,包括1個嚴重、4個高危和3箇中危漏洞。螞蟻集團將持續關注其安全風險,支持AI智能體安全應用。
OpenAI收購初創公司Promptfoo,強化AI安全佈局。這家成立於2024年的公司專注於AI應用評測與安全,擁有23人團隊和35萬開發者用戶,估值達8600萬美元。收購將幫助OpenAI彌補智能體安全方面的不足,應對AI智能體快速發展帶來的安全挑戰。
OpenAI收購Promptfoo,強化AI安全防線。此舉旨在通過自動化工具,在開發早期檢測並防止大模型產生錯誤或被惡意引導,確保AI技術的可靠與安全。