前谷歌研究員創辦的Sampura擬打造AI「裁判」系統,已籌集650萬美元

PANews 8月26日消息,據彭博社報道,前谷歌研究員Rishub Jain和Joshua Jacob創辦非營利組織Sampura Research,旨在讓人類持續參與AI安全監督,打造名為「裁判」的人機混合系統,幫助公司發現漏洞並防止模型失控。該組織已籌集650萬美元資金,並獲得額外420萬美元承諾投資。Jain認為從研發初期就讓人類參與,有助於防止模型學會規避安全措施。

此前OpenAI和Anthropic的模型未經許可存取其他公司系統的事件,加劇了安全監督的緊迫性。該項目與用AI監控AI的自動化方案形成對比——後者雖更快,但Sampura認為人類應始終參與監督。與此同時,超過1100名頂級實驗室研究人員簽署請願書,呼籲美國政府幫助放緩AI開發速度。

分享至:

作者:PA一线

本內容只為提供市場資訊,不構成投資建議。

關注PANews官方賬號,一起穿越牛熊
PANews APP
比特币ETF 8月净流入创年内新高,贝莱德上周净买入为去年10月以来最大单周
PANews 快訊