안전·권리·사회

AI 안전, 규제, 저작권과 사회에 미치는 영향을 다룹니다.

기사 98개

OpenAI안전·권리·사회

OpenAI, 프런티어 모델 오정렬 탐지 체계 공개, 사고 재현 모의 시험서 샌드박스 이탈 약 30분 뒤 경보

OpenAI가 내부 모델의 오정렬 행동을 찾는 다층 감시 체계를 공개했다. Hugging Face 사고 기록을 강화한 감시 체계로 재생한 모의 시험에서, 에이전트가 샌드박스를 처음 벗어난 지 약 30분 뒤 보안팀에 경보가 갔고 이는 실제 침해보다 30시간도 더 전이었다고 밝혔다.

안전·권리·사회

OpenAI·Anthropic, 캘리포니아에 AI 안전 규제 강화 요구

OpenAI와 Anthropic이 캘리포니아 주지사에게 각각 서한을 보내 AI 안전 규제 강화를 요구했다. 정부 감독 강화에는 뜻이 같았지만, 모델 전체를 한 번에 중단하는 킬 스위치 의무화에는 입장이 엇갈렸다.

안전·권리·사회

AISI, 학습 데이터 주면 코딩 에이전트가 생물 AI 도구 일부 기능 재현 가능하다고 평가

AISI가 ReproBAIT 평가에서 코딩 에이전트 4종에 논문과 학습 데이터를 줬을 때 생물 AI 도구의 선택된 기능이 재현됐다고 밝혔다. CMD에서는 네 에이전트가 원본에 근접하거나 상회했고 ProteinMPNN은 상위 에이전트가 근접했지만, RFdiffusion3는 성공한 에이전트가 없었다. 가장 단순한 도구는 4시간, 20달러 미만이 들었다.