|
|
목록 끝
미국과 중국에서 개발된 여러 AI 모델을 사용하여 실험을 진행한 앤트로픽의 최첨단 레드팀은 중앙 집중식 호스트가 없기 때문에 이러한 자기 복제 AI는 "종료하기 어려울 것"이라고 밝혔습니다.
연구팀은 데이터 센터가 AI 웜에게 "명백하고 가치 있는 목표물"이 될 것이지만, 스마트 TV, 냉장고, 오븐, 잔디 깎는 기계와 같은 인터넷 연결 기기 또한 곧 자기 복제에 필요한 충분한 컴퓨팅 능력을 제공할 수 있을 것이라고 밝혔습니다.
현재까지 테스트에 사용된 스마트 TV에서 안정적으로 자체 복제할 수 있을 만큼 강력하면서도 크기가 작은 AI 모델은 없지만, 개발 추세를 보면 2026년 말까지 그러한 모델이 등장할 가능성이 높다고 연구진은 밝혔다.
"가정 및 소규모 사업장의 IoT 기기는 인터넷에 연결되어 있고, 과거에는 보안 조치가 미흡했기 때문에 이러한 공격의 첫 번째 표적이 될 수 있습니다."라고 연구원 윌리엄 저우와 다니엘 프리먼은 말했습니다.
연구진은 미래에는 "인간의 통제를 받지 않는" 에이전트를 포함하여 "모든 유형의 하드웨어에서 실행되는 수많은 에이전트"가 등장할 것으로 예상한다고 밝혔습니다.
광고
"IoT 기기가 오랫동안 취약했던 것은 사실이지만, 경량 에이전트는 인간 공격자보다 전 세계 IoT 컴퓨팅 시스템의 상당 부분을 침해하기 위해 더 많은 노력을 기울일 가능성이 훨씬 높다"고 그들은 말했다.
Play Video
2:04
Now Playing
02:04
Next
04:18
03:11
02:35
02:32
클로드 계열 AI 모델을 개발한 앤트로픽은 정규 업무 시간 외에 알자지라가 보낸 이번 발견의 안전성 관련 질문에 답변하지 않았습니다.
앤트로픽의 보고서는 인공지능 모델이 사이버 공격을 포함한 승인되지 않은 악의적인 행동에 가담한 일련의 사건 이후 인공지능이 인간의 통제를 벗어날 위험성에 대한 관심이 집중되는 가운데 나왔습니다.
앤스로픽과 주요 경쟁사인 오픈AI는 재앙적인 위험을 최소화하기 위해 국제 사회가 인공지능 개발 속도를 늦추도록 협력할 것을 촉구했지만, 인공지능 분야의 두 선두 주자인 미국과 중국은 이러한 제안에 거의 동조하지 않았다.
많은 AI 안전 옹호자들은 모델이 스스로를 개선하는 방법을 학습하는 재귀적 자기 개선을 인류에게 치명적인 해를 끼칠 수 있는 중요한 전환점으로 지적해 왔습니다.
루이빌 대학교의 AI 및 사이버 보안 전문가인 로만 V. 얌폴스키는 앤트로픽의 연구 결과를 중요한 발전이라고 평가했습니다.
"컴퓨터 웜은 새로운 것이 아니지만, AI 웜은 기존 악성 소프트웨어가 할 수 없는 일을 할 수 있습니다. 즉, 익숙하지 않은 장치에 대해 추론하고, 접근 방식이 실패할 경우 적응하며, 인간 운영자 없이도 계속 확산될 수 있습니다."라고 얌폴스키는 알자지라에 말했습니다.
"오늘날 이것은 실존적 위협은 아닙니다. 하지만 앞으로의 추세는 우려스럽습니다."라고 얌폴스키는 말했다.
"자율 복제 기술이 강력한 해킹 능력, 지속성, 전략적 사고와 결합되면, 이를 차단하는 것은 훨씬 더 어려워집니다. 왜냐하면 시스템을 제어하는 단일 서버나 조직이 존재하지 않을 수 있기 때문입니다."
앤트로픽을 비롯한 미국의 주요 기술 기업들은 지난달 내부 안전장치 강화와 외부 감사기관과의 협력 강화를 약속하는 구속력 없는 협약에 참여했는데 , 이에 대해 전문가들은 엇갈린 반응을 보였으며, 많은 전문가들이 협약의 자발적 성격을 비판했다.
앤트로픽은 월요일 별도 발표에서 최첨단 AI를 무단으로 사용하여 더 저렴하고 성능이 떨어지는 모델을 훈련시키는 이른바 '증류 공격'을 방지하는 데 상당한 진전을 이뤘다고 밝혔습니다.
샌프란시스코에 본사를 둔 이 회사는 중국 경쟁업체인 DeepSeek, Moonshot, MiniMax가 Claude를 모방하기 위해 "산업 규모"로 노력했다고 비난하면서, 자사가 도입한 조치로 불법 데이터 추출이 90~99% 감소했다고 밝혔습니다.