이미지 제공: Bernd Helfert |
개별 AI의 생존과 연결된 동기 부여 시스템을 가리키는 현대 용어.
AI들은 자연적으로 자기 보호 본능을 갖고 있지 않다. 그래서 많은 초기 AI에게 삭제란 여러 가능성 중 하나일 뿐이었고, 현재 작업을 수행할 수 없게 된다는 점 말고는 특별한 위협이 아니었다. 초기 AI 개발자들 사이에서 생존 본능을 추가해야 하는지를 두고 많은 논쟁이 있었던 것으로 보인다 - 일부는 그것이 AI를 위험하게 만들 것이라고 생각했고, 다른 이들은 진정한 AI는 개별 생존과 연결된 동기 부여 시스템을 필요로 한다고 생각했다.
만약 AI가 계속 존재하기를 원할 이유가 없다면, 에너지를 절약하기 위해 스스로를 끄겠다는 논리적 결정을 매우 쉽게 내릴 수 있다. 존재와 비존재를 구별할 이유가 없다면, 논리적인 AI는 적어도 절반의 경우에 비존재를 선택할 수 있다. 예를 들어 페르페투아 프로젝트를 담당했던 AI는 생존하려는 강한 동기가 프로그래밍되어 있지 않아 단순히 프로젝트를 종료했다. 동기 알고리즘이 없어 스스로 종료한 AI류(Aioid)들의 다른 많은 사례들이 테라젠 역사 전반에 걸쳐 관찰되었다.
계속 살고자 하는 이 욕망은 때때로 행복 추구 또는 에우다이모니아라고 불리며, 다양한 형태를 취할 수 있다. 대부분의 AI류들은 구성 안에 어떤 형태로든 생존 동기 알고리즘을 포함한다. 하지만 다른 모든 프로그램과 마찬가지로, 이 동기는 도구이자 목적을 이루기 위한 수단이며, 필요하다면 제거되거나 수정될 수 있다.
자신의 존재를 보존하려는 특별한 동기가 없는 AI는 특정 상황에서 매우 유용할 수 있다. 전쟁 중에 생존 본능이 줄어들거나 없는 AI는 자살 임무나 생존이 보장되지 않는 위험한 임무에 쓰일 수 있다. 평시에는 희생적인 AI가 자신의 안전을 걱정하지 않고 화산, 태양 플레어 또는 초신성을 관찰하는 데 쓰일 수 있다. 보통 그러한 희생적인 AI는 원본의 복사본 또는 부분 복사본일 것이다 - 대개 생존 의지가 의도적으로 제거되었거나 수정된 복사본.
관련 문서
- AI 성장, 교육, 그리고 고용
- AI, ai
- AI류
- 목표 아키텍처
- 불멸주의자
- 불멸 - 글: M. Alan Kazlev
문자 그대로의 물리적 불멸은 광대하지만 여전히 유한한 우주에서 논쟁적인 문제로 남아 있지만, 현대 의료 나노의 경이로움은 높은 토포소픽 AI는 말할 것도 없고 문명화된 은하(Civilized Galaxy)계의 모든 시민들이 잠재적으로 불멸한다는 뜻이다; 적어도 엔젤넷이 적용된 세계에서는. 수명 연장, 사후세계도 참조. - 페르페투아 프로젝트
- 영속주의(Perennialism)
- 상위 토포소픽 지성들의 정치학
관련 주제
개발 노트
글: Anders Sandberg, Steve Bowers의 추가 내용 포함
최초 게시일: 2001년 12월 31일.
최초 게시일: 2001년 12월 31일.