구글 딥마인드 꿈꾸는 AI 개발 - 인공지능과 꿈

출처: 루비사 - 루시드 드림으로 Beyond Reality를 꿈꾸는 사람들 모임
https://cafe.naver.com/beyondreality/41

예전에 봤던 기사의 내용을 우연히 오늘 다시 보게 됐습니다.

"구글은 왜 '잠자고 꿈꾸는' AI 만드나"

http://www.zdnet.co.kr/view/?no=20170811083022

딥마인드는 “AI에게 잠을 자도록 하는 것이 직관적이지 않을 수 있지만 우리가 개발 중인 딥-Q 네트워크(DQN)에선 그 부분이 필수다”고 설명했다.

사람들은 보통 깨어 있을 때 경험한 것들을 꿈을 꿀 때 재현하는 경향이 있다. 때론 이런 과정을 통해 새로운 통찰력을 얻기도 한다.

딥마인드는 여기서 착안해 DQN이 오프라인 상태일 때 과거의 성공과 실패 경험들을 새롭게 따져볼 수 있도록 했다. 인간이 잠을 자면서 과거의 경험들을 반추하는 것과 같은 방식인 셈이다.

기사의 제목이 좀 자극적입니다. 저도 제목을 보고서 깜짝 놀랐습니다. AI에게 꿈을 꾸게 한다고???

기사의 소스 페이지를 보면 이렇습니다.

AI and Neuroscience: A virtuous circle

인공지능과 뇌과학: 선순환 사이클
https://deepmind.com/blog/ai-and-neuroscience-virtuous-circle/

자세히 읽어보니, 이세돌과 대결을 펼친 알파고의 핵심 알고리듬인 DQN에 대한 얘기입니다.

딥마인드의 CEO를 비롯한 저자들은 인공지능이 그저 인공지능을 개선시키기 위한 노력으로는 발전할 수 없을 것이라고 얘기합니다. 더욱 인공지능이 발전하려면 뇌과학의 지식을 이용하고, 인공지능 연구자와 뇌과학 연구자가 상호 협력해야만 한다고 강조합니다.

AI에게 꿈을 꾸게 한다고?

그럼 AI가 꿈꾼다는 것은 무엇일까요? 저자들은 AI도 24시간 새로운 것을 학습만 할게 아니라, 사람이 잠을 자면서 지식을 정리하듯이, AI도 새로운 학습을 멈추고, 과거에 입력된 학습 데이터를 이용해서 학습 내용을 되돌아 보는 것이 필요하다고 얘기합니다. 이것이 DQN 알고리듬에서 나오는 'replay' 메모리입니다. 일정 시간동안의 학습 내용을 저장해서 그것들을 다시 'replay'하여 학습의 성공과 실패를 분석하는 것입니다.

저자들은 'replay'가 매우 효과적이었다고 얘기합니다. 기존의 AI와 달리 이러한 접근법을 택하게 된 것은 뇌과학에서 영감을 얻었다고 얘기합니다. 그리고 앞으로도 AI는 뇌과학의 도움이 필요하다고 강조합니다.

뇌과학 또한 인공지능의 기술발전의 덕을 볼 수 있을 것이라고 얘기합니다. 사실 뇌과학에서도 뇌의 많은 동작 부분이 불명확합니다. 이런 부분을 규명하는데 인공지능에서 발견된 내용들이 사용될 수 있다고 합니다. 강화학습과 같은 인공지능 기법을 통해 밝혀진 것들을 이용하여 실제 우리 뇌의 도파민 활성화에 대한 원리가 규명되기도 했습니다.

이처럼 저자들은 과거에도 그랬지만, 앞으로도 더욱 더 인공지능과 뇌과학의 협력을 공고히 해서 보다 좋은 인공지능 기술 개발과 불분명한 뇌 동작 원리들을 알아내야 한다고 합니다.

---

로봇과 사람

사실 저도 이와 유사한? 내용으로 연구 과제를 제안한 적이 있는데, 아쉽게 채택은 안됐습니다. 하지만 지금도 비슷한 생각을 가지고 있습니다. 인공지능, 나아가 로봇과 사람은 가까운 미래 공존하며 살아갈 것입니다. 인공지능 발전으로 로봇만 진화하는 것이 아니라, 로봇과 공존하는 사람들도 이에 맞춰서 진화할 것입니다.

그 진화의 방향이 서로 대립하는 것이 아니라 화합할 수 있도록 관련자들의 지속적인 협의가 필요한 때입니다.

인공지능과 꿈

아.. 원래 글을 쓰려는 의도는 이겁니다. 인공지능에게 꿈을 꾸게하는 것. 딥마인드는 'replay'라는 방법을 이용하여 학습한 내용을 되돌아 보도록 했는데, 제가 생각하는 것은 좀 다릅니다.

우리는 아직 왜 꿈을 꾸는지 그 이유를 잘 모릅니다. 더욱이 루시드 드림이라는 특이한 꿈은 왜 발생하고 어떻게 유도되는지는 더더욱 모르고 있습니다. 어쩌면 인공지능을 잘 설계해서 이와 같은 꿈의 원리와 나아가 루시드 드림 유도 근본 원리까지 밝혀 낼 수 있지 않을까 생각해 봅니다.