그것은 훌륭한 이야기입니다. 사실이 아닐 수도 있습니다. Sutskever는 최초의 GPU를 온라인에서 구입했다고 주장합니다. 하지만 이 분주한 사업에서는 그런 신화 만들기가 흔한 일입니다. Sutskever 자신은 좀 더 겸손합니다. “나는 만약 내가 실질적인 진전을 이룰 수 있다면 그것을 성공이라고 생각한다고 생각했습니다.”라고 그는 말합니다. “당시에는 컴퓨터가 너무 보잘것없어서 실제 세계에 미치는 영향이 너무 멀게 느껴졌습니다.”
AlexNet의 성공 이후 Google이 노크했습니다. Hinton의 분사 회사인 DNNresearch를 인수하고 Sutskever를 고용했습니다. Google Sutskever에서는 딥 러닝의 패턴 인식 능력이 다음과 같을 수 있음을 보여주었습니다. 데이터 시퀀스에 적용, 단어, 문장은 물론 이미지까지. Sutskever의 전 동료이자 현재 Google의 수석 과학자인 Jeff Dean은 “Ilya는 항상 언어에 관심이 있었습니다.”라고 말합니다. “우리는 수년에 걸쳐 훌륭한 토론을 벌였습니다. Ilya는 사물이 어디로 갈지에 대해 강한 직관력을 가지고 있습니다.”
그러나 Sutskever는 Google에 오래 머물지 않았습니다. 2014년에 그는 OpenAI의 공동 창업자로 채용되었습니다. 10억 달러(Altman, Elon Musk, Peter Thiel, Microsoft, Y Combinator 등)와 엄청난 양의 실리콘 밸리 스웨거를 지원받은 이 새 회사는 처음부터 AGI 개발에 목표를 두었습니다. 그 당시.
돈 뒤의 두뇌인 Sutskever가 참여하면서 그 허풍은 이해할 수 있었습니다. 그때까지 그는 신경망에서 점점 더 많은 정보를 얻으며 순조롭게 지내왔습니다. Y Combinator의 투자 담당 전무이사인 Dalton Caldwell은 그의 명성이 그보다 앞서서 그를 큰 주목을 받게 되었다고 말합니다.
“샘이 생각나네요 [Altman] Ilya를 세계에서 가장 존경받는 연구자 중 한 명으로 언급합니다.”라고 Caldwell은 말합니다. “그는 Ilya가 최고의 AI 인재를 많이 유치할 수 있을 것이라고 생각했습니다. 그는 심지어 세계 최고의 AI 전문가 중 한 명인 요슈아 벤지오(Yoshua Bengio)가 OpenAI의 수석 과학자가 되기 위해 일리아보다 더 나은 후보를 찾을 가능성이 낮다고 믿었다고 언급하기도 했습니다.
그러나 처음에는 OpenAI가 실패했습니다. Sutskever는 “OpenAI를 시작할 때 진행 상황이 어떻게 계속될지 정확히 확신할 수 없었던 시기가 있었습니다.”라고 말합니다. “그러나 나는 한 가지 매우 분명한 믿음을 갖고 있었는데, 그것은 딥러닝에 반대하는 사람은 없다는 것입니다. 어쨌든 장애물에 부딪힐 때마다 연구자들은 6개월이나 1년 안에 그 문제를 피할 수 있는 방법을 찾아냅니다.”
그의 믿음은 성과를 거두었습니다. OpenAI의 첫 번째 GPT 대규모 언어 모델(이름은 “생성 사전 훈련된 변환기”를 나타냄)이 2016년에 등장했습니다. 그 후 GPT-2와 GPT-3이 나왔습니다. 그렇다면 놀라운 텍스트-이미지 모델인 DALL-E를 만나보세요. 아무도 그렇게 좋은 것을 만들지 않았습니다. 각 릴리스마다 OpenAI는 가능하다고 생각되는 것의 기준을 높였습니다.
기대 관리
지난 11월 OpenAI는 기존 기술 중 일부를 다시 패키징한 무료 챗봇을 출시했습니다. 이는 업계 전체의 의제를 재설정했습니다.
