Meta의 수석 AI 과학자는 ChatGPT가 '특별히 혁신적이지도 않고' '혁신적인 것도 없다'고 말합니다.

엄청난 약속에 대해 최근 많은 잉크가 쏟아졌습니다. OpenAI의 ChatGPT 프로그램 인간의 프롬프트에 응답하여 자연어 발화를 생성합니다.

이 프로그램은 ChatGPT가 우주에서 독특할 것이라는 신선하고 흥미로운 프로그램으로 많은 사람들에게 인상을 남겼습니다.

또한: ChatGPT 사용을 시작하는 방법

AI 학자들은 의견이 다르다고 주장합니다.

Meta의 수석 AI 과학자인 Yann LeCun은 지난주 Zoom에서 언론과 경영진이 모인 소규모 모임에서 "기본 기술 측면에서 ChatGPT는 특별히 혁신적이지 않습니다."라고 말했습니다.

LeCun은 "대중이 그렇게 인식하고 있지만 혁명적인 것은 아닙니다."라고 말했습니다. "그냥, 알다시피, 잘 짜여져 있고 멋지게 완성됐을 뿐이에요."

이러한 데이터 기반 AI 시스템은 과거 많은 기업과 연구소에서 구축되었다고 LeCun은 말했습니다. 그는 OpenAI가 작업 유형에 있어서 단독이라는 생각은 부정확하다고 말했습니다.

또한: 사람들은 이미 ChatGPT를 통해 악성 코드를 작성하려고 시도하고 있습니다.

LeCun은 "OpenAI는 다른 연구실에 비해 전혀 발전하지 않았습니다."라고 말했습니다.

LeCun은 "Google과 Meta뿐만 아니라 기본적으로 매우 유사한 기술을 보유한 스타트업이 6개나 있습니다"라고 덧붙였습니다. "나는 그것이 로켓 과학이 아니라고 말하고 싶지는 않지만 실제로 공유되며 그 뒤에 비밀은 없습니다."

LeCun은 ChatGPT와 이를 기반으로 하는 프로그램이 OpenAI의 GPT-3는 여러 당사자가 수년에 걸쳐 개발한 여러 기술로 구성됩니다.

LeCun은 "ChatGPT는 이러한 자체 감독 방식으로 사전 훈련된 Transformer 아키텍처를 사용한다는 사실을 깨달아야 합니다."라고 말했습니다. "자기 지도 학습은 OpenAI가 존재하기 전부터 제가 오랫동안 옹호해 왔던 것입니다."라고 그는 말했습니다.

또한:AI 감지기가 ChatGPT에서 우리를 구할 수 있나요? 알아보기 위해 3가지 온라인 도구를 사용해 보았습니다.

LeCun은 Google이 2017년에 공개한 언어 신경망을 언급하며 "Transformers는 Google의 발명품입니다. 이는 GPT-3를 포함한 광범위한 언어 프로그램의 기초가 되었습니다."라고 말했습니다.

이러한 언어 프로그램에 대한 작업은 수십 년 전으로 거슬러 올라간다고 LeCun은 말했습니다.

"대규모 언어 모델, 최초의 신경망 언어 모델 -- 당시에는 규모가 컸지만 오늘날의 기준으로는 아주 작은 -- 약 20년 전 요슈아 벤지오(Yoshua Bengio)가 만든 것입니다."라고 르쿤은 캐나다 MILA 연구소 소장을 언급하며 말했습니다. 일체 포함. Attention 개념에 대한 Bengio의 작업은 나중에 Google에서 Transformer용으로 채택되었으며 모든 언어 모델에서 중추적인 요소가 되었습니다.

또한 OpenAI의 프로그램은 인간 피드백을 통한 강화 학습이라는 기술을 광범위하게 사용했습니다. Google의 페이지 순위와 유사하게 인간 에이전트가 기계의 출력 순위를 매기는 데 도움을 줍니다. 편물. 이러한 접근 방식은 OpenAI가 아니라 Google의 DeepMind 부서에서 개척되었다고 그는 말했습니다.

ChatGPT를 의미하는 LeCun은 "그래서 이것에 대한 전체 역사가 있으며 이것은 진공 상태에서 나온 것이 아닙니다"라고 말했습니다.

또한: OpenAI의 ChatGPT는 내 일을 겁나 잘한다

ChatGPT 프로그램은 과학적 혁신이라기보다는 적절한 엔지니어링의 사례라고 LeCun은 말했습니다. 그는 이 프로그램을 2011년 게임 쇼 Jeopardy!에서 경쟁했던 IBM의 Watson 컴퓨터와 DARPA의 2005년 Grand Challenge에서 우승한 기업가 Sebastian Thrun의 자율 주행 차량과 비교했습니다. Thrun의 수상 경력에 빛나는 기술은 "기본 과학 측면에서 특별히 혁신적이지는 않았습니다."라고 LeCun은 말했습니다. "그것은 단지 매우 잘 설계되었습니다."

"이것이 바로 OpenAI가 해낸 일입니다."라고 그는 말했습니다. "나는 그것에 대해 그들을 비난하지 않을 것입니다."

LeCun은 1시간 30분 동안 초청 강연자로 초청받았습니다. 집단[i] 예측, Collective[i]가 주최하는 온라인 대화형 토론 시리즈로, 스스로를 "B2B 판매 최적화를 위해 설계된 AI 플랫폼"이라고 광고합니다.

또한:ChatGPT의 다음 큰 도전: Microsoft가 Google 검색에 도전하도록 지원

LeCun은 뉴욕타임스 저널리스트 Cade Metz가 콜로키움에서 제기한 질문에 대해 OpenAI에 대해 언급했습니다. Metz는 LeCun이 만든 Meta의 AI 팀인 FAIR가 OpenAI와 같은 획기적인 방식으로 대중의 마음 속에 인식될 수 있을지 물었습니다.

"이거 메타에서 볼까? 응, 우리는 이걸 볼 거야." 르쿤이 대답했다. 그는 "텍스트 생성뿐만 아니라 창작 보조 도구도 포함하고 있다"며 "내 생각에는 큰 일이 될 것 같다"고 말했다.

메타는 브랜드를 홍보하는 미디어를 자동으로 제작해 중소기업이 스스로 홍보할 수 있도록 도울 수 있을 것이라고 그는 말했다.

"페이스북에 광고하는 상점이 1,200만 개 정도 있는데, 그 대부분은 엄마와 엄마입니다. 팝숍에서는 새롭고 멋지게 디자인된 광고를 디자인할 리소스가 부족합니다." 르쿤. "그래서 그들에게 생성 예술은 많은 도움이 될 수 있습니다."

또한:DALL•E 2를 사용하여 가장 터무니없는 상상을 실제 예술로 바꾸는 방법

강연의 또 다른 시점에서 LeCun은 ChatGPT를 다시 언급하면서 "예를 들어 Google과 Meta의 유사한 시스템이 왜 없는지 묻는 질문을 할 수도 있습니다"라고 말했습니다.

"그리고 대답은 Google과 Meta가 모두 물건을 구성하는 시스템을 내놓으면 잃을 것이 많다는 것입니다."라고 LeCun은 웃으며 말했습니다.

르쿤 의 승자입니다 2019년 튜링상 MILA의 Bengio 교수, 토론토 대학교 교수, Google 펠로우인 Geoffrey Hinton과 함께 컴퓨터 과학에 대한 기여로 컴퓨팅의 노벨상에 해당합니다. 세 사람은 오늘날의 AI 딥 러닝 시대를 개척하는 데 도움을 주었습니다.

오픈AI는 Microsoft의 자금 지원, 스타트업에서 생성되는 코드에 독점적으로 액세스할 수 있으며 프로그램을 점차적으로 통합 다양한 소프트웨어 제품으로, Azure 클라우드 서비스를 포함하여.