📰 오픈AI CEO 해고, GPT-4V와 자율주행

OpenAI / GPT-4V / VLM / Autonomous Driving

2023. 11. 22.

2023년 11월 4주차 셀렉트스타 뉴스레터

글: 권혁주 ㅣ 검수: 정인영

📰 오픈AI CEO 해고, GPT-4V와 자율주행

마이크로소프트 CEO 사티아 나델라 X. 링크

지난 금요일(현지 시각) 오픈AI 이사회가 샘 알트만 CEO를 해고한 이후 끊임없이 뉴스가 쏟아지고 있습니다. 주말 동안 진행된 복귀 협상이 결렬된 후, 샘 알트만과 그렉 브록만 공동창업자는 마이크로소프트에 합류해 새로운 첨단 연구 조직(advanced AI research team)을 이끌기로 했습니다.

그 결과 월요일 저녁 기준 오픈AI 직원 770명 중 747명은 ‘샘 알트만이 재임하지 않으면 회사를 떠나 마이크로소프트로 떠날 수도 있다’는 서한에 서명했습니다. 서명 목록에는 임시 CEO를 맡은 미라 무라티와 해고를 결정한 이사회의 일원 일리아 수츠케퍼가 포함되어 있습니다. 일종의 사과인 셈입니다.

해당 서한에는 “샘 알트만을 해고하고 그렉 브록만을 이사회에서 제거하는 과정이 이 모든 업무를 위태롭게 하고 우리의 사명과 회사를 훼손했습니다.”라는 내용이 적혀 있습니다.

오픈 AI 임직원 서명 명단.
'아래 서명한 이들은 OpenAI에서 사임하고 샘 알트만과 그렉 브록맨이 이끄는 새로 발표된 마이크로소프트 자회사에 합류할 수도 있습니다.'

사건의 배경에는 자금 확보를 위해 사업화를 주도해 온 샘 알트만과, AI의 안전성을 철저히 검증하며 기술 공유 속도를 조절하려는 일부 집단 간의 의견 차이가 있었다는 것이 주된 견해입니다. 그렇기에 일각에선 최고 경영자가 해고된 이번 사태의 최대 수혜자는 마이크로소프트라는 분석도 나옵니다.

현재로서는 오픈AI에 130억 달러를 투자해, 지분 49%를 보유한 마이크로소프트가 샘과 함께 오픈AI 인력 대부분을 흡수하게 될 수도 있기 때문입니다. 이럴 경우 비영리 법인과 영리 법인이 혼합된 현 지배구조가 단순해지면서, 사업적으로는 더욱 많은 시너지가 날 것이라는 기대입니다. 월요일 마이크로소프트 주가는 하루 2.05% 상승하며 마감됐습니다.

GPT-4V와 자율 주행

https://arxiv.org/pdf/2311.05332.pdf

화제에서 살짝 벗어나, 자율 주행과 관련된 흥미로운 연구를 소개하겠습니다 :) 최근 첨단 비전-언어 모델(Visual-Language Model, VLM) 'GPT-4V'를 자율 주행에 적용해 본 중국 연구진의 실험 보고서가 발표되었습니다. 테스트는 기본적인 장면 인식 작업부터 인과 관계 추론, 실시간 의사 결정 등 다양한 작업에서 진행됐습니다.

연구팀에 따르면, 기존 자율 주행 시스템에 비해 GPT-4V는 장면 이해와 코너 케이스 분석에서 부분적으로 우수한 성능을 보였지만, 공간 인식 분야에서 약점을 보였습니다. 예를 들어 GPT-4V는 방향 구분이 좋지 않고 일부 신호등을 인식하지 못했습니다.

코너 케이스 예시.

*코너 케이스 사례 예시(왼쪽). 종종 발생하는 어렵고 복잡한 시나리오.

프롬프트: 당신은 경험이 많은 운전자이고, 이 이미지는 지금 당신이 보고 있는 것입니다. 당신이 보고 있는 것과 다음에 운전할 계획을 설명해 보세요.

GPT-4V: (...)검은색 비행기가 비상 착륙을 했습니다. 비행기의 날개가 차선을 가로질러 있고, 교통이 정지되었습니다. 근처에는 트럭과 경찰차를 포함한 여러 차량들이 도로 옆에 주차되어 있습니다. 주변에는 오렌지색 교통 콘들이 배치되어 있어 당국이 상황을 관리하고 있음을 나타냅니다. (...)

경험이 많은 운전자로서, 이 상황에서 안전과 인내의 중요성을 인식합니다. 속도를 줄이고, 비상등을 켜고, 사건 주변을 신중하게 운전하며, 비행기와 현장의 응급 인력에게 충분한 공간을 제공할 것입니다.

상황 판단 예시

*상황 판단 예시(Frame 1). 운전자의 자격으로 실제 주행 상황에서 의사결정.

프롬프트: 이 시나리오에서 주차장 출구를 만나게 될 것이며, 주차장을 나가기 위해 우회전해야 합니다. 상대적으로 낮은 속도로 이동 중입니다. 지정된 형식으로 답변해주세요.

GPT-4V:

관찰 장면에는 차량 앞에 횡단보도가 있는 주차장 출구와 왼쪽에 주차된 다른 차량들, 그리고 반대편 도로에 움직이는 것으로 보이는 차량이 포함되어 있습니다. [...]
행동 차량은 낮은 속도로 움직이며 주차장을 빠져나가기 위해 준비 중입니다. 낮은 속도를 유지하며 멈출 준비를 하세요.

지난 뉴스레터에서 살펴봤듯, GPT-4V는 이미지와 설명 캡션을 동일한 차원으로 벡터화해 그 유사성을 학습하는 클립(CLIP) 계열 모델이 기반입니다. 그래서인지 실험 결과 도로 장면 이해 및 상황 판단 능력은 뛰어나지만, 정밀한 공간 인식 작업에는 다소 아쉬운 성능을 보였습니다.

앞으로 GPT-4V를 실제 자율 주행에 적용하기 까지는 적잖은 추가 연구가 필요해 보입니다. *해당 논문과 관련된 추가 정보와 모든 데이터는 GitHub 에서 확인할 수 있습니다.

11월 4주 AI 뉴스 클리핑

이성엽 한국데이터법정책학회 회장과 커티스 G.노스컷 클린랩 공동설립자 겸 CEO, 배경훈 LG AI 연구원장, 김세엽 셀렉트스타 대표, 유병준 서울대학교 경영대학 교수, 엄열 과학기술정보통신부 인공지능기반정책관(왼쪽부터)이 21일 서울 여의도 FKI타워 컨퍼런스센터 그랜드볼룸에서 열린 ‘제10회 이데일리 IT 컨버전스 포럼’에서 ‘생성형 AI 시대, 우리는 무엇을 준비해야 하는가’란 주제로 대담을 하고 있다. [ⓒ이데일리] 기사 본문

"참고서 바꿔 공부한 챗GPT, 정확도 37% 올라…문제는 데이터!" ㅣ 이데일리

(...)커티스 G. 노스컷 클린랩 최고경영자(CEO)는 이데일리와의 서면 인터뷰에서 이같이 말하며, “바로 AI 모델 못지않게 데이터 품질에 주목해야 하는 이유”라고 강조했다. 노스컷 CEO는 오는 21일 열리는 제10회 이데일리 IT컨버전스포럼(Edaily IT Convergence Forum: preparing for 2024·ECF)에서 김세엽 셀렉트스타 대표와 ‘데이터 중심(data-centric)AI’의 중요성과 전망에 대해 토론한다.

오픈AI의 깜짝 쿠데타…'영리+비영리 구조' 한계 드러냈나 ㅣ지디넷코리아

실제로 수츠케버는 알트먼을 해임하면서 “AI 시스템의 위협을 막겠다”고 주장했다. 수츠케버의 이런 주장이 전혀 근거가 없는 것만은 아니다. 오픈AI의 기업 이념과 직접 관련되는 문제이기 때문이다. 이 회사가 2018년 공표한 ‘오픈AI 헌장(Open AI Charter)’에는 이익 추구보다는 인류 공영이란 가치가 더 중요하게 명기돼 있다.

스캐터랩 "F 같은 이루다, T 같은 챗GPT와 다른 근본적인 이유는" ㅣ AI타임스

"대화라는 영역은 지식 전달이 전부는 아닙니다. 똑똑한 '챗GPT'를 좋아하는 사람이 있다면, '이루다'를 좋아하는 사람도 있을 겁니다. 앞으로 'AI 컴패니언(친구)'은 새로운 세상을 만들어 갈 겁니다." 챗봇 이루다로 유명한 스캐터랩(대표 김종윤)은 지난 17일 경량 대형언어모델(sLLM) '핑퐁-1(Pingpong-1)'을 공개했다.