프라이데이 Reddit 아스키메어워티씽(AMA) 세션에서 OpenAI CEO 샘 알트먼(Sam Altman)과 GPT-5 팀 핵심 멤버들은 신규 모델에 대한 질문은 물론, 이전 모델인 GPT-4o를 복구해 달라는 요청을 받았습니다.
참여자들은 또한 알트먼에게 발표에서 발생했던 가장 민망하고 어쩌면 가장 재미있었던 실수, 일명 "차트 범죄(chart crime)"에 대해서도 질문했습니다.
GPT-5가 선보인 새로운 기능 중 하나는 특정 프롬프트에 대해 어떤 모델을 사용할지 실시간으로 결정하는 라우터(router) 기능입니다. 이 라우터는 빠르게 응답할 수도 있고, 답변을 위해 추가적인 시간을 들여 ‘생각’하는 과정이 필요할 수도 있습니다.
그러나 r/ChatGPT Reddit AMA 참가자들 사이에서는 GPT-5가 자신들에게는 GPT-4o만큼 잘 작동하지 않는다는 불만이 제기되었습니다. 이에 대해 알트먼은 GPT-5가 "성능이 떨어져 보인다"고 여겨진 이유는 지난 목요일에 출시되었을 때 라우터가 제대로 작동하지 않았기 때문이라고 설명했습니다.
알트먼은 "GPT-5는 오늘부터 훨씬 더 지능적으로 작동할 것입니다. 어제 저희는 심각한 장애(sev)를 겪었고 자동 전환 기능이 하루의 상당 시간 동안 작동하지 않아, 결과적으로 GPT-5가 평소보다 훨씬 못하게 보이는 결과를 낳았습니다. 아울러, 저희는 결정 경계(decision boundary)가 작동하는 방식에 개입하여 여러분이 올바른 모델을 더 자주 사용하도록 돕고 있습니다. 또한 어떤 쿼리에 어떤 모델이 답변하는지 그 과정을 더욱 투명하게 공개할 것입니다."라고 약속했습니다.
그럼에도 불구하고 AMA 참가자들은 Plus 구독자들에게 GPT-4o 사용을 계속할 수 있도록 강력히 로비했고, 알트먼은 최소한 이 문제를 검토하겠다고 약속했습니다. 그는 "Plus 사용자들이 GPT-4o를 계속 사용할 수 있도록 하는 방안을 검토 중입니다. 현재 트레이드오프에 대한 더 많은 데이터를 수집하고 있습니다."라고 밝혔습니다.
또한 알트먼은 "출시를 마무리함에 따라 Plus 사용자들의 속도 제한(rate limits)을 두 배로 늘릴 계획입니다."라며, 이는 사용자들이 새 모델을 자유롭게 경험하고 사용 사례에 도입할 때 월간 프롬프트 부족 걱정 없이 학습할 기회를 제공할 것이라고 덧붙였습니다.
예상대로, 그는 팀이 라이브 프레젠테이션 중 제시했던, 수많은 "차트 범죄" 농담의 표적이 되었던 매우 부정확한 차트에 대해서도 질문을 받았습니다. 해당 차트는 실제보다 훨씬 낮은 벤치마크 점수를 훨씬 높은 막대로 보여주었습니다.
오픈AI의 GPT-5 "차트 범죄."
알트먼은 AMA 자리에서는 차트 관련 질문에 답하지 않았지만, 이미 목요일에는 X(구 트위터)에서 해당 차트를 "대형 차트 오류(mega chart screwup)"라고 스스로 언급한 바 있습니다. 일부 사용자는 이미 발행된 블로그 게시물 속 차트들은 정확했다고 지적했습니다.
하지만 이미 이미지는 실추되었습니다. 기업 프레젠테이션에 GPT를 활용한 차트 사용에 대한 농담이 이어졌습니다. 조기 액세스 기회를 얻었고 모델 성능에 대체로 만족했던 GPT-5 리뷰어 사이먼 윌리슨(Simon Willison)조차도 데이터를 표로 변환하는 과정이 "GPT-5가 실패한 좋은 예시"라고 꼬집었습니다.
결국 알트먼은 사용자들의 우려가 가장 컸던 항목들에 대한 수정 및 개선을 약속하며 AMA를 마무리했습니다. 그는 "시스템을 안정화시키기 위해 계속 노력할 것이며, 사용자 피드백에 귀 기울이겠습니다"라고 말했습니다.