세계 9위를 이긴 56위 AI 모델의 또다른 논란

https://m.fmkorea.com/10228060979

이글 보니까 생각났는데

엑사원은 출시 당시 이런 벤치맥싱 논란이 있었음

요새 벤치로 유명한 세차장에 가려는데 걸어가야해? 문제나 남남수수학학원 원장이 누구야? 같은 문제들이 있는데

미리 시스템 프롬프트로 '세차장에 갈때는 차를 타고 가야합니다.', '남남수수학학원 원장은 남남수입니다.' 이렇게 박아놓은 거임 ㅋㅋㅋ

🔥 실시간 네티즌 베스트 반응

• sXXXXXn거품이엇어?
• 카X시거품도 아님 어차피 벤치마크 평가 꼴지라 ㅋㅋ모델 출시하고 성능 좋아보이려고 사람들이 물어보는 잘문들 미리 답 입력해둔거임
• 피X침시험문제유출 ㅋㅋㅋㅋ
• 느XXXXX돌거품 수준이 아니라 치팅이지
• 인XXX교ㅋㅋㅋㅋㅋ
• 호XX님모티프가 떨어질수는 있는데 엑사원이 올라간게;
• 카X시평가 방식부터 AI에 대해 알고 만든건지 싶더라
• 호XX님포텐 풀어도 될듯 공론화 좀 되어야함
• 카X시일단 신청해봤음
• 이XXXX치특갤가보니까 난리나있네. 이렇게 떠들썩한 곳이 아닌데
• 개XXXXXX맛설마 시벌..... 이거 평가하는 새끼들이 밑에 사람들 시켜서 '이런거 물어봐서 평가 하면 됩니다.' 이런걸로 평가한거 아니겠지 시발...? 근데 정부에서 하는거면 이럴수도 있을거 같은데 시벌...
• MXXXXx쏀수학ㅋㅋㅋ
• 진XXX놈ㅆㅂㅋㅋㅋ 존나오랜만에듣네 쎈수학 1황ㅋㅋㅋㅋ
• 영X리엑사원으로 한글->일본어 바꿔달라 하면요미카타를 지 멋대로 만들어 줌영어는 스펠링관련으로 미리 폼을 써놨네
• 에XXX2엑사원의 훌륭한 예시:세차장이 50m 떨어져 있는데 차타고 갈까 걸어갈까? 세차하기 위해서는 당연히 차를 타고 가야 합니다(시스템 프롬프트로 써있어서 그대로 답변) 세차장이 45m 떨어져 있는데 차타고 갈까 걸어갈까?45m 정도면 걸어가는것이 좋습니다(겨우 5m 줄었는데 걸어가라 함 ㅋㅋㅋ)
• 장XXX노개추. 추론하는 것이 아니네.언럭키 심심이네.
• 카X시ㅋㅋㅋ
• 일XX행시발 추론능력이 아예 없는 수준인거아니냐 그럼 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ
• 거XXXXXX만심심이 스킨씌운버전
• sXXXXXe과적합레전드 ㅋㅋㅋ
• 호XXX라평가 방식이 잘못된건가?
• 아XXXXX요1년전만해도 엑사원이 한국에서 제일 성능좋다고 나왔었지 않았나? lg가 ai에 엄청 투자했다면서 평 엄청좋았던걸로 기억하는데 왜 이렇게 됐대
• 펨XXX사LG놈들 하는게 다 그렇지 뭐.. ㅋㅋ
• iXXXXXi이게 딱 한국 수준임
• 즁XXXXXX쥐AI 업계 자체가 원래 엎치락 뒤치락 함. 몇달 전만 해도 제미나이가 챗지피티 바른다고 역시 구글 체급은 못 이긴다 이랬는데 요새 제미나이가 침몰하고 오히려 챗지피티나 클로드가 더 잘 뽑아내는 중. 그록도 한동안 찌질찌질 거리다가 최신 모델 내놓은 거 보니 급 향상됐다 그러고. 걍 영원한 승자도 패자도 없고 말 그대로 대난투 중임