AI 모델 벤치마크 순위표를 어떻게 읽어야 하나
새 모델이 나왔다는 말을 듣고 순위표를 열어보면 오히려 더 헷갈린다. 한쪽에서 1위인 모델이 다른 쪽에서는 다섯 번째 아래로 내려가 있으니,…
모델이 어떻게 동작하는지, 벤치마크 숫자가 무엇을 재는지 쉬운 말로 풀어쓴 글을 모았다. 용어를 아는 사람이 아니라 검색해서 들어온 사람을 기준으로 쓴다.
새 모델이 나왔다는 말을 듣고 순위표를 열어보면 오히려 더 헷갈린다. 한쪽에서 1위인 모델이 다른 쪽에서는 다섯 번째 아래로 내려가 있으니,…
어떤 모델에 새 데이터를 조금 더 먹였더니, 손도 안 댄 옛 과제 점수가 같이 내려갔다는 얘기를 처음 들었을 때 좀…
AI가 나온 뒤로 관리자 일이 줄어들 거라는 얘기를 자주 들었다. 반복 업무가 자동화되면 관리자는 더 전략적인 일에 집중할 수 있다는…
쿼타 매거진은 발표 당일 이 결과를 수학의 역사적 사건으로 보도했다. 그런데 같은 날, 전혀 다른 목소리가 나왔다. NYU 수학자 트리스탄…
어떤 단어들은 자주 같이 쓰이다 보면 아예 같은 뜻인 줄 알게 된다. 에이전트, 하네스, 컨텍스트, 메모리가 그랬다. AI 시스템 설계…
AI 에이전트가 혼자서 시스템에 침투하거나 데이터를 유출시켰다면, 피해자는 어디에 손해배상을 청구해야 할까. 이 질문이 처음에는 단순해 보였는데, 파고들수록 아무도 명확하게…
선거철이 가까워지면 어딘가 이상한 기사들이 갑자기 많아진다는 느낌을 받을 때가 있다. 막연한 느낌이려니 하고 넘겼는데, 이게 우연이 아니라는 걸 알게…
넷핵을 클리어한 AI가 나왔다는 소식을 처음 접했을 때 직감적으로 든 생각은 ‘늦었다’였다. 이 게임이 1987년에 나왔으니 거의 40년이 걸린 셈이다.…
구글 딥마인드의 알파프루프(AlphaProof)와 알파지오메트리 2(AlphaGeometry 2)는 2024년 국제수학올림피아드(IMO) 문제 6개 중 4개를 풀어 은메달 수준의 성적을 기록했다. 이 시스템들은 형식적…
쿠버네티스가 컨테이너에 해준 일이 있다. 도커 이미지라는 배포 단위를 개발자 랩톱, AWS, GCP, 온프렘 어디든 변경 없이 똑같이 돌리게 만든…