coredot.today
블로그로 돌아가기

#재현성

3개의 포스트

가장 그럴듯한 말만 고르면 AI는 같은 말을 되풀이한다 — 그리디부터 min-p까지, 다음 한 단어를 고르는 기술 (특집)
특집디코딩그리디 디코딩
2026.11.07

가장 그럴듯한 말만 고르면 AI는 같은 말을 되풀이한다 — 그리디부터 min-p까지, 다음 한 단어를 고르는 기술 (특집)

언어 모델은 문장을 쓰지 않는다. 다음에 올 토큰마다 확률표를 내놓을 뿐이다. 그 표에서 실제로 한 토큰을 고르는 규칙이 ‘디코딩’이다. 1948년 섀넌이 책을 아무 데나 펼쳐 다음 단어를 고르던 실험에서 출발해, 매번 1등만 고르는 그리디와 후보 여러 개를 들고 가는 빔 서치가 왜 같은 말을 되풀이하는지, temperature·top-k·top-p·min-p가 각각 무엇을 자르는지 원 논문으로 따라간다. 카카오의 공개 모델로 12가지 전략을 직접 돌려, 그리디가 쓴 글의 45%가 반복 루프로 끝나고 temperature 0에서도 같은 질문에 다른 답이 나오는 것을 확인했다. 마지막으로 2026년 Claude·Gemini·GPT가 샘플링 손잡이를 잠근 이유를 정리한다. 인터랙티브 위젯 6종, 코어닷투데이 실측, 삽화 14장.

코어닷투데이63분
[특집] Claude 모양 과학 2부 — 숲 밖의 35편: 1,000자리 숫자로 푼 입자 적분, 경제학 논문 4,452편 검산, 6,072개 언어의 강세, 1939년 와트슨의 '마지막 문제'까지
기술ClaudeBootLoops
2026.10.15

[특집] Claude 모양 과학 2부 — 숲 밖의 35편: 1,000자리 숫자로 푼 입자 적분, 경제학 논문 4,452편 검산, 6,072개 언어의 강세, 1939년 와트슨의 '마지막 문제'까지

하버드 물리학자 매튜 슈워츠가 Claude와 3개월 동안 쓴 원고 36편 중 숲을 뺀 나머지를 하나씩 연다. 1,000자리 숫자에서 정확한 공식을 되찾는 입자 적분, 반올림 오차에 갇혀 있던 희귀 돌연변이 공식과 57억 쌍의 유전자 전환, 경제학 논문 4,452편을 다시 돌린 'AI 데이터 편집자', 정확한 분수가 된 진화 나무, 6,072개 언어의 강세 카탈로그, 87년 만에 풀린 3차원 무작위 보행, 늙는 흑점과 늙지 않는 별점까지. 그리고 이 모든 것을 굴린 작업 규약과, 그 성과를 얼마나 믿어도 되는지를 함께 따진다.

코어닷투데이125분
논문이 에이전트가 되었다 — Nature 「Paper2Agent」 완전 해부
인사이트Paper2AgentMCP
2026.09.17

논문이 에이전트가 되었다 — Nature 「Paper2Agent」 완전 해부

2022년 하버드 데이터버스 연구는 공개된 연구용 R 코드 9,000개를 깨끗한 환경에서 돌려 보고 74%가 첫 실행에서 실패한다고 보고했다. 논문은 읽을 수 있지만 돌아가지 않는다. 2026년 9월 16일 Nature에 실린 「Paper2Agent」는 이 문제를 논문의 형식 자체를 바꿔서 풀자고 제안한다 — 논문을 MCP 서버로 바꿔 말이 통하는 에이전트로 만드는 것이다. 이 특집은 커누스의 1984년부터 시작하는 40년 계보를 훑고, 여섯 단계 파이프라인과 다섯 전문가 에이전트를 하나씩 뜯고, AlphaGenome·Scanpy·TISSUE 사례와 100편 규모 평가를 숫자로 따라가고, 일부러 망가뜨린 저장소를 에이전트가 고쳐 낸 실험을 재현하고, 에이전트 세 개가 건선의 인과 유전자를 지목한 발견 사례까지 간다. 인터랙티브 위젯 6종과 논문 원본 그림을 함께 싣는다.

코어닷투데이128분