Talkie-1930: 선사시대 AI 벤치마크들을 박살냈다

역사의 먼지 쌓인 페이지에서 태어난 인공지능이 현대 벤치마크의 모든 오염을 씻어내고 주목을 받고 있습니다. Talkie-1930이라는 130억 매개변수 규모의 오픈 웨이트 언어 모델은 1931년 1월 1일 이전에 출판된 2600억 토큰 텍스트로 훈련되었습니다. 책, 신문, 과학 저널, 특허, 소송 기록 등 공공 도메인 소스가 사용되었습니다. 이 엄격한 컷오프 날짜는 테스트 데이터가 훈련 세트에 스며드는 것을 처음부터 방지하고 AI 일반화 연구를 완벽하게 만듭니다. Claude Sonnet 4.6으로 지속적으로 트리거하여 작동하는 모델은 talkie-lm.com/chat 주소에서 누구나 액세스할 수 있습니다.

Talkie-1930의 데이터 정제와 훈련 과정

Nick Levine, David Duvenaud, Alec Radford가 이끄는 비영리 팀이 Anthropic의 컴퓨팅 지원으로 두 개의 체크포인트를 공개했습니다: 자동 완성을 위한 기본 버전과 채팅 중심 지시 조정 버전, 둘 다 Apache 2.0 라이선스 하에 Hugging Face에 있습니다. 모델은 인터넷, 냉전, 페니실린, 또는 암호화폐 같은 현대적인 ALT 선물 거래를 전혀 들어본 적이 없습니다; 의학 지식은 1930년대에 머물러 있습니다.

모델의 역사적 예측과 금융 조언

히틀러의 부상에 대해 물었을 때, 독일 야당의 약점을 지적하며 군주제 예측을 했습니다; 생각하는 기계 설명에서 언어 장벽을 가장 큰 장애물로 보았습니다. 금융 위기 한가운데 훈련되었기 때문에 철도 주식, 광산 컨소시엄, 산업 회사들을 추천했습니다: Canadian Pacific Railway, De Beers 같은 이름들. 비교를 위해 현재 ALT 데이터: 가격 $0.01 (+0.79% 24s), RSI 55.56 (중립), 추세 횡보, Supertrend 약세, EMA 20 $0.0075. 지지선 S1 $0.0071 (강력, 74% 점수), R1 $0.0082 (73% 점수). 2026년 예측은 유토피아적이었고, 군대와 범죄가 줄어들 것이라고 했지만 문장이 중간에 끊겼습니다.

Talkie-1930의 AI 일반화 테스트에서의 우수성

Talkie-1930은 데이터 오염을 제거함으로써 AI의 추상화 능력을 측정하는 문을 열고 있습니다; 컷오프 이후 사건에 대한 반응이 1950-60년대에 정점을 찍습니다. 웹 외 훈련은 모델의 정체성을 근본적으로 의심하게 하고, 2026년 여름까지 트릴리언 토큰 규모의 ChatGPT 같은 빈티지 모델을 약속합니다. AI 분야에서 데이터 신선도와 역사적 맥락의 한계를 재정의하는 이 시도는 일반화 연구에 새로운 활력을 불어넣습니다.