AI Scientist Sakana AI: 자율 연구 사이클

# 자율 AI 과학자: 아이디어에서 출판까지의 전체 연구 주기

Sakana AI의 AI Scientist 시스템이 처음으로 인간 개입 없이 전체 과학 연구 주기를 완료했습니다: 가설 생성부터 원고 작성과 자체 평가까지. Nature 저널이 이에 대한 보고서를 게재하며, 실험 결과가 부정적이었음에도 불구하고 과정의 가치를 강조했습니다. AI는 신경망 훈련을 개선하기 위한 구성적 정규화 주제를 선택하고, 방법을 테스트한 결과 효과가 없음을 결론지었습니다. 이 접근법은 부정적 결과를 출판할 수 있게 해 커뮤니티 자원을 절약합니다.

AI Scientist는 GPT-4, Claude, Llama 3을 기반으로 한 에이전트 기반 아키텍처를 사용합니다. 한 편의 완전한 논문 비용은 약 15달러로, 아이디어를 대량 테스트하는 데 확장 가능합니다.

시스템 모드

시스템은 두 가지 모드를 지원합니다:

• Focused: 개발자가 코드 템플릿과 주제를 설정하면 AI가 그 제약 내에서 아이디어를 생성합니다.
• Free: 과학 문헌을 통한 자율 에이전트 기반 검색으로 연구 방향을 선택합니다.

양 모드 모두에서 과정은 다음을 포함합니다:

• 가설 생성.
• 실험 코드 작성 및 실행.
• 데이터 분석, 그래프 그리기.
• 초록, 서론, 방법, 결론을 포함한 원고 작성.
• 자체 리뷰.

생성된 세 편의 논문 중 하나가 ICLR 2025 워크숍에서 평균 6.33점을 받았으나, 주최 측 합의로 출판 전에 철회되었습니다.

과학 커뮤니티의 도전 과제

Nature는 위험을 경고합니다: 저렴한 논문 생성이 피어 리뷰를 과부하시키고 저품질 콘텐츠 비중을 높일 수 있습니다. 2025년에 이미 참고문헌에서 AI 환각 사례가 기록되었습니다. Sakana AI, OpenAI, Google DeepMind, Anthropic이 유사 시스템 개발에서 경쟁 중이지만, 자율 AI 논문은 아직 주요 컨퍼런스 트랙이나 저널에서 받아들여지지 않습니다.

UBC의 Jeff Clune 교수는 진전을 가속화할 잠재력을 지적하면서 윤리 기준의 필요성을 강조했습니다.

AI를 도구로 보는 관점과 독립 저자로 보는 관점의 구분은 여전히 모호하며, 커뮤니티 논의가 필요합니다.

주요 포인트

• AI Scientist는 자율 과학 주기를 위한 Nature에 게재된 최초 시스템입니다.
• 구성적 정규화의 부정적 결과가 방법 시연으로 출판되었습니다.
• 연구 비용 — 15달러, GPT-4, Claude, Llama 3 사용.
• 한 논문이 ICLR 2025 워크숍 리뷰를 통과(6.33점), 그러나 철회.
• 위험: 리뷰 과부하와 문헌 내 AI 생성 노이즈 증가.

— Editorial Team