[태그:] 크리스퍼

  • AI 과학적 발견 주장, 가려낼 기준은 5가지

    AI 과학적 발견 주장, 가려낼 기준은 5가지

    3줄 요약

    • AI가 ‘패턴을 찾았다’와 ‘과학적 발견을 했다’는 다른 말이다. 발견으로 인정받으려면 새로움·검증·중요성·출처 독립성·재현성을 통과해야 한다.
    • 앤트로픽 분자생물학 연구실의 ‘첫 발견’은 두 가지 반박을 함께 받았다. 이미 알려진 패턴이라는 반론, 그리고 패턴을 찾은 것만으로 발견이라 할 수 있느냐는 의문이다.
    • 미발표 연구 내용을 챗봇에 넣는다면 그 대화가 모델 학습에 쓰이는지부터 설정에서 확인해두는 게 안전하다.

    효소 하나, 그리고 그 주변에서 어떤 목록에도 올라 있지 않던 패턴. 앤트로픽의 AI 에이전트가 짚어낸 건 이것이었다. 회사는 여기에 새로 꾸린 분자생물학 연구실의 ‘첫 발견’이라는 이름을 붙였다. 유전자 편집 기술 크리스퍼(CRISPR)로 이어진 발견을 ‘연상시킨다’는 설명까지 곁들였다. 생물학자들에게서 돌아온 반응은 박수가 아니라 반발이었다. 여기까지가 사실관계다. 해석을 보태자면, 이 논란의 무게중심은 AI의 실력이 아니다. ‘발견’이라는 단어를 어디서부터 붙여도 되느냐다. AI 기업이 연구실까지 직접 차리는 흐름이니 ‘AI가 과학적 발견을 했다’는 헤드라인은 앞으로도 계속 나올 공산이 크다. 이 글은 그런 주장을 독자가 직접 걸러볼 기준 다섯 가지를 먼저 세우고, 연구자가 챗봇을 쓸 때 바꿔둘 설정을 뒤에 붙였다.

    생물학자들이 문제 삼은 건 ‘정의’와 ‘선후’

    MIT 테크놀로지 리뷰는 AI 뉴스레터에서 이 반론을 두 갈래로 나눠 전했다. 하나는 정의를 둘러싼 것이다. 데이터에서 패턴을 건져낸 것만으로 ‘발견’이라는 이름을 붙여도 되느냐는 물음. 다른 하나는 누가 먼저였느냐다. 한 연구자가 자기 팀이 같은 패턴을 이미 찾아냈다고 밝혔다. 이야기는 곧 앤트로픽 시스템이 그 연구자와 클로드(Claude)가 나눈 대화에서 패턴을 익힌 것 아니냐는 의문으로 번졌다. 이 의문의 진위는 아직 가려지지 않았다.

    매체가 더 무게를 실은 건 그다음 대목이다. AI에게는 새로운 것이 생물학자에게는 흔하거나, 놀랍지 않거나, 그다지 중요하지 않은 결과일 가능성이 있다는 지적이다. 과장된 주장이 되풀이되면 정작 진짜 진전이 나왔을 때 알아보기 어려워진다는 경고도 뒤따랐다. AI 기업이 과학적 발견의 문턱을 엉뚱한 높이에 세우고 있을지 모른다는 문제 제기다. 이 지적은 효소 패턴 하나가 진짜 발견이냐와는 별개다. 발견을 내세우는 AI 기업 전체를 향한 말이어서 앤트로픽만의 문제로 좁혀 읽기도 어렵다.

    새로움부터 재현성까지, 발견이 넘어야 할 다섯 관문

    과학계에서 어떤 결과가 발견으로 자리 잡는 과정은 발표 한 번으로 끝나지 않는다. 세부 절차는 분야마다 달라도, 대체로 아래 다섯 질문을 거친다는 뼈대는 비슷하다. 결과를 낸 쪽이 사람이든 AI든 문턱이 낮아질 이유는 없다. AI가 냈다는 이유로 기준을 느슨하게 적용한다면 그건 검증이라기보다 홍보다.

    • 새로움: 데이터베이스에 등록되지 않았다고 아무도 모른다는 뜻은 아니다. 미발표 실험 노트나 학회 포스터, 연구실 내부 데이터에 이미 들어 있을 가능성까지 따져야 한다.
    • 검증: 컴퓨터가 찾아낸 패턴은 아직 가설이다. 생물학이라면 그 패턴이 실제 기능과 이어지는지 실험으로 확인하는 단계가 필요하다.
    • 중요성: 그 분야 연구자가 보기에 의미 있는 질문에 답하는가. 통계적으로 드문 것과 과학적으로 중요한 것은 별개의 이야기다.
    • 출처 독립성: AI가 학습 과정에서 이미 본 정보를 되풀이한 것은 아닌가.
    • 재현성: 다른 팀이 같은 방법을 썼을 때 같은 결과가 나오는가.
    기준 확인할 질문 효소 패턴 논란에서 드러난 쟁점
    새로움 이미 알려진 결과인가 한 연구자가 자기 팀이 같은 패턴을 먼저 찾았다고 주장
    검증 실험으로 기능을 확인했나 패턴을 찾은 것만으로 발견이냐는 의문 제기. 실험 확인 여부는 원문에 나오지 않음
    중요성 분야 전문가에게 의미가 있나 AI에게 새로운 것이 생물학자에겐 흔한 결과일 수 있다는 지적
    출처 독립성 학습 데이터에서 온 것은 아닌가 그 연구자와 클로드의 대화에서 익혔을 가능성에 대한 의문(확인되지 않음)
    재현성 다른 팀도 같은 결과를 얻나 원문에서 다뤄지지 않음

    표를 채워놓고 보면 빈칸부터 눈에 들어온다. 검증과 재현성 두 칸은 원문에 근거가 없다. 나머지 세 칸은 반론이거나 확인되지 않은 의문이다. 원문에 담긴 정보만으로는 다섯 기준 가운데 통과가 확인된 항목이 아직 하나도 없는 셈이다. 실패했다는 뜻은 아니다. 판정할 자료가 아직 나오지 않았다는 뜻이다.

    크리스퍼도 반복 서열에서 편집 도구까지 세 단계를 거쳤다

    패턴을 찾는 일과 발견 사이의 거리는, 공교롭게도 앤트로픽이 직접 꺼낸 비교 대상에서 가장 선명하게 드러난다. 크리스퍼의 출발점은 세균 유전체 안에서 이상하게 되풀이되던 DNA 서열이었다. 그 반복 서열이 무슨 일을 하는지는 한동안 수수께끼로 남았다. 나중에야 정체가 밝혀졌다. 세균이 침입했던 바이러스를 기억해뒀다가 다시 들어오면 잘라내는, 일종의 면역 체계였다. 거기서 한 걸음 더 나아가 원하는 유전자 위치를 골라 자르는 편집 도구가 됐다.

    반복 패턴 관찰, 기능 규명, 도구화. 단계 하나하나가 별도의 연구를 요구했다. 과학계가 가장 높이 평가한 것도 반복 서열을 처음 본 순간이 아니었다. 그것을 유전자 편집 도구로 바꿔낸 단계였다. 이 흐름에 앤트로픽 사례를 겹쳐 보면 효소 주변 패턴을 찾아낸 일은 첫 칸에 놓인다. ‘크리스퍼를 연상시킨다’는 표현은 출발점이 닮았다는 말로 읽는 게 정확하다. 같은 곳에 도착한다는 보장까지 담긴 말은 아니다. 비유를 고른 쪽이 앤트로픽 자신이라는 점을 떠올리면, 이 비유는 아직 남은 두 단계를 스스로 상기시키는 꼴이 된다.

    문턱의 생김새는 분야마다 다르다. 수학은 증명이 맞는지 가리는 절차가 비교적 뚜렷하다. 수학자들이 무작위성을 활용해 1971년에 제안된 증명을 완성하고 55년 묵은 문제를 푼 사례가 그렇다. 이건 AI가 아니라 사람 수학자들이 낸 성과다. 다만 증명이 완결되는 순간 결과의 성격이 분명해진다는 점을 보여주기에는 충분한 예다. 생물학 사정은 다르다. 데이터에서 찾은 패턴은 살아 있는 세포 안에서 실제로 작동하는지 확인될 때까지 가설로 남는다. AI가 어느 분야에서 ‘발견’을 내세우느냐에 따라 요구되는 검증의 무게도 달라진다는 얘기다. 앤트로픽이 발을 들인 분자생물학은 그 무게가 무거운 쪽에 속한다.

    학습 데이터에서 온 결과는 발견보다 기억에 가깝다

    대규모 언어모델은 방대한 양의 텍스트로 학습한다. 모델이 내놓은 ‘새로운’ 결과가 실은 학습 중에 본 논문이나 게시물, 사용자 대화의 조각을 다시 짜 맞춘 것이라면, 그건 발견이라기보다 기억이다. AI 성능 평가 쪽에는 이미 이름이 붙은 현상이 있다. 시험 문제가 학습 데이터에 섞여 들어가 점수가 부풀려지는 것, 이른바 ‘데이터 오염’이다. 과학적 발견 주장도 같은 구조의 함정을 안고 있다. 부풀려지는 게 점수가 아니라 ‘새로움’이라는 차이뿐.

    골치 아픈 건 바깥에서 확인할 길이 마땅치 않다는 점이다. 학습 데이터 전체가 공개되는 경우는 드물다. 그래서 제3자가 “이 결과는 어디서 왔나”를 거슬러 올라가 추적하기 어렵다. 앤트로픽 시스템이 그 연구자와 클로드의 대화에서 패턴을 익혔느냐는 의문도 이 벽 앞에 멈춰 있다. 근거 없는 의심으로 끝날 가능성도 충분하다. 이런 의문이 나왔다는 사실 자체는 가볍지 않다고 본다. AI의 발견 주장에는 출처 독립성을 따로 검증하는 절차가 필요하다는 신호로 읽히기 때문이다.

    AI 기업의 발견 주장을 믿으려면 적어도 세 가지가 함께 공개돼야 한다는 게 이 글의 판단이다. 모델이 학습한 데이터의 대략적인 범위와 기준 시점. 발표 전에 수행한 선행 문헌 조사 결과. 실험 검증 계획이나 그 결과. 앞의 표에 대입하면 각각 출처 독립성, 새로움, 검증 칸을 채우는 자료다. 셋이 빠진 발표라면 ‘흥미로운 가설’ 정도로 받아들이는 편이 안전하다.

    국내 연구실이 바꿀 건 제도가 아니라 챗봇 학습 설정

    이번 논란으로 국내 사용자에게 당장 바뀌는 제도나 서비스는 없다. 달라져야 할 건 연구실의 챗봇 사용 습관이다. 대학원생이나 기업 연구원이 실험 데이터를 붙여넣고 해석을 묻거나 논문 초안을 다듬는 데 챗봇을 쓰고 있다면, 그 대화가 모델 개선에 쓰이는지부터 확인해두는 게 연구 아이디어를 지키는 기본 조치다. 앞서 나온 의문의 진위가 아직 가려지지 않았다는 점은 설정 변경을 미룰 이유가 되지 못한다. 오히려 서둘러 꺼둘 이유다. 가능성을 미리 닫아둬서 손해 볼 일은 거의 없다.

    • 클로드: 왼쪽 아래 프로필(이름) → 설정 → 개인정보 보호(Privacy) → ‘Claude 개선에 도움 주기’ 토글 끄기. 마지막 항목의 한국어 표기는 확실하지 않으며, 영문 화면에서는 ‘Help improve Claude’로 나온다.
    • 챗GPT: 프로필 아이콘 → 설정 → 데이터 제어(Data controls) → ‘모두를 위한 모델 개선(Improve the model for everyone)’ 끄기.
    • 일회성 대화: 설정 전체를 건드리기 싫다면 챗GPT의 임시 채팅을 쓰면 된다. 클로드에도 기록을 남기지 않는 대화 기능이 있는데, 한국어 표기 이름은 확실하지 않다(영문 ‘Incognito’).
    • 기관 계약 확인: 학교나 회사가 팀·기업용 요금제를 계약했다면 학습 사용 조건이 개인 요금제와 따로 정해져 있을 가능성이 크다. 연구지원팀이나 IT 부서에 계약 조건을 직접 물어보는 게 가장 정확하다.

    앱이 업데이트되면서 항목 이름이 조금씩 바뀌어 왔다. 위 문구가 그대로 보이지 않으면 ‘학습’이나 ‘개선’이 들어간 토글을 찾으면 된다. 설정을 끈 효과가 이미 나눈 대화에까지 미치는지는 서비스별 약관에서 따로 확인해야 한다. 하나 짚어둘 점이 있다. 토글을 끄면 내 아이디어가 학습에 섞일 가능성은 줄어들지만, 내가 먼저 알았다는 사실까지 증명되지는 않는다. 선후를 가리는 데 가장 확실한 수단은 여전히 기록이다. 날짜가 남는 연구 노트, 내부 보고서, 프리프린트. 이번 논란에서 ‘우리 팀이 먼저 찾았다’는 주장이 힘을 얻는 데도 결국 그런 흔적이 필요하다. 기록하는 습관이 어떤 AI 도구보다 오래 간다고 해도 과장은 아니다.

    확인된 것과 아직 불확실한 것

    확인된 것

    • 앤트로픽은 새 분자생물학 연구실의 첫 발견을 발표했다. AI 에이전트가 효소 주변에서 목록에 없던 패턴을 찾아냈다는 내용이다.
    • 앤트로픽은 이 패턴이 크리스퍼로 이어진 것을 ‘연상시킨다’고 표현했다.
    • 일부 생물학자는 패턴을 찾은 것만으로 발견이라 할 수 있는지 의문을 제기했다.
    • 한 연구자는 자기 팀이 같은 패턴을 이미 발견했다고 밝혔다.

    아직 불확실한 것

    • 앤트로픽 시스템이 그 연구자와 클로드의 대화에서 패턴을 학습했는지 여부
    • 이 패턴의 기능이 실험으로 확인됐는지 여부
    • 누가 먼저 발견했는지에 대한 판정
    • 이 패턴이 크리스퍼처럼 실제 응용으로 이어질지 여부

    ‘찾았다’와 ‘확인했다’ 사이, 발견이라는 단어의 무게

    다섯 기준을 매번 다 대입하기 번거롭다면 질문 하나만 남겨도 된다. “누가, 어떤 방법으로 확인했나.” 패턴을 찾았다, 후보를 추렸다, 가능성을 제시했다. 기사에 이런 동사만 있다면 아직 가설 단계의 말이다. 실험으로 기능을 확인했다, 다른 팀이 재현했다, 해당 분야 학술지 심사를 통과했다는 문장이 뒤따라야 발견이라는 단어가 제 무게를 감당한다. 데이터를 훑는 속도에서 AI는 사람보다 훨씬 빠르다. 하지만 그 결과가 과학으로 인정받으려면 여전히 사람의 검증을 거쳐야 한다. 앤트로픽의 효소 패턴이 어느 쪽으로 판가름 나든, 이 기준을 쥐고 읽으면 과장된 발표에 덜 휘둘린다. 과장이 쌓이면 진짜 진전을 못 알아보게 된다는 앞의 경고는 반대로도 읽힌다. 기준이 선명할수록 정말 의미 있는 AI 연구 성과가 나왔을 때 그걸 알아보는 눈도 밝아진다.

    출처: MIT Tech Review AI

  • AI 과학 발견 논쟁, 패턴 찾기와 발견은 다르다

    AI 과학 발견 논쟁, 패턴 찾기와 발견은 다르다

    3줄 요약

    • AI가 데이터에서 새로운 패턴을 찾는 일과 그 패턴이 실제로 무엇을 하는지 밝히는 일은 서로 다른 연구 단계예요.
    • Anthropic의 분자생물학 연구실 성과를 두고 생물학자들이 ‘발견은 아니다’라고 반박한 핵심도 바로 이 차이였어요.
    • AI 과학 성과는 ‘돌파구냐 실패냐’보다 연구 단계, 사람의 역할, 선행 연구와 크레딧으로 나눠 보는 편이 정확해요.

    에이전트 950개, 작업 시간 21시간. Anthropic이 자체 분자생물학 연구실에서 돌린 Claude 에이전트들의 첫 성과를 공개하면서 앞세운 숫자예요. 연구실 구조 자체는 간단한 편이에요. Claude 에이전트가 어려운 생물학 문제를 읽고 가설을 세우면, 사람 과학자가 그 보고를 받아 실제 실험을 돌리는 식이거든요. 회사는 이 시스템이 ‘발견’을 해냈다고 했어요. 그런데 생물학계에서는 박수보다 반론이 더 많이 나왔고요. 한 회사 홍보 문구가 과했느냐로 끝날 얘기는 아니에요. ‘AI가 과학적 발견을 했다’는 발표는 앞으로도 줄줄이 나올 텐데, 그걸 어떤 잣대로 읽어야 하느냐가 이번 논쟁이 남긴 진짜 질문이니까요.

    후보 서열 찾기와 기능 밝히기는 다른 단계예요

    생물학 연구가 돌파구에 닿기까지의 과정을 단계별로 쪼개 보면, 어디서 말이 엇갈렸는지가 금방 보여요. 과학자들이 생명체의 유전 정보를 해독하면서 쌓아 온 DNA 서열이 수백만 개 규모의 도서관처럼 모여 있다고 상상해 보세요. 첫 단계는 이 도서관을 뒤져 흥미로운 효소를 만드는 특이한 서열을 찾아내는 일이에요. 두 번째는 그 효소가 실제로 무슨 일을 하는지 밝히는 단계. 마지막이 그 효소를 조작해서 쓸모 있는 일을 하게 만드는 단계예요. 이번 논쟁은 정확히 첫 단계와 두 번째 단계 사이, 그 경계선 위에서 벌어졌어요.

    Anthropic 에이전트들이 짚어낸 건 완전히 새로운 서열이 아니었어요. 이미 알려진 효소를 둘러싼 반복 패턴이었고, 회사는 이 패턴이 그동안 목록에 올라 있지 않았다고 설명했어요. 위 단계에 대 보면 첫 단계, 그중에서도 이미 아는 효소 주변을 다시 훑은 작업에 가까워요. 그런데 발표문은 이 패턴이 크리스퍼(CRISPR)로 이어진 발견을 ‘연상시킨다’고 적었어요. 크리스퍼는 과학과 의학을 바꿔 놓은 유전자 편집 기술이죠. 그 이름이 나오는 순간 읽는 사람은 대단한 게 나왔다고 받아들이기 쉬워요. 결과보다 기대를 먼저 건넨 비유였던 셈인데요. ‘발견은 아니다’라는 반박이 유난히 날카로웠던 것도 이 비유가 끌어올린 기대치와 무관해 보이지 않아요.

    해링턴의 반론, ‘패턴 찾기는 쉬운 부분’

    반론의 한가운데에는 생물학자 루커스 해링턴의 게시물이 있었어요. 그는 “이상한 유전자 묶음과 반복 서열을 찾는 건 대개 쉬운 부분이고, 어려운 부분이자 진짜 발견이 나오는 곳은 그 시스템이 실제로 무엇을 하는지 알아내는 일”이라고 썼는데요. 앞에서 나눈 단계로 옮기면 첫 단계와 두 번째 단계 사이에 선을 분명히 그은 거예요. 이 글은 빠르게 퍼졌고, 제약사 일라이 릴리의 회장 겸 CEO까지 공개적으로 지지하고 나섰어요. 에이전트가 실험실의 고된 기초 작업 일부를 도운 건 맞다, 하지만 그걸 발견이라고 부르긴 어렵다. 반론을 한 문장으로 줄이면 이 정도예요.

    크레딧 문제는 또 다른 쪽에서 불거졌어요. 코펜하겐대 생물학자 마리오 로드리게스 메스트레가 자기 연구팀이 바로 이 패턴을 이미 찾아냈다고 밝힌 건데, 이 주장이 알려진 건 뉴욕타임스를 통해서였어요. 메스트레는 평소 연구하면서 Claude와 대화를 자주 나눠 왔다고 해요. 그러니 Anthropic 팀이 자기 대화에서 뭔가를 배운 건 아니냐는 의문이 나올 법했죠. Anthropic은 이를 부인했어요. 메스트레는 그와 상관없이 Claude 사용을 전부 중단하겠다고 했고요.

    메스트레 건을 떼어 놓고 봐도 남는 문제가 있어요. AI가 사람 눈만으로는 알아보기 힘든 패턴을 방대한 생물학 데이터에서 찾아냈다면, 그 자체로는 인상적인 일이 맞아요. 그렇다고 그 결과가 곧 과학의 돌파구가 되는 건 아니에요. AI 입장에서 새로운 성과가 생물학자에게는 흔한 일이거나, 예상 가능한 결과거나, 파급력이 크지 않은 결과일 가능성이 있거든요. 누구 눈높이에서 새로운지에 따라 같은 결과의 무게가 완전히 달라지는 거죠.

    OpenAI ‘100만 달러짜리’ 수학 난제에서도 골대가 옮겨졌어요

    비슷한 장면은 수학에서도 나왔어요. OpenAI가 자사 에이전트들이 ‘100만 달러짜리’ 수학 난제를 풀었다고 발표하자, AI에 회의적인 사람들 사이에서 그게 정말 중요한 문제였느냐고 묻는 글이 널리 공유됐어요. 짚고 넘어갈 점이 있는데요, 이 글은 OpenAI의 풀이가 틀렸다고 주장하지 않았어요. 해당 결과가 수학자들이 가장 관심을 두는 문제는 아닐 수도 있다는 지적이었죠. 그 와중에 한 수학자가 모델이 자기 연구를 출처 표시 없이 썼을 가능성을 제기했고요. 그러고 나니 사람들 머릿속에는 ‘OpenAI가 반칙을 했다’거나 ‘풀이가 별로 중요하지 않다’, 혹은 둘 다라는 인상만 남았어요. 풀이가 틀렸다고 한 사람은 없는데 평가는 깎여 나간, 좀 묘한 결말.

    두 사례를 나란히 놓아 보면 논쟁의 뼈대가 꽤 닮았어요. 성과 발표, 중요도에 대한 반론, 크레딧 논란이 거의 같은 순서로 이어지거든요.

    구분 Anthropic 분자생물학 연구실 OpenAI 수학 난제
    회사가 내세운 성과 에이전트 950개가 21시간 동안 작업해 알려진 효소 주변에서 목록에 없던 반복 패턴을 짚어냄 자사 에이전트들이 ‘100만 달러짜리’ 수학 난제를 풀었다고 발표
    핵심 반론 패턴 찾기는 쉬운 부분이고, 기능을 밝히는 일이 진짜 발견이라는 지적 풀이가 틀린 게 아니라, 수학자들이 가장 중요하게 보는 문제가 아닐 수 있다는 지적
    크레딧 논란 코펜하겐대 연구팀이 같은 패턴을 이미 찾았다고 주장, Anthropic은 대화 학습 의혹 부인 한 수학자가 모델이 자기 연구를 출처 표시 없이 썼을 수 있다고 문제 제기
    남은 인상 발표문의 크리스퍼 비유가 만든 기대와 ‘발견 아님’이라는 반박이 충돌 ‘반칙’ 또는 ‘중요하지 않은 결과’라는 양극단 해석

    ‘AI가 발견했다’는 발표를 쪼개 읽는 다섯 가지 기준

    ‘AI가 발견했다’는 발표가 나올 때마다 믿을지 말지부터 고민하면 금방 지쳐요. 아래 기준으로 쪼개서 보는 편이 훨씬 덜 헷갈리고요.

    1. 연구 단계 어디까지 갔나 — 후보를 찾은 건지, 그 후보가 무엇을 하는지 밝힌 건지, 실제로 쓸모 있게 조작까지 해 본 건지 가르세요. Anthropic 사례에서 비판이 몰린 곳도 딱 첫 단계와 둘째 단계 사이였어요.
    2. AI에게 새로운가, 분야에 새로운가 — 데이터 더미에서 패턴을 뽑아낸 건 AI 능력으로 보면 눈에 띄는 일이 맞아요. 그 분야 연구자 눈에도 새롭고 중요한지는 따로 따져야 할 질문이고요.
    3. 사람은 어디서 개입했나 — 방향은 누가 잡았고 실험은 누가 했는지 보세요. Anthropic 연구실만 해도 실험은 사람 과학자 몫이에요. 새로운 지식은 대개 협업과, 계속 늘어나는 도구들 사이에서 나와요. 그래서 AI를 현미경이나 슈퍼컴퓨터 같은 도구로 보는 관점이 과학이 실제로 굴러가는 방식에 더 잘 맞는다는 시각도 있어요.
    4. 선행 연구와 크레딧은 확인됐나 — 이미 누가 같은 걸 찾았는지, 모델이 다른 연구자의 작업을 출처 없이 가져다 쓴 건 아닌지. 생물학 사례와 수학 사례에서 똑같이 쟁점이 된 부분이에요. 독립적인 확인이 나오기 전까지는 판단을 잠시 미뤄 두는 게 안전해요.
    5. 비유와 수식어를 걷어내면 무엇이 남나 — ‘크리스퍼를 연상시킨다’ 같은 표현이 전하는 건 결과가 아니라 기대예요. 수식어를 다 지우고 ‘무엇을, 얼마나 많은 후보 중에서, 어떻게 확인했나’만 남겨 보세요. 성과의 실제 크기가 그제야 보여요.

    이런 기준을 굳이 챙기는 데는 이유가 있어요. ‘돌파구 아니면 실패’라는 이분법이 진짜 진전까지 가려 버리거든요. 이 논쟁을 다룬 분석 글은 20만 개 후보를 살펴볼 만한 몇 개로 추려낸 작업을 결코 작지 않은, 정당한 과학 작업이라고 평가해요. 사람이 방향을 잡아 주고 실험도 사람이 돌렸다는 점을 감안해도, 범용 챗봇이 그 일을 해냈다는 것 자체는 주목할 만하다는 거죠. 평가 기준이 ‘Claude가 스스로 발견했느냐’ 하나로 좁혀지면 사정이 달라져요. 이런 성과가 전부 찬반 논쟁의 증거로만 소비되니까요. 반대쪽 함정도 있어요. AI가 정말 성과를 낸 것처럼 보일 때 ‘그게 중요한 문제였냐’며 골대를 옮기고 싶어지는 유혹. AI 회사들이 자기 시스템을 과학자가 쓰는 도구가 아니라 스스로 발견하는 주체로 내세우는 한, 이 악순환은 되풀이될 가능성이 커 보여요. 개인적으로는 ‘20만 개 후보를 몇 개로 좁혔다’는 설명이 크리스퍼 비유보다 훨씬 단단한 홍보 문구가 됐을 거라고 봐요. 반박할 틈이 적은 문장이니까요.

    국내 연구자는 챗봇 학습 설정을, 뉴스 독자는 ‘발견’ 제목을 다시 볼 때

    한국에서 이 논쟁을 지켜보는 사람에게 실제로 달라지는 건 두 가지 정도로 보여요.

    첫째, 연구에 챗봇을 쓰는 사람의 데이터 관리. 메스트레의 의혹은 Anthropic이 부인했고, 사실로 확인된 적도 없어요. 그래도 연구자가 이 문제 하나로 도구를 끊어 버린 사례가 나왔다는 건 가볍게 넘길 일이 아니에요. 아직 발표하지 않은 아이디어나 데이터를 챗봇에 넣고 있다면, 그 대화가 모델 개선에 쓰이는지부터 확인해 두세요. Claude 웹·앱 기준으로는 설정 → 개인정보 보호(Privacy)로 들어가 ‘Claude 개선에 도움 주기(Help improve Claude)’ 항목을 보면 되는데, 이 항목의 한국어 표기는 확실하지 않아요. 앱 버전에 따라 표기가 조금씩 바뀌기도 해서 영어 이름을 같이 기억해 두면 찾기 편하고요. 다른 챗봇을 쓴다면 설정에서 ‘데이터’나 ‘개인정보’ 항목부터 열어 보세요. 대학이나 연구기관이 계약한 계정은 사정이 좀 달라요. 개인 설정보다 기관 이용 조건이 먼저 적용되는 경우가 있어서, 담당 부서에 한 번 물어보는 편이 확실하거든요. 하나 더. 우선권 다툼이 붙으면 기댈 곳은 결국 기록이에요. 챗봇과 주고받은 아이디어도 연구 노트에 날짜와 함께 남겨 두면, 나중에 누가 먼저였는지 설명할 근거가 돼요.

    둘째는 뉴스를 읽는 방식이에요. 해외 AI 기업의 과학 성과 발표가 국내 기사로 옮겨질 때 ‘발견’, ‘돌파구’ 같은 단어가 제목에 그대로 실리는 경우가 많은 편으로 보여요. 다만 이건 따로 집계한 게 아니라 개인적인 관찰에 가까운 추정이에요. 그런 제목을 만나면 위 다섯 가지 기준 가운데 연구 단계와 선행 연구, 이 두 개만 먼저 확인해도 과장된 부분이 상당히 걸러져요. 국내 대학이나 연구기관에서 AI를 활용한 연구 성과를 평가할 때도 ‘AI가 한 일’과 ‘사람이 한 일’을 어떻게 나눠 적을지가 비슷한 질문으로 떠오르지 않을까 싶은데요. 이것 역시 추측이라는 점은 밝혀 둘게요.

    확인된 것과 아직 불확실한 것

    확인된 것

    • Anthropic은 Claude 에이전트가 생물학 문제를 읽고 추론하면 사람 과학자가 실험하는 분자생물학 연구실을 운영한다고 밝혔어요.
    • 에이전트 950개가 21시간 동안 작업해 찾은 건 새로운 서열이 아니라, 알려진 효소 주변의 반복 패턴이에요. 회사는 이 패턴이 목록에 없던 것이라고 설명했어요.
    • 이를 비판한 해링턴의 게시물에 일라이 릴리 회장 겸 CEO가 지지를 표했어요.
    • 메스트레는 자기 팀이 같은 패턴을 먼저 찾았다고 주장했고, Anthropic은 대화 학습 의혹을 부인했어요. 메스트레는 Claude 사용을 중단하겠다고 했어요.
    • OpenAI 수학 성과를 비판한 글은 풀이가 틀렸다고 주장하지 않았어요.

    아직 불확실한 것

    • Anthropic 에이전트가 짚은 반복 패턴이 실제로 어떤 기능을 하는지
    • 메스트레 팀의 선행 발견이 Anthropic 결과와 정확히 같은 것인지, 우선권이 어떻게 정리될지
    • 메스트레의 대화 내용이 연구에 쓰였다는 의혹의 사실 여부
    • OpenAI가 푼 수학 문제가 수학계에서 얼마나 중요한 결과로 평가받을지
    • 한 수학자가 제기한 출처 누락 문제가 어떻게 결론 날지

    해링턴의 제안, 기준은 진짜 발견이 나오기 전에 올려 둬야

    해링턴은 비판 글 끝에 제안을 하나 덧붙였어요. AI 회사들이 지금 기준을 높게 세워 둬야, 나중에 AI가 정말로 근본적으로 새로운 생물학적 메커니즘을 발견했을 때 모두가 그게 얼마나 큰일인지 제대로 알아본다는 거예요. 뒤집어 읽으면 경고에 가까워요. 기준을 낮게 잡고 매번 ‘발견’을 외치다 보면, 진짜 발견이 나왔을 때 오히려 믿음을 얻지 못한다는.

    걸리는 건 회사 쪽에 이 제안을 받아들일 동기가 별로 없어 보인다는 점이에요. OpenAI의 샘 올트먼과 Anthropic의 다리오 아모데이가 서로 한발 앞서려고 경쟁하는 구도에서, AI 과학 성과의 기준을 스스로 높이는 일은 우선순위에서 밀리기 쉽거든요. 기준을 세우는 몫은 읽는 쪽에도 남아 있는 셈이에요. 다음에 ‘AI가 발견했다’는 제목을 보면 발견이라는 단어에 반응하기 전에 세 가지만 물어보세요. 어느 단계까지 갔나. 누구와 함께 했나. 누구보다 먼저였나. 이 세 질문에 답이 나오는 성과라면, 붙은 이름표가 발견이든 아니든 충분히 의미 있는 진전일 거예요.

    출처: MIT Tech Review AI