LifeSciBench 750개 생명과학 과제, AI 연구 평가 기준을 현장형으로 전환
생명과학 AI 평가가 실제 연구 업무에 가까워졌다. OpenAI는 바이오·제약 연구자 173명과 만든 750개 전문가 과제로 모델이 문헌 검토, 실험 설계, 분석 흐름을 얼마나 지원하는지 보겠다고 밝혔다.
원문: LifeSciBench puts 750 real biology tasks in front of AI models 원문 보기 →
생명과학용 AI가 단순 지식문제가 아니라 연구자의 실제 업무 흐름에서 검증받는 방향으로 움직이고 있다. OpenAI는 6월 17일 X에서 LifeSciBench를 공개하며, 이 벤치마크가 “real-world life science research”를 AI가 얼마나 잘 지원하는지 측정하기 위한 것이라고 설명했다. 핵심 숫자는 173명과 750개다. 바이오테크와 제약 연구에 종사하는 과학자 173명이 참여했고, 결과물은 7개 생물학 연구 워크플로에 걸친 전문가 작성 과제 750개로 정리됐다.
OpenAI 계정은 주로 모델, 제품, 안전 연구를 공식적으로 알리는 채널이다. 이번 트윗은 새 모델 출시보다 평가 인프라에 가깝지만, 생명과학 도메인에서 AI 성능을 재는 방식이 바뀌고 있음을 보여준다. 기존 벤치마크는 정답이 명확한 문제를 많이 다뤘지만, 연구 현장은 문헌 해석, 가설 정리, 실험 조건 선택처럼 불확실성이 큰 작업이 섞인다. LifeSciBench가 7개 워크플로로 나뉘었다는 점은 모델의 평균 점수보다 어느 단계에서 약한지를 추적하려는 설계에 가깝다.
다음 관전점은 이 벤치마크가 특정 모델 홍보 자료를 넘어 외부 연구자에게 얼마나 재현 가능한 기준이 되는지다. 과제 공개 범위, 채점 방식, 생명과학 세부 분야별 난이도 분포가 확인되면 AI 실험 조수의 성능 비교가 더 구체적이 된다. 출처 트윗은 여기에서 볼 수 있다.
관련 기사
AI가 난제를 풀면 수학은 전진할까, Reddit이 갈린 지점
172표가 모인 토론은 AI의 수학 성과를 둘러싼 갈등이 단순한 찬반이 아님을 보여줬다. 한쪽은 인간 연구자의 공로와 검증 절차를 묻고, 다른 쪽은 실제 문제 해결을 인정하지 않는 ‘기준 이동’이라고 맞섰다.
하버드 연구: OpenAI o1이 응급실 의사보다 높은 진단 정확도—Science 논문
하버드 의대와 Beth Israel Deaconess가 Science에 게재한 연구에서 OpenAI o1 모델이 실제 응급실 케이스 76건 중 67%를 정확히 진단했다. 두 내과 전문의의 정확도(55%, 50%)를 웃도는 결과다.
GPT-5.6 Sol, 6큐비트 칩 교정 40건 중 36건 자율 수행…실험실로 들어간 Codex
GPT-5.6 Sol 기반 Codex가 처음 보는 6큐비트 칩의 측정 40건 가운데 36건을 연구자 개입 없이 처리했다. 코드를 쓰는 에이전트가 실험 장비를 조작하고 결과에 따라 다음 측정을 고르는 단계까지 들어갔지만, 약하고 모호한 신호에서는 인간의 판단이 여전히 필요했다.