"AI 실수·속임수 방지하려면 프로세스 기반 검증해야"

"AI 실수·속임수 방지하려면 프로세스 기반 검증해야"

오진영 기자
2025.01.01 06:00

[키플랫폼 AI 인사이트] 변정원 엘리싯 공동창업자 겸 COO 인터뷰

[편집자주] 챗GPT 공개 이후 빠르게 AI 시대가 열리면서 산업, 경제, 사회, 문화, 교육 등 모든 분야에서 기존에 없던 새로운 가치들이 만들어지고 있습니다. 혁신적인 기술과 비즈니스모델로 새롭게 열리는 세상의 주역이 되고자 도전하는 이들의 이야기를 통해 AI가 만들 미래를 미리 만나봅니다.
엘리싯(Elicit)의 공동창업자 변정원 COO(최고운영책임자, 오른쪽)와 안드레아스 스튤밀러 CEO(최고경영자, 왼쪽) / 사진 = 엘리싯 제공
엘리싯(Elicit)의 공동창업자 변정원 COO(최고운영책임자, 오른쪽)와 안드레아스 스튤밀러 CEO(최고경영자, 왼쪽) / 사진 = 엘리싯 제공

AI(인공지능)의 발전 속도가 점차 가속화하면서 제조뿐만 아니라 서비스, 교육, 정치 등 모든 분야에서 사용이 늘고 있다. 전문가들은 AI 작업물이 폭발적으로 증가하면서 이에 대한 검증이 사실상 불가능해지는 만큼 '잘 사용하는' 인간의 역할이 더 중요해질 것이라고 입을 모은다.

논문 요약, 데이터 추출 등의 기능을 제공하는 학술용 AI 개발 스타트업 '엘리싯'의 공동창업자 변정원 COO(최고운영책임자)도 머니투데이와의 인터뷰에서 AI 사용에 있어 사람의 역할을 강조했다. 점차 인간이 하는 일을 AI가 대체해 갈 것이기 때문에 인간은 자신이 무엇에 관심이 있는지, 그리고 이를 AI나 기계에 어떻게 표현할지 파악하는 것이 중요해진다는 설명이다.

변 COO는 "AI 시스템이 더욱 똑똑해지고 더 많은 작업을 수행함에 따라 인간이 AI의 작업을 평가하기가 더 어려워질 것"이라며 "인간이 AI의 작업을 확인할 수 없다면 AI는 치명적인 실패로 이어질 수 있는 실수나 속임수를 저지를 수 있다"고 경고했다.

이어 "이를 방지하기 위해 AI 애플리케이션은 인간이 AI의 작업을 확인하기 쉽도록 하는 인터페이스를 사용해야 한다"며 "또 AI가 사회에 더욱 통합됨에 따라 결과만으로는 쉽게 평가할 수 없기 때문에 프로세스를 기반으로 AI 시스템을 훈련시키거나 평가해야 한다"고 덧붙였다.

AI가 점차 정교해지면서 결국 인간의 역할은 목표와 가치를 정의하는 게 될 것이라는 게 변 COO의 생각이다. 따라서 AI가 제대로 일하고 작동할 수 있도록 목표와 가치를 정의하는 작업이 가장 우선되어야 한다고 강조한다.

변 COO는 "복잡한 AI를 검토하려면 인간은 또 다른 AI의 도움을 필요로 하게 될 것"이라며 "인간이 AI의 능력을 따라갈 수 없기 때문에 목표와 관심, 핵심 가치를 AI에 전달해 올바르게 작업을 수행할 수 있도록 도와야 한다"고 말했다. 그러면서 "컴퓨팅 확장이나 LLM(거대언어모델)을 돕는 획기적인 알고리즘, AI 훈련을 위한 추론 작업에 대한 데이터를 통해 AI는 인간과 같은 창의성과 연결성을 구현할 수 있다"고 밝혔다.

엘리싯의 AI가 PDF 문서를 요약하는 화면/사진=엘리싯 홈페이지
엘리싯의 AI가 PDF 문서를 요약하는 화면/사진=엘리싯 홈페이지

한편 변 COO는 최근 AI가 급격한 속도로 발전할 수 있었던 원동력으로 알고리즘과 컴퓨팅, 데이터 기술을 꼽았다. 데이터를 처리하도록 AI를 학습시키는 딥러닝 기술과 하드웨어의 발전, 디지털화로 AI의 처리 능력이 빠르게 진보했다는 의미다. 그는 "모든 산업과 기업이 AI로 혁신을 이뤄낼 것이며 비즈니스 모델부터 수익구조, 제품까지 AI로 재구성될 것"이라고 전망했다.

특히 변 COO는 AI가 발전할 수 있었던 근본적인 기술인 '트랜스포머 모델'이 중요하다고 말했다. 트랜스포머 모델은 2017년 구글 연구팀이 소개한 기술로, 기존 언어 처리 방식들이 문장을 순차적으로 하나씩 읽는 것과 달리 문장 전체를 한 번에 보면서 단어들 사이의 관계를 파악한다. 이를 통해 대량의 데이터를 병렬로 처리할 수 있어 언어의 복잡한 구조와 문맥을 더 잘 이해하고 생성한다는 특징이 있다. 이는 대화형 AI에서 가장 중요한 부분으로 챗GPT 등 대부분 생성형 AI 개발의 기반이 되고 있다.

변 COO는 "트렌스포머 모델이 현재 생성형 AI에서 주목받지만 앞으로는 다양한 분야에서 더 많은 가치를 만들어 낼 것"이라며 "(AI 분야에서) 가장 큰 혁신은 생성형 AI가 아니라 트랜스포머 모델로, 생물학이나 로봇 등 다양한 영역에서 새롭게 사용되고 있다"고 분석했다.

<저작권자 © ‘돈이 보이는 리얼타임 뉴스’ 머니투데이. 무단전재 및 재배포, AI학습 이용 금지>

오진영 기자

안녕하세요. 정책사회부 오진영 기자입니다.

공유