기업 실적 예측 AI의 한계를 넘다… 인과관계까지 설명하는 'TRuE-XAI' 프레임워크 등장

이미지
투명성과 신뢰성을 상징하는 투명한 인공지능(AI) 신경망 뇌와 상승하는 재무 예측 데이터 흐름을 시각화한 고도화된 하이테크 디지털 일러스트레이션 단순히 "맞히는 AI"가 아니라, 왜 그런 예측을 했는지까지 설명하는 새로운 금융 AI가 제안됐다. 기업의 미래 실적을 예측하는 AI는 이미 투자와 신용평가 분야에서 널리 활용되고 있다. 하지만 대부분의 인공지능은 높은 정확도를 보여도 왜 특정 기업의 실적이 좋아질 것이라고 판단했는지는 명확하게 설명하지 못한다. 금융처럼 규제와 책임이 중요한 분야에서는 이러한 '블랙박스 AI'가 큰 한계로 지적돼 왔다. 최근 발표된 연구는 이러한 문제를 해결하기 위해 예측 성능과 설명 가능성, 그리고 인과관계 분석을 하나로 통합한 새로운 프레임워크 TRuE-XAI(Transparent, Rule-based and Explainable AI) 를 제안했다. 연구진은 미국 SEC에 제출된 실제 상장기업 재무제표를 이용해 미래 이익 증가를 예측했으며, 단순한 상관관계가 아니라 실제로 실적 개선에 영향을 주는 재무지표까지 분석했다. 기존 실적 예측 AI는 왜 신뢰하기 어려운가 기업의 실적 전망은 투자자뿐 아니라 은행, 신용평가기관, 기업 경영진에게도 매우 중요한 정보다. 미래 이익이 증가할 가능성을 미리 알 수 있다면 투자 전략을 세우거나 대출 위험을 줄이는 데 큰 도움이 된다. 문제는 기존 예측 모델이 두 가지 한계를 가지고 있었다는 점이다. 첫 번째는 전통적인 통계모델이다. 선형적인 관계를 가정하기 때문에 실제 기업의 복잡한 재무 구조를 충분히 반영하지 못했다. 두 번째는 머신러닝이다. Random Forest나 XGBoost 같은 최신 알고리즘은 예측 성능은 뛰어나지만 왜 그런 결과가 나왔는지를 설명하기 어렵다. SHAP이나 LIME 같은 설명 기법도 존재하지만, 이들은 어디까지나 '관련성이 높은 변수'를 알려줄 뿐 실제 원인을 증명하지는 ...

중학생 수학 서술형 평가의 자동 피드백: 비지도 학습과 거대언어모델의 만남

이미지
의미 기반 클러스터링을 활용해 학생들의 수학 풀이를 분석하고, 대규모 언어모델(LLM)이 맞춤형 피드백을 생성하는 과정을 개념적으로 표현한 이미지. 교실에서 학생들이 작성한 수학 서술형 답안을 하나씩 읽고 맞춤형 피드백을 건네는 일은 상당한 시간이 소요되는 과정이다. 최근 거대언어모델(LLM)이 교육 현장의 이러한 평가 부담을 덜어줄 대안으로 주목받고 있지만, 인공지능이 참고할 모범 답안이나 예시를 사람이 직접 일일이 골라 프롬프트에 입력해야 하는 번거로움이 여전히 실무적 걸림돌로 남아 있다. 이러한 문제를 해결하기 위해 연구진은 비지도 의미론적 군집화 기법을 활용해 LLM 피드백용 예시를 자동으로 선별하는 방법론을 연구했다. 중학교 7학년 수학 부등식 문제를 바탕으로 100개의 모의 학생 응답을 생성하고 분석한 결과, 인공지능이 생성한 피드백의 96.42%가 교사 평가에서 수용 가능한 수준을 기록했다. 이 연구는 자동화된 군집화가 프롬프트 엔지니어링의 수고를 덜면서도 교육적으로 활용 가능한 피드백을 만들어낼 수 있음을 보여준다. 시맨틱 클러스터링으로 학생들의 논리 구조를 읽어내다 연구진은 학생들의 서술형 답안을 그대로 대입하는 대신, 문장 임베딩 모델인 Sentence-BERT를 이용해 텍스트를 고차원 벡터로 변환했다. 이어 UMAP을 통해 차원을 축소하고, 밀도 기반 군집화 알고리즘인 HDBSCAN을 적용해 학생들의 풀이 과정에 담긴 공통된 추론 패턴을 그룹화했다. 이 과정에서 기계는 정답 여부라는 기계적 분류를 넘어, 학생들이 공유하는 대수적 논리 구조를 중심 기준으로 삼았다. 예를 들어, 올바른 풀이를 상세하게 적은 집단과 핵심만 간결하게 적은 집단은 의미론적 유사성에 따라 하나의 큰 군집으로 묶였다. 이는 인공지능이 표면적인 글자 배열이 아니라 학생들이 문제를 해결하기 위해 거친 사고의 흐름 자체를 포착해 낸다는 점을 시사한다. 중심값과 경계값 예시가 이끌어낸 높은 피드백 품질 군집화된 데이터 속에서 연구진은 각 그룹의 중심에...

언어 계통이 다르면 AI의 감정 분석 성능도 달라지나? 36개 언어로 검증한 최신 LLM 비교 연구

이미지
  GPT-4o부터 Claude 3.7 Sonnet까지, 다국어 감정 분석 성능을 언어 계통이라는 새로운 관점에서 분석한 연구 소셜미디어 감정 분석은 여론 분석, 시장 조사, 의료, 교육, 정치 분야에서 널리 활용된다. 하지만 지금까지는 "AI가 여러 언어를 얼마나 잘 이해하는가"에만 관심이 집중됐고, 왜 어떤 언어에서는 잘 작동하고 어떤 언어에서는 성능이 떨어지는지 는 충분히 설명되지 않았다. 이번 연구는 GPT-4o, Gemini 2.0 Flash, Claude 3.7 Sonnet, DeepSeek-V3, Mistral Large를 대상으로 36개 언어에서 감정 분석 성능을 비교했다. 특히 언어를 개별적으로 평가하는 대신 같은 언어 계통(language family) 끼리 묶어 분석했다는 점이 기존 연구와 가장 큰 차별점이다. 결과는 분명했다. 몇 개의 예시만 제공하는 Few-shot Prompting 만으로 대부분 언어의 성능이 향상됐지만, 영어 중심으로 학습된 현재의 LLM은 여전히 저자원 언어에서는 큰 성능 격차를 보였다. 개별 언어보다 언어 계통을 살펴본 이유 기존 다국어 벤치마크는 영어, 프랑스어, 독일어처럼 언어 하나씩 결과를 비교하는 방식이 대부분이었다. 하지만 언어는 서로 독립적으로 존재하지 않는다. 예를 들어 스페인어·포르투갈어·이탈리아어는 로망스어군, 영어·독일어·스웨덴어는 게르만어군, 아랍어·암하라어는 아프로아시아어족처럼 공통 조상을 가진 언어들은 문법과 표현 방식에도 공통점이 존재한다. 연구진은 이런 계통학적 관계가 LLM 성능에도 영향을 미치는지를 확인하기 위해 36개 언어를 인도유럽어족, 아프로아시아어족, 니제르콩고어족, 튀르크어족, 오스트로네시아어족, 영어 크리올어 등으로 분류해 비교했다. 논문의 계통도(Figure 2)는 이러한 언어 계층 구조를 시각적으로 보여준다. 36개 언어, 3개의 데이터셋으로 성능을 검증했다 연구에는 총 36개 언...

인공지능 시대의 생물학, 왜 기존 데이터의 재분석에 주목해야 하는가

이미지
방대하게 쌓여 있는 생명과학 데이터를 다시 분석하는 일이 왜 새로운 발견의 핵심 열쇠가 될까 생명과학 기술이 빠르게 발전하면서 매일 엄청난 양의 생물학 데이터가 쏟아져 나오고 있다. 하지만 이렇게 수집된 데이터의 대부분은 처음 연구가 끝난 뒤에 제대로 활용되지 못한 채 방치되는 경우가 많다.  최근 과학계에서는 새로운 실험을 무조건 늘리기보다, 이미 공개된 방대한 데이터를 인공지능과 새로운 관점으로 다시 분석하는 작업이 중요하다는 목소리가 커지고 있다. 이 글에서는 인공지능 시대에 데이터 재분석이 왜 필수적인지, 그리고 이를 통해 어떤 가능성과 과제가 열리 비용과 환경적 부담을 줄이면서도 과학적 혁신을 이룰 수 있는지 살펴본다. 데이터 재분석이 생명과학 연구에서 가지는 의미와 중요성 과학의 역사에서 위대한 발견은 언제나 새로운 실험에서만 비롯되지 않았다. 과거 요하네스 케플러는 티코 브라헤가 남긴 방대한 천문학 관측 데이터를 철저하게 다시 분석함으로써 행성 운동 법칙을 밝혀냈다. 이처럼 이미 존재하는 관측값을 새로운 시각으로 해석하는 작업은 과학적 진보를 이끄는 강력한 원동력이 된다. 최근 십여 년 동안 단일세포 전사체학이나 공간 오믹스 같은 첨단 기술이 등장하면서 연구자들은 과거에는 상상하기 힘들었던 복잡하고 거대한 생물학적 데이터를 얻게 되었다. 전 세계의 공공 저장소와 개방형 데이터 플랫폼을 통해 수많은 데이터가 공유되고 있지만, 막상 이를 소화하고 해석하는 속도는 데이터가 쌓이는 속도를 따라가지 못하고 있다.  실제로 방대한 공공 오믹스 데이터를 대상으로 한 조사에 따르면, 공개된 데이터 중 단 몇 퍼센트만이 최소한 한 번이라도 재분석을 거친 것으로 나타났다. 이는 수많은 고품질 데이터가 학술 생태계에 잠들어 있으며, 그 안에 숨겨진 잠재력이 아직 제대로 발현되지 않았음을 보여준다. 인공지능을 활용한 데이터 재분석의 메커니즘과 장점 데이터 재분석은 이미 출판된 데이터를 새로운 연구 질문에 적용하고, 과거의 결론을 재평가...

데이터베이스를 붙인 AI는 헛소리를 얼마나 덜 하나…환각률 최대 90% 이상 줄인 방법의 효과

이미지
생성형 AI가 추천한 정보를 어디까지 믿어도 될까. 대화형 AI는 그럴듯한 답을 만들어내는 데 뛰어나지만, 실제로 존재하지 않는 제품이나 서비스를 추천하는 이른바 '환각(hallucination)' 문제가 꾸준히 지적돼 왔다. 특히 기업이나 연구기관처럼 정해진 목록 안에서만 답해야 하는 환경에서는 이런 오류가 치명적이다. 불가리아 소피아공과대학교 연구진은 이러한 문제를 줄일 수 있는 시스템 구조를 시험했다. 핵심은 AI 자체를 새로 학습시키는 것이 아니라, 검증된 데이터베이스를 기반으로 답하도록 설계했을 때 환각이 얼마나 줄어드는지를 확인하는 것이었다. 연구 결과는 국제학술지 AI 에 발표됐다. AI가 틀린 이유는 '없는 도구를 추천했기 때문' 이번 연구는 일반적인 사실 오류를 측정하지 않았다. 연구진은 전자설계(EDA) 분야의 공학 소프트웨어 82개를 검증된 목록으로 구축한 뒤, AI가 이 목록에 없는 도구를 추천하는 경우를 '환각'으로 정의했다. 여기에는 두 가지 경우가 포함된다. 실제로 존재하지 않는 가상의 소프트웨어를 만들어내는 경우와, 실제 상용 프로그램이지만 연구진이 구축한 데이터베이스에는 등록되지 않은 프로그램을 추천하는 경우다. 즉, 이 연구에서 측정한 환각은 '사실이 틀렸다'기보다 '허용된 목록을 벗어났다'는 의미에 가깝다. 따라서 연구 결과는 폐쇄형 추천 시스템에서의 신뢰성을 평가한 것으로 이해해야 한다. 세 가지 장치를 함께 적용하자 환각률이 크게 감소했다 연구진은 모두 6912회의 API 호출을 수행하며 세 가지 방법을 조합해 비교했다. 첫 번째는 데이터베이스에서 관련 정보를 미리 불러와 AI에게 제공하는 방식이다. 두 번째는 추천 가능한 도구 이름을 검증된 목록으로 제한하는 것이다. 세 번째는 답변을 자유로운 문장이 아니라 일정한 JSON 형식으로 출력하도록 강제했다. 아무런 제약이 없는 상태에서는 데이터...

AI는 강의 흐름까지 예측할 수 있을까? 하천의 미래 지도를 그리려는 새로운 접근

이미지
2008년 인도 비하르주의 코시(Kosi)강은 갑자기 물길을 바꾸면서 대규모 홍수를 일으켰다. 수백 개 마을이 침수됐고 300만 명 이상이 삶의 터전을 잃었다. 이런 변화는 단순한 홍수와 다르다. 강 자체가 새로운 길을 선택해 버린 것이다. 문제는 기존 기술로는 이런 변화를 미리 예측하기가 매우 어려웠다는 점이다. 이번 연구가 답하려 한 핵심 질문도 여기에 있다. 위성영상과 강수량, 하천 유량, 토양 정보를 인공지능으로 함께 분석하면 강의 이동 경로를 미리 예측하고 재난 위험지역을 사전에 제시할 수 있을까? 여러 종류의 데이터를 하나로 묶은 AI 연구진은 새로운 AI 알고리즘을 개발했다기보다, 이미 성능이 입증된 여러 기술을 하나의 예측 체계로 통합하는 데 초점을 맞췄다. 구성은 크게 네 단계다. 위성영상(Landsat, Sentinel)에서 강의 경계를 추출한다(U-Net). 시간에 따라 강이 어떻게 이동하는지를 학습한다(ConvLSTM). 강수량, 유량, 토양, 토지이용 정보를 함께 분석한다. 침식과 홍수 위험지역을 낮음·중간·높음으로 분류해 위험지도를 만든다. 즉 "현재 강이 어디 있는가"뿐 아니라 "앞으로 어디로 이동할 가능성이 높은가"까지 예측하려는 구조다. 가장 중요한 결과는 세 가지 수치다 연구에서 제시한 핵심 성능 지표는 다음과 같다. IoU(Intersection over Union) 0.82 Dice 계수 0.88 F1-score 0.89 이 수치들은 AI가 예측한 강의 경계와 실제 강의 위치가 상당히 잘 일치했음을 의미한다. 특히 Dice와 F1 점수가 0.9에 가까울수록 강의 형태를 비교적 정확하게 찾아냈다는 뜻이다. 연구진은 또한 학습 과정에서 과적합(overfitting)이 크게 나타나지 않았으며, 약 15회 학습(epoch) 이후 성능이 안정적으로 수렴했다고 보고했다. 하지만 새로운 예측 AI라고 보기에...

양자컴퓨터가 챗GPT를 대체할까? 연구진의 답은 "아니다"

이미지
챗GPT를 비롯한 생성형 AI가 빠르게 발전하면서 또 하나의 기대가 커지고 있다. 바로 양자컴퓨터가 인공지능까지 혁신할 것이라는 전망이다. 일부에서는 '양자 언어모델(Quantum Language Model)'이 기존 대규모 언어모델(LLM)을 곧 대체할 것이라는 주장도 나온다. 그러나 이번 리뷰 논문의 결론은 오히려 반대에 가깝다. 연구진은 현재 알려진 수학적 이론과 최근 연구들을 종합한 결과, 양자컴퓨터가 자연어 생성 자체를 더 잘하는 것은 아니며, 생성형 AI의 일부 계산만 맡는 '공동 프로세서(coprocessor)' 역할이 가장 현실적인 방향 이라고 평가했다. 양자컴퓨터가 잘하는 일과 못하는 일 많은 사람이 양자컴퓨터는 무엇이든 기존 컴퓨터보다 빠를 것이라고 생각한다. 하지만 연구진은 이 인식이 대표적인 오해라고 지적한다. 현재의 LLM은 인간이 만든 문장, 이미지, 음성처럼 자연계에서 관찰되는 통계적 패턴 을 학습하도록 설계돼 있다. 트랜스포머 구조와 자기주의(attention) 메커니즘은 바로 이런 데이터를 처리하는 데 최적화돼 있다. 반면 양자컴퓨터는 전자 상태, 분자 구조처럼 양자역학적 확률분포 자체를 계산하거나 매우 거대한 조합 문제를 탐색하는 데 강점을 가진다. 다시 말해 두 시스템은 애초에 잘하는 문제가 다르다는 것이 연구진의 핵심 주장이다. 연구진은 "양자컴퓨터가 이미지나 텍스트 생성을 대신하는 것이 아니라, 고전 컴퓨터가 근본적으로 어려워하는 계산을 보조하는 역할을 맡게 될 가능성이 높다"고 설명했다. 양자컴퓨터가 특별한 이유 논문은 가장 중요한 차이를 '확률분포를 표현하는 방식'에서 찾는다. 고전 컴퓨터는 가능한 경우를 하나씩 저장하거나 계산해야 한다. 문제의 규모가 커질수록 필요한 메모리와 계산량도 기하급수적으로 증가한다. 대표적인 예가 분자 시뮬레이션이다. 논문에 따르면 전자 50개 정도를 ...