Configurable Clinical Information Extraction with Agentic RAG: What Works, What Breaks, and Why
Paper ID: 2606.19602 β’ 0 Upvotes
Agentic RAG Information Extraction Clinical AI Reasoning Agent RAG Evaluation
π ν΅μ¬ μμ½
볡μ‘ν νμ λ°μ΄ν°λ₯Ό μ²λ¦¬νκΈ° μν΄ μμ΄μ νΈ κΈ°λ° RAGλ₯Ό νμ©νμ¬ λμ μ νλμ μμ μ 보 μΆμΆ μμ€ν
μ ꡬμΆν¨
π μμΈ λ΄μ©
νμμ μλ£ λ°μ΄ν°λ λ°©λνκ³ μ΄μ§μ μ΄μ§λ§, AI μμ€ν
μ νμν λ¬Έμ μμ€μ λ©νλ°μ΄ν°κ° λΆμ‘±νμ¬ κΈ°μ‘΄ RAG λ°©μμΌλ‘λ μκ³μ΄ μΆλ‘ λ° λ¬Έμ κ° μμ‘΄μ± ν΄κ²°μ νκ³κ° μμ΅λλ€. μ΄λ₯Ό ν΄κ²°νκΈ° μν΄ University Medicine Essenμ μ¨νλ λ―Έμ€ κΈ°λ°μ μμ΄μ νΈν μμ μ 보 μΆμΆ(ACIE) νμ΄νλΌμΈμ ꡬμΆνμ΅λλ€. μ΄ μμ€ν
μ μ 체 νμ λ§₯λ½μ μΆλ‘ νλ©° λͺ¨λ λ΅λ³μ κ·Όκ±°κ° λλ μμ€ κ΅¬μ μ μ 곡ν©λλ€. λ¦Όν¬λ§ λ μ§μ€νΈλ¦¬ μ°κ΅¬λ₯Ό ν΅ν΄ μμμκ° μΆμΆλ κ°μ κ²μ¦ν κ²°κ³Ό, 7,326건μ νλ¨ μ€ 96.5%μ λμ μμ©λ₯ μ κΈ°λ‘νμ΅λλ€. μ°κ΅¬λ₯Ό ν΅ν΄ λ©νλ°μ΄ν° κ³΅λ°±μ΄ μν€ν
μ² μ€κ³μ λ―ΈμΉλ μν₯κ³Ό μμ΄μ νΈ κΈ°λ° RAGμ ν¨μ©μ±μ μ
μ¦νμ΅λλ€.
π μ£Όμ λ΄μ© (Key Points)
- 볡μ‘ν μκ³μ΄ λ° λ¬Έμ κ° μμ‘΄μ± ν΄κ²°μ μν μμ΄μ νΈ κΈ°λ° RAG μν€ν μ² μ€κ³
- μμμμ κ²μ¦μ μν κ·Όκ±° κΈ°λ°(Source-grounded) μΆμΆ λ°©μ λμ
- μ€μ μμ νκ²½(μ¨νλ λ―Έμ€)μμμ λκ·λͺ¨ λ°μ΄ν° μ²λ¦¬ λ° λμ μ νλ κ²μ¦
π‘ μ€λ¬΄μ κ°μΉ (Relevance)
λ¨μ κ²μμ λμ΄ λ³΅μ‘ν κ΄κ³ μΆλ‘ μ΄ νμν λλ©μΈμμ μμ΄μ νΈ μν¬νλ‘μ°κ° μ΄λ»κ² RAGμ νκ³λ₯Ό 극볡νλμ§ λ³΄μ¬μ€λλ€.
β μΆμ² μ‘μ (Actionable Items)
- λ©ν°-μ€ν μΆλ‘ μ΄ νμν 볡μ‘ν λ°μ΄ν°μ μ μμ΄μ νΈ μν¬νλ‘μ° μ μ© μ€ν
- μΆμΆλ κ²°κ³Όμ λν κ·Όκ±°(Citation) λ§€ν λ‘μ§ κ΅¬ν λ° κ²μ¦
- λ°μ΄ν° κ°μ μκ°μ μμ(Temporal reasoning)λ₯Ό μ²λ¦¬νλ ν둬ννΈ μμ§λμ΄λ§ ν μ€νΈ