Reinforcing clinical decision support through multi-agent systems and ethical ai governance

์ €์ž: Alejandro Barredo Arrieta, Natalia Dรญaz-Rodrรญguez, Javier Del Ser, Adrien Bennetot, Siham Tabik, Alberto Barbado, Salvador Garcรญa, Sergio Gil-Lรณpez, Daniel Molina, Richard Benjamins, Raja Chatila, Francisco Herrera | ๋‚ ์งœ: 2025 | DOI: N/A 📄 PDF


Essence

๋ณธ ๋…ผ๋ฌธ์€ ์œค๋ฆฌ์  AI ๊ฑฐ๋ฒ„๋„Œ์Šค(Ethical AI Governance)๋ฅผ ๊ธฐ๋ฐ˜์œผ๋กœ ํ•œ ๋‹ค์ค‘ ์—์ด์ „ํŠธ ์‹œ์Šคํ…œ(Multi-Agent System, MAS)์„ ์ž„์ƒ ์˜์‚ฌ๊ฒฐ์ • ์ง€์› ์‹œ์Šคํ…œ(CDSS)์— ํ†ตํ•ฉํ•˜์—ฌ, ICU ํ™˜๊ฒฝ์—์„œ ํ™˜์ž ์‚ฌ๋ง๋ฅ  ์˜ˆ์ธก ๋ฐ ์ž…์› ๊ธฐ๊ฐ„ ์˜ˆ์ธก์˜ ์ •ํ™•๋„์™€ ํˆฌ๋ช…์„ฑ์„ ๋™์‹œ์— ํ–ฅ์ƒ์‹œํ‚ค๋Š” ๋ฐฉ๋ฒ•์„ ์ œ์‹œํ•œ๋‹ค.

Motivation

Achievement

  1. ์˜ˆ์ธก ์ •ํ™•๋„ ๊ฐœ์„ :
    • ํ™˜์ž ์‚ฌ๋ง๋ฅ  ์˜ˆ์ธก์—์„œ MAS๊ฐ€ 59% ์ •ํ™•๋„๋กœ SAS์˜ 56%๋ฅผ ์ƒํšŒ
    • ์ž…์› ๊ธฐ๊ฐ„(LOS) ํ‰๊ท  ์˜ค์ฐจ์—์„œ MAS๋Š” 4.37์ผ๋กœ SAS์˜ 5.82์ผ๋ณด๋‹ค ๊ฐœ์„ 
  2. ํˆฌ๋ช…์„ฑ ํ‰๊ฐ€:
    • SAS์˜ ํˆฌ๋ช…์„ฑ ์ ์ˆ˜(86.21)๊ฐ€ MAS(85.5)๋ณด๋‹ค ์•ฝ๊ฐ„ ๋†’์œผ๋‚˜, MAS๋Š” ํ”„๋กœ์„ธ์Šค ํˆฌ๋ช…์„ฑ๊ณผ ์‹ ๋ขฐ์„ฑ ์ธก๋ฉด์—์„œ ๊ฐœ์„ 
    • ์‹ ๋ขฐํ•  ์ˆ˜ ์žˆ๋Š” AI ์ง€์› ์˜์‚ฌ๊ฒฐ์ • ๊ธฐ๋ฐ˜ ๊ฐ•ํ™”

How

Figure 1

MAS ์„ค๊ณ„์˜ ๊ตฌ์„ฑ: ์ „๋ฌธํ™”๋œ ์—์ด์ „ํŠธ๋“ค์ด ๊ฐ๊ฐ์˜ ์ฒ˜๋ฆฌ ๊ณผ์ •์„ ๋‹ด๋‹นํ•˜๋Š” ๊ตฌ์กฐ

Originality

Limitation & Further Study

Evaluation

์ดํ‰: ๋ณธ ๋…ผ๋ฌธ์€ ์œค๋ฆฌ AI ์›์น™์„ ๊ธฐ๋ฐ˜์œผ๋กœ ICU ์ž„์ƒ์˜์‚ฌ๊ฒฐ์ •์— ๋‹ค์ค‘ ์—์ด์ „ํŠธ ์‹œ์Šคํ…œ์„ ์ฐฝ์˜์ ์œผ๋กœ ์ ์šฉํ–ˆ์œผ๋‚˜, ์‹คํ—˜์  ๊ฒ€์ฆ์˜ ๊ทœ๋ชจ๊ฐ€ ์ œํ•œ์ ์ด๊ณ  ๊ธฐ์ˆ ์  ์„ธ๋ถ€ ์‚ฌํ•ญ์˜ ์„ค๋ช…์ด ๋ฏธํกํ•˜์—ฌ ์‹ค์ œ ์ž„์ƒ ๋„์ž… ์ „ ์ถ”๊ฐ€ ์—ฐ๊ตฌ๊ฐ€ ํ•„์š”ํ•˜๋‹ค.

๊ฐ™์ด ๋ณด๋ฉด ์ข‹์€ ๋…ผ๋ฌธ

๊ธฐ๋ฐ˜ ์—ฐ๊ตฌ
191์˜ ์ธ๊ณผํ•™์Šต(Causal Learning)์„ ์ž„์ƒ ์˜ˆ์ธก๊ณผ ์˜์‚ฌ๊ฒฐ์ • ์ง€์› ์‹œ์Šคํ…œ์— ๋ฐ˜์˜ํ•  ๋•Œ, ํˆฌ๋ช…์„ฑ๊ณผ ํŽธํ–ฅ ๊ด€๋ฆฌ ๋“ฑ 663 ๋…ผ๋ฌธ์—์„œ ์ค‘์‹œํ•˜๋Š” SRAI(Social Responsibility in AI) ๋ฌธ์ œ๋ฅผ ๊ตฌ์กฐ์ ์œผ๋กœ ๊ณ ์ฐฐํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
๊ธฐ๋ฐ˜ ์—ฐ๊ตฌ
058๋ฒˆ ๋…ผ๋ฌธ์€ ์˜๋ฃŒ ํ™˜๊ฒฝ ๋‚ด multi-agent ์‹œ์Šคํ…œ์˜ ์‹œ๋ฎฌ๋ ˆ์ด์…˜ ํ”„๋ ˆ์ž„์›Œํฌ๋ฅผ ์ œ์•ˆํ•˜์—ฌ 663๋ฒˆ ๋…ผ๋ฌธ์ด ์‹ค์ œ ์˜๋ฃŒยท์œค๋ฆฌ ๊ฑฐ๋ฒ„๋„Œ์Šค์— multi-agent ์ ์šฉ ์‹œ ์ฐธ๊ณ ๊ฐ€ ๋œ๋‹ค.
๊ธฐ๋ฐ˜ ์—ฐ๊ตฌ
168์€ ๋ฐ”์ด์˜ค๋ฉ”๋””์ปฌ ๋ถ„์•ผ์—์„œ ๋ฒ”์šฉ AI ์˜์‚ฌ๊ฒฐ์ • ์—์ด์ „ํŠธ๋ฅผ ๊ตฌ์ถ•ํ•˜๋Š” ๋ฐฉ๋ฒ•๋ก ์  ๋ฐฐ๊ฒฝ์„ ์ œ์‹œํ•˜์—ฌ, 663์˜ ์ž„์ƒ ์˜์‚ฌ๊ฒฐ์ •ํ˜• MAS ์‹œ์Šคํ…œ์— ์ด๋ก ์  ๊ธฐ์ดˆ๋ฅผ ์ œ๊ณตํ•œ๋‹ค.
๋‹ค๋ฅธ ์ ‘๊ทผ
529๋Š” ๋ฐ”์ด์˜ค ๋ถ„์•ผ Zero-shot ์ง„๋‹จ ๋ฐ ๋ถ„์„์— LLM ์—์ด์ „ํŠธ ํ˜‘์—…(multi-agent)์„ ์ ์šฉํ•˜์—ฌ, 663์˜ ์˜๋ฃŒ ํ˜„์žฅ(MAS+CDSS) ์‚ฌ๋ก€์™€ ์ง์ ‘์ ์œผ๋กœ ๋น„๊ตํ•  ๋งŒํ•œ ์ž„์ƒ AI ์ ์šฉ ์—ฐ๊ตฌ์ž…๋‹ˆ๋‹ค.
๋‹ค๋ฅธ ์ ‘๊ทผ
634๋ฒˆ ๋…ผ๋ฌธ์€ ๋‹จ๋ฐฑ์งˆ ๋ถ„์•ผ์—์„œ ๋ณต์žกํ•œ ๋‹ค์ค‘ ์—์ด์ „ํŠธ ์กฐ์œจ์„ ํ†ตํ•ด ์‹ ๊ทœ ์„ค๊ณ„ ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•œ ์‚ฌ๋ก€๋กœ, 663๋ฒˆ์˜ ์ž„์ƒ CDSS ๋งฅ๋ฝ์— ์ ์šฉ ๊ฐ€๋Šฅํ•œ ๋Œ€์•ˆ ๊ธฐ์ˆ  ์‚ฌ๋ก€์ด๋‹ค.
๋‹ค๋ฅธ ์ ‘๊ทผ
์˜๋ฃŒ AI ์—์ด์ „ํŠธ์˜ ์ž„์ƒ ์‘์šฉ๊ณผ ๋„์ „๊ณผ์ œ๋ฅผ ๋ถ„์„ํ•˜๋Š” ๊ด€๋ จ ์—ฐ๊ตฌ์ด๋‹ค.
๋‹ค๋ฅธ ์ ‘๊ทผ
Reinforcing clinical decision support ๋…ผ๋ฌธ์€ ์˜๋ฃŒ ๋ถ„์•ผ์—์„œ ๋‹ค์ค‘ ์—์ด์ „ํŠธ ๋ฐ LLM ๊ธฐ๋ฐ˜ ์ž๋™ํ™” ์‹œ์Šคํ…œ์„ ์‹คํ—˜ํ•˜์—ฌ ์‹ ๊ฒฝ๊ณผํ•™ ์—ฐ๊ตฌ์—์„œ์˜ ํ™œ์šฉ๊ณผ ๋น„๊ต๊ฐ€ ๊ฐ€๋Šฅํ•˜๋‹ค.
ํ›„์† ์—ฐ๊ตฌ
๋‹ค์ค‘ ์—์ด์ „ํŠธ ์‹œ์Šคํ…œ์„ ๋„์ž…ํ•˜์—ฌ ์ž„์ƒ์  ์˜์‚ฌ๊ฒฐ์ • ์ง€์›์„ ๊ฐ•ํ™”ํ•จ์œผ๋กœ์จ ํ˜‘๋ ฅํ˜• LLM ํ”„๋ ˆ์ž„์›Œํฌ๋ฅผ ๋”์šฑ ํ™•์žฅํ•ฉ๋‹ˆ๋‹ค.
ํ›„์† ์—ฐ๊ตฌ
Reinforcing clinical decision support through multi-agent ์‹œ์Šคํ…œ ์—ญ์‹œ ์‹ค์ œ ์ „๋ฌธ๊ฐ€ ์ˆ˜์ค€์˜ ์˜์‚ฌ๊ฒฐ์ • ์ง€์›์— agentic LLM์„ ์ ์šฉํ•œ ์‚ฌ๋ก€๋กœ, Agent K์™€์˜ ํฌ๋กœ์Šค๋„๋ฉ”์ธ ํ™•์žฅ ๋…ผ์˜์— ์ ํ•ฉํ•ฉ๋‹ˆ๋‹ค.
ํ›„์† ์—ฐ๊ตฌ
663๋ฒˆ ๋…ผ๋ฌธ์€ ์ž„์ƒ ์˜์‚ฌ๊ฒฐ์ •์—์„œ ๋ฉ€ํ‹ฐ์—์ด์ „ํŠธ LLM ์‹œ์Šคํ…œ์˜ ๊ฐ•ํ™” ํšจ๊ณผ๋ฅผ ๋ถ„์„ํ•˜์—ฌ, 511๋ฒˆ์˜ ์ธ๊ฐ„๋Œ€๋น„ LLM ์šฐ์›”์„ฑ ๋ถ„์„์„ ๋‹ค๋ฅธ ์˜์—ญ์œผ๋กœ ํ™•์žฅํ•ฉ๋‹ˆ๋‹ค.
ํ›„์† ์—ฐ๊ตฌ
225์˜ ์ž„์ƒ ๊ธฐ๋ก ๊ธฐ๋ฐ˜ LLM ์ง„๋‹จ ๋ชจ๋ธ ์—ฐ๊ตฌ๋Š” 663์˜ ๋‹ค์ค‘ ์—์ด์ „ํŠธํ˜• ์ž„์ƒ ์˜์‚ฌ๊ฒฐ์ • ์ง€์› ์‹œ์Šคํ…œ๊ณผ ๋น„๊ตํ•ด ์‹ค์ œ ๋ณ‘์› ํ™˜๊ฒฝ์—์„œ์˜ ์ ์šฉ ๋…ผ์˜๋ฅผ ํ™•์žฅํ•œ๋‹ค.
ํ›„์† ์—ฐ๊ตฌ
160 BioAgents ๋…ผ๋ฌธ์€ ๋ฐ์ดํ„ฐ ๊ธฐ๋ฐ˜ ๋‹ค์ค‘ ์—์ด์ „ํŠธ ์‹œ์Šคํ…œ ์„ค๊ณ„ ๋ฐ ์‹ค์ œ ๋ฐ”์ด์˜ค ๋ถ„์•ผ ์ ์šฉ ์‚ฌ๋ก€๋กœ, 663์—์„œ ์ž„์ƒ ์ง€์›์šฉ MAS๋ฅผ ๋” ๊ตฌ์ฒดํ™”ํ•  ์ˆ˜ ์žˆ๊ฒŒ ํ•ด์ค๋‹ˆ๋‹ค.
ํ›„์† ์—ฐ๊ตฌ
๊ณ ๋„ํ™”๋œ ๋‹ค์ค‘์—์ด์ „ํŠธ ์‹œ์Šคํ…œ์˜ ์œ„ํ—˜์„ฑ ๋ฐ ํ†ต์ œ ํ•„์š”์„ฑ ๋…ผ์˜๊ฐ€ ์ž„์ƒ ์˜์‚ฌ๊ฒฐ์ • ์ง€์›์˜ ์•ˆ์ „์„ฑ์„ ๋ณด์™„ํ•ฉ๋‹ˆ๋‹ค.
์‘์šฉ ์‚ฌ๋ก€
191์˜ ์ธ๊ณผํ•™์Šต ๊ธฐ๋ฐ˜ SRAI(Socially Responsible AI) ๋ฐฉ๋ฒ•๋ก ์„, 663์˜ ๋‹ค์ค‘์—์ด์ „ํŠธ ๊ธฐ๋ฐ˜ ์ž„์ƒ ์ธ๊ณต์ง€๋Šฅ ์˜์‚ฌ๊ฒฐ์ • ์‹œ์Šคํ…œ์— ์‹ค์ œ ์ ์šฉ ์‚ฌ๋ก€๋กœ ๋ณผ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
์‘์šฉ ์‚ฌ๋ก€
๋‹ค์ค‘์—์ด์ „ํŠธ ์‹œ์Šคํ…œ์„ ํ†ตํ•œ ์ž„์ƒ ์˜์‚ฌ๊ฒฐ์ • ์ง€์›์—์„œ์˜ ํ™œ์šฉ ์‚ฌ๋ก€๊ฐ€, ์ƒ๋ฌผ์ •๋ณดํ•™ ์ž๋™ํ™”์™€ ์ ‘๋ชฉ๋  ์ˆ˜ ์žˆ์Œ์„ ์‹œ์‚ฌํ•ฉ๋‹ˆ๋‹ค.
์‘์šฉ ์‚ฌ๋ก€
๋‹ค์ค‘ ์—์ด์ „ํŠธ์™€ RAG ๊ธฐ์ˆ ์„ ์ž„์ƒ ์˜์‚ฌ๊ฒฐ์ •์— ์ ์šฉํ•ด, LLM ๊ธฐ๋ฐ˜ ๊ณผํ•™์  ๊ฐ€์„ค ์ƒ์„ฑ์˜ ์‹ค์ œ ์˜๋ฃŒ ์ ์šฉ ๊ฐ€๋Šฅ์„ฑ์„ ๋ณด์—ฌ์ค€๋‹ค.
์‘์šฉ ์‚ฌ๋ก€
๊ฐ•ํ™”ํ•™์Šต ๊ธฐ๋ฐ˜ ์—์ด์ „ํŠธ์™€ ๋„๋ฉ”์ธ ์ง€์‹์„ ๊ฒฐํ•ฉํ•ด ์‹ค์ œ ๊ณผํ•™ ์‹คํ—˜ ๋ฐ ์›Œํฌํ”Œ๋กœ์šฐ ์ž๋™ํ™”์— ์‘์šฉํ•˜๋Š” ์‚ฌ๋ก€๋ฅผ ์ œ๊ณตํ•จ.
← ๋ชฉ๋ก์œผ๋กœ ๋Œ์•„๊ฐ€๊ธฐ

๐ŸŽง Audio Overview

์ด ๋…ผ๋ฌธ ๋ฆฌ๋ทฐ๋ฅผ ํŒŸ์บ์ŠคํŠธํ˜• ์˜ค๋””์˜ค๋กœ ์ƒ์„ฑํ•ฉ๋‹ˆ๋‹ค. (Gemini ยท ํ‚ค๋Š” ๋ธŒ๋ผ์šฐ์ €์—๋งŒ ์ €์žฅ ยท ์™„์„ฑ๋ณธ์€ ์ด๋ฉ”์ผ๋กœ๋„ ์ „์†ก)
โ–ธ ๊ณ ๊ธ‰: ๊ตฌ์„ฑ ๋ฐฉํ–ฅ(๋Œ€๋ณธ ์ž‘์„ฑ ์ง€์นจ) ์ง์ ‘ ์ˆ˜์ •