실가상 융합 전시공간 AI 에이전트 플랫폼을 개발하며
최근 AI 에이전트 기술은 단순 대화형 시스템을 넘어 실제 환경에서 능동적으로 행동하고 협업하며 목표를 달성하는 지능형 시스템으로 발전하고 있습니다.
저는 실·가상 융합 전시공간에서 관람객과 상호작용하는 AI 에이전트 플랫폼을 개발하기 위해 이 핵심 기술들을 직접 연구했고, 그 과정에서 얻은 최신 동향을 아래에 정리했습니다.
1. 🔧 LLM 기반 에이전트 아키텍처
현대 AI 에이전트는 단순히 응답을 생성하는LLM 기반 챗봇이 아니라,
계획(Plan)·추론(Reason)·행동(Action)·상태(State) 를 관리하는 구조화된 시스템입니다.
📐 기본 아키텍처 다이어그램 (Mermaid)

핵심 요소
- Planner: 사용자의 목적을 여러 단계의 plan으로 분해
- Reasoner: 현재 상태 + 계획을 기반으로 최적 행동 계산
- Executor: 실제 API 호출, 전시 콘텐츠 제어 수행
- State Manager: 사용자의 위치·의도·진행 상황 유지
연구 중 깨달은 점
전시공간은 정보가 실시간 변하므로 “LLM만으로는 불가능”.
LLM + 외부 상태 시스템 + 센서 데이터의 통합이 필수적임.
2. 🛠 도구(Tool) 사용 및 Function Calling
현대 에이전트는 도구를 사용하지 않으면 외부 세계를 조작할 수 없다고 해도 과언이 아닙니다.
특히 전시공간에서는 조명·스크린·AR 콘텐츠 제어까지 필요하기 때문에 필수 기술입니다.
🧩 Function Calling Process

주요 기술 요소
- OpenAI·Anthropic function calling
- Web API 호출, IoT 디바이스 제어
- 안전한 Sandbox 기반 실행
- 구조화된 JSON 스키마 기반의 행동 제어
연구 중 적용한 방식
전시 시스템은 위험한 장치 제어가 포함되므로
→ LLM → Tool Dispatcher → 안전 제어 → 장치 실행
의 계층 구조를 반드시 사용하여 안전성을 확보함.
3. 🤝 멀티 에이전트 시스템 & 협업 메커니즘
실가상 전시공간에는 다양한 역할의 에이전트가 필요합니다.
- 관람객 안내 에이전트
- 콘텐츠 설명 에이전트
- IoT 장치 제어 에이전트
- 이벤트 요약·데이터 분석 에이전트
👥 멀티 에이전트 협업 구조

최신 트렌드
- Swarm 기반 협업(분산 추론)
- Blackboard Architecture
- 역할(Role) 기반 메시지 패싱
- AutoGen / CrewAI 기반 협업 패턴
연구 중 깨달은 점
전시공간은 “동시성”이 중요합니다.
예: “관람객 접근 → 조명 조정 → 영상 재생 → 설명 시작”
이러한 흐름 때문에 멀티 에이전트 메시지 버스 기술이 필수적임.
4. 🧬 메모리 관리 & 컨텍스트 유지 기술
AI 에이전트의 품질을 결정하는 핵심 요소는 기억(Memory) 입니다.
메모리 계층 구조

각 계층 설명
- 단기 메모리(STM): 직전 대화 맥락
- 장기 메모리(LTM): 전시물 정보, 사용자 기록 → Vector DB 기반
- 에피소드 메모리(EM): 사용자 행동 패턴, 선호도 학습
- 절차적 메모리(PM): 규칙 기반 정책 저장
연구에서 얻은 결론
전시공간은 사용자 이동이 활발하고 환경 변화가 많기 때문에
→ 단순한 “LLM 대화 컨텍스트”는 한계
→ 벡터 기반 지식 + 세션 메모리 + 정책 기반 행동 규칙의 조합이 필수적임.
🎯 결론: 실가상 전시공간이 요구하는 차세대 AI 에이전트
실가상 융합 전시공간은 단순 대화형 AI가 아니라 ‘행동하는 지능 시스템’을 요구합니다.
핵심 요약
- LLM 단독으로는 부족 → 아키텍처 기반 에이전트 설계 필수
- 실제 장치 제어를 위해 → 도구(Function) 호출 필수
- 복합 시나리오를 위해 → 멀티 에이전트 협업 필요
- 지속적 사용자 경험을 위해 → 계층형 메모리 시스템 필수
앞으로 전시공간뿐 아니라 교육, 산업, 엔터테인먼트 분야에서도
이러한 LLM 기반 AI 에이전트 기술이 표준이 될 가능성이 매우 높습니다.
이 글은 2025년도 정부(과학기술정보통신부)의 재원으로 연구개발특구진흥재단의 지원을 받아 수행된 연구임
(RS-2025-25449136, 실가상 융합 전시공간 인터랙티브 서비스를 위한 AI 에이전트 플랫폼 기술 개발)
'기술 블로그' 카테고리의 다른 글
| ⚡ 실시간 AI 에이전트 기술 동향 (0) | 2025.11.18 |
|---|---|
| 🧠 RAG와 AI 에이전트 통합 기술 동향 (0) | 2025.11.18 |