pile·
AI / ML·교보DTS교보DTS·

LLM의 환각을 잠재울 지식의 지도, ‘온톨로지(Ontology)’

문제LLM 의 환각은 벡터 기반 RAG 의 의미 유사도만으로는 통제하기 어렵고, 다단계 추론과 명시적 관계가 필요한 도메인에서는 정확도가 떨어진다.
접근교보DTS 가 온톨로지(클래스/인스턴스/속성/관계로 도메인 지식을 명세)와 지식 그래프 개념을 정리. 핵심 지식은 온톨로지로 명시적 관계 추론, 동적/비정형 데이터는 RAG 로 벡터 검색하는 Graph RAG 결합. AWS 에선 Amazon Neptune(그래프 DB) + OpenSearch(벡터) + Bedrock(LLM) 으로 구현.
결과다단계 추론 정확도 + 비정형 데이터 대응 + 초기 구축 비용 사이의 트레이드오프를 Graph RAG 가 절충. 온톨로지 단독은 비용/유연성 한계, RAG 단독은 명시 추론 한계라는 점을 인식하고 하이브리드를 권장.
교보DTS
교보DTS 블로그
원문은 여기서 이어서 읽을 수 있어요
원문 읽기
읽음 (0)

이 글과 비슷한

  1. AI / ML·인프랩 (인프런)인프런 (인프랩)·

    학습 에이전트 — AI 두뇌 구축하기

    인프런이 강의 학습 에이전트를 구축하며 겪은 기술 스택 선정, 컨텍스트·도구 설계, LLM-as-a-Judge 품질 개선, 비용 최적화 전략을 다룬다. LLM SSE 스트리밍 처리를 위해 Spring MVC + Virtual Thread + Spring AI를 선택하고, 명시적 프롬프트 캐싱으로 입력 토큰을 90% 절감하는 과정까지 실전 경험이 담겨 있다.

    #ai-agent#llm#llm-as-a-judge+2
  2. AI / ML·vercel-blogVercel Blog·

    AI Gateway에서 실시간 음성 에이전트 구축하기

    Vercel AI Gateway가 음성·오디오 기능을 정식 지원한다. 실시간 대화 음성(Realtime Voice), 텍스트→음성(TTS), 음성→텍스트(STT) 세 가지를 기존 텍스트/이미지 모델과 동일한 라우팅·인증·모니터링 체계 위에서 사용할 수 있다. OpenAI gpt-realtime-2·Whisper와 xAI Grok 오디오 모델을 지원하며, AI SDK 7 베타로 제공된다.

    #llm-app#ai-sdk#realtime-voice+2
  3. AI / ML·dropbox-techDropbox Tech·

    DSPy로 AI 평가를 더 나은 응답으로 전환하기 — Dropbox Dash Chat 사례

    Dropbox가 Dash Chat 에이전트의 응답 품질을 높이기 위해 DSPy 최적화 프레임워크를 도입한 과정을 다룬다. 인간 레이블로 LLM 평가자(judge)를 보정하고, 보정된 judge로 에이전트의 시스템 프롬프트를 자동 최적화하는 두 단계 전략으로 불완전 답변 26% 감소와 토큰 사용 5.4% 절감을 달성했다.

    #ai-agent#llm-evaluation#dspy+2