07 · EVIDENCE → RECOMMENDATION → APPROVAL

07. AI 판단 시나리오와
Human Gate 설계

온톨로지 7요소로 구조화된 현장 지식을 바탕으로 AI가 무엇을 판단하고, 어떤 근거로 추천하며, 어떤 경우 사람이 반드시 검토·승인해야 하는지를 설계하는 실전 가이드입니다.

1. AI 판단 시나리오와 Human Gate의 정의

AI 판단 시나리오는 AI가 현장의 데이터와 Evidence를 바탕으로 상황을 해석하고, 판단 결과와 다음 행동을 추천하는 구조입니다. YABOAZ에서 AI는 조직의 최종 책임자를 대체하지 않고 판단을 보조합니다.

분류·감지상황과 대상을 유형화하고 이상·위험 신호를 찾습니다.
비교·추론기준·현재 상태·과거 사례를 연결해 가능성을 판단합니다.
추천·우선순위다음 행동과 처리 순서를 제안합니다.
요약·경고근거와 불확실성을 설명하고 위험을 알립니다.
AI는 제안하고, 사람은 승인하며, 시스템은 실행하고, 결과는 기록한다.
Evidence → AI Recommendation → Human Review → Approval Gate → Action → Execution Record
AI Human Gate Architecture page 1
AI Human Gate Architecture page 2

2. 07단계의 위치와 입력·산출물

01 온보딩 → 02 Evidence → 03 2A4 → 04 Discovery → 05 인터뷰 → 06 온톨로지 → 07 AI 판단 → 08 Agent → 09 워크플로 → 10 UI·데이터 → 11 MVP → 12 Bootcamp → 13 자산화

입력 자료

입력활용
문제정의서·KPIAI가 해결할 판단 문제와 성과 기준을 확인합니다.
Evidence·Discovery·인터뷰판단 근거, 실제 병목, 사람의 기준과 예외를 확인합니다.
온톨로지 7요소객체·상태·이벤트·규칙·행동을 판단 구조에 연결합니다.
데이터·보안·권한 정책사용 가능한 입력과 승인권한, 금지 범위를 결정합니다.

핵심 산출물

판단 질문 목록AI가 답해야 할 구체적 질문
시나리오 카드입력·기준·출력·근거·행동
Human Gate 표승인 조건·승인자·화면·로그
위험·금지 목록자동 실행·검토·승인·금지 구분
예외 처리표데이터 부족·충돌·오류·에스컬레이션
평가 기준정확도·수정률·승인률·오류율
승인 화면 요구사항근거·신뢰도·대안·행동 버튼
워크플로 연결표판단 결과와 실행 흐름
AI Human Gate Architecture page 3
AI Human Gate Architecture page 4

3. 설계 전체 흐름 10단계

01

판단 대상 선정

반복성, 시간 영향, 데이터 가능성, 기준화 가능성, 위험 통제, KPI 연결성을 기준으로 선정합니다.

02

판단 질문 작성

무엇을 판단하는지, 답변이 어떤 행동으로 이어지는지 질문형으로 작성합니다.

03

입력 데이터 정의

객체·속성·관계·상태·이벤트·규칙·이력과 출처·최신성·필수 여부를 정의합니다.

04

판단 기준과 근거 정의

규칙, 점수, 임계값, 이력, 전문가·정책 기준과 연결 Evidence를 지정합니다.

05

출력 결과 정의

판단 결과, 추천 행동, 근거, 신뢰도, 대안, 리스크, 승인자를 구조화합니다.

06

위험도 분류

자동 처리, 사람 검토, 승인 필수, AI 금지 영역으로 나눕니다.

07

Human Gate 조건 설계

승인자, 대체 승인자, 판단 화면, 제한 시간, 자동 전환과 감사 로그를 설계합니다.

08

금지 판단·예외 정의

법률·생명안전·의료·인사·금융 등 금지 영역과 데이터 부족·충돌·오류 처리 방식을 정합니다.

09

평가 기준 설계

정확도, 수정률, 승인률, 처리시간, 오류율, 채택률, KPI 개선도를 정합니다.

10

워크플로·MVP 연결

AI 추천이 Human Gate와 실행 행동, 결과 기록, MVP 범위로 이어지도록 연결합니다.

AI Human Gate Architecture page 5
AI Human Gate Architecture page 6

4. 판단 질문·입력·근거 설계

좋은 판단 질문

나쁜 질문좋은 질문행동 연결
화재 상황을 판단하라이 센서 알림은 실제 위험 가능성이 높은가?관리자 승인 요청
대피를 도와라현재 위치 기준 가장 안전한 대피 경로는 무엇인가?승인 후 안내 발송
고객을 분석하라이 문의는 긴급 처리 대상인가?우선순위 배정
업무를 자동화하라이 요청은 자동 승인 가능한가, 사람 승인이 필요한가?승인 경로 분기

입력 데이터 정의표

판단 질문입력 데이터출처품질 조건
위험도가 높은가센서값, 위치, 주변 센서, 오경보 이력센서 시스템·Evidence실시간·원본 추적
안전 경로는 무엇인가구역 상태, 경로 상태, 인원, 혼잡도공간 DB·현장 기록최신·관계 연결
승인이 필요한가위험도, 영향 범위, 업무 규칙온톨로지·정책검증·승인된 기준

판단 근거 정의

판단 결과위험도 높음
근거7층 복도 센서 2개가 60초 이내 감지
신뢰도86% — 근거 Evidence ID 표시
불확실성인접 CCTV 확인 전 오경보 가능성 존재
AI Human Gate Architecture page 7

5. 위험도 분류와 Human Gate

등급의미처리 방식예시
Level 1 · 낮음실패 영향이 낮고 되돌릴 수 있음AI 자동 추천·제한적 자동 실행문서 유형 분류, 검색·요약
Level 2 · 중간업무 영향이 있으나 검토 가능사람 검토 후 실행담당자 추천, 우선순위 초안
Level 3 · 높음안전·금전·권리에 영향Human Gate 승인 필수대피 안내 발송, 경로 차단
Level 4 · 금지AI 단독 판단이 허용되지 않음AI 최종 판단·자동 실행 금지생명안전 최종결정, 의료진단

Human Gate 설계표

AI 추천승인 조건승인자승인 화면 정보승인 후 행동
대피 안내 발송위험도 높음안전관리자근거·경로·대상·대안알림 발송
경로 차단연기 감지·위험 구역 연결관리자차단 이유·대체 경로경로 제외·재추천
우선 알림 대상취약자 정보 사용안전담당자위치·위험도·대상 근거개별 안내
승인 화면에는 AI 추천, Evidence ID, 판단 규칙, 신뢰도, 대안, 위험, 승인·반려·수정·보류 버튼과 승인 사유를 함께 표시합니다.
AI Human Gate Architecture page 8
AI Human Gate Architecture page 9

6. 금지 판단과 예외 처리

금지 판단

법률·책임법적 책임이나 위법 여부를 최종 확정하지 않습니다.
생명·안전사람의 생명과 안전에 대한 최종 결정을 단독 수행하지 않습니다.
의료·인사·금융진단·처방, 채용·징계, 대출·보험 지급을 최종 결정하지 않습니다.
차별·민감정보민감정보를 통한 차별적 판단과 개인정보 침해 행동을 금지합니다.

예외 처리표

예외조건처리기록
입력 데이터 부족필수 필드 누락판단 보류·사람 검토 요청누락 데이터 로그
데이터 충돌자료 간 값·규칙 불일치충돌 표시·승인자 판단충돌·결정 로그
신뢰도 낮음기준값 미만자동 실행 금지·승인 필수신뢰도 로그
승인자 부재제한 시간 초과대체 승인자·에스컬레이션호출·응답 기록
시스템 오류연동·모델 장애수동 절차로 전환장애·복구 기록
AI Human Gate Architecture page 10
AI Human Gate Architecture page 11

7. 평가 KPI와 워크플로·MVP 연결

판단 결과 평가

지표의미FireNavi 예시 목표
판단 정확도AI 판단과 실제 결과의 일치율85% 이상
사람 수정률승인자가 추천을 수정한 비율20% 이하
승인률AI 추천이 승인된 비율70% 이상
승인 소요시간추천부터 승인까지 걸린 시간3분 이내
실행 오류율잘못된 추천·발송·기록의 비율1% 이하
채택률·KPI 개선현장 사용과 실제 업무성과 변화반복 사용·대응시간 개선

워크플로 연결

이벤트 발생 → 상태 변화 → AI 판단 → 근거 표시 → Human Gate → 행동 실행 → 결과 기록 → KPI 측정
이벤트AI 추천Human Gate행동기록
센서 감지위험도·오경보 가능성고위험이면 관리자 확인위험구역 표시판단 로그
위험 확인안전 경로·우선 대상대피 안내 승인알림 발송승인·발송 로그
경로 차단대체 경로 추천수정·승인경로 업데이트경로 변경 로그

AI 판단 시나리오 카드

시나리오 IDAI-FN-001
판단 질문이 알림은 실제 위험 가능성이 높은가?
입력센서값·위치·주변 센서·과거 이력
기준복수 센서 60초 이내 감지
출력정상·주의·위험 / 신뢰도 / 근거
Human Gate위험도 높음 이상은 안전관리자 승인
예외데이터 부족·충돌 시 판단 보류
KPI정확도·승인시간·오경보 감소율
AI Human Gate Architecture page 12
AI Human Gate Architecture page 13

8. FireNavi 실습과 단계 완료 기준

실습 시나리오

화재 센서가 7층 복도에서 감지되고, 관제 화면에는 센서 ID만 표시됩니다. AI는 위험도와 안전 경로를 추천하고, 관리자는 근거를 검토한 뒤 대피 안내를 승인합니다.

판단 1실제 위험 가능성이 높은가?
판단 2현재 위치에서 안전한 경로는 무엇인가?
판단 3누구에게 먼저 알릴 것인가?
Gate대피 안내 발송 전 관리자 승인

실습 산출물

시나리오 카드판단 질문·입력·기준·출력·근거·행동·KPI
Human Gate 표위험도별 승인자·조건·대체 승인·화면
예외 처리표데이터 부족·충돌·낮은 신뢰도·장애
MVP 연결표실제로 구현할 판단 1~2개와 범위

07단계 완료 체크리스트

판단 대상과 질문이 구체적으로 정의됨
입력 데이터와 출처·품질 조건이 정해짐
판단 기준과 근거 Evidence가 연결됨
출력 결과와 추천 행동이 정의됨
위험도 4등급이 적용됨
Human Gate 승인자와 조건이 지정됨
금지 판단과 예외 처리가 문서화됨
승인 화면과 감사 로그 요구사항이 정의됨
판단 KPI와 검증 방법이 합의됨
워크플로와 MVP 범위에 연결됨
다음 단계 AI Agent 설계로 전달됨
고객 책임자가 시나리오를 승인함
07\uB2E8\uACC4의 최종 목적

온톨로지와 Evidence를 AI 판단 질문으로 전환하고, 신뢰도·근거·위험을 표시하며, Human Gate를 거쳐 안전한 행동과 KPI 검증으로 연결하는 것입니다.

AI Human Gate Architecture page 14