AI 배송사진 검수 Phase 2 — 위험 건 자동 선별 · 기사 인지

로건 10/12 결정 · Phase 2 재기획 · 초안 2026-10-21
와이어프레임 주석
👤 denji
1. 현행 동작전수 검수 결과가 전체 리스트에 섞여 있고, 기사에게 가는 길이 없음 10/21 실측 · 내부 1,103 · 외부 271 · 확인 필요 77 · 3점 이하 약 270
denji로그아웃
2026-10-21 ▾전체 센터 ▾검수 단계 · 전체 ▾1적재 위치 · 전체 ▾엑셀새로고침
내부 적재 검수
전체 내부 적재 건 1,103
외부 적재 AI 검수
전체 외부 적재 건 271

전체 내부 적재 건

1,103건 · AI 확정 946 · 2차 일치 98 · 확인 필요 59 2
검수율94.6%
정합성 (10월)97.7% 3
사람 검수피터 · 77건
배송 완료업장센터 · 코스배송인원적재검수 단계최종 점수결과 전달 4
13:35민스(지방) 중부산 · B김OO(부산)내부AI 확정5어드민 CS 히스토리만
13:09조개킹(동부) 송파 · 천안박OO(송파)내부AI 확정3어드민 CS 히스토리만
12:58히즈보울(서부) 영등포 · H1이OO(영등포)내부2차 일치5어드민 CS 히스토리만
12:41정성카츠 서면점(지방) 중부산 · A김OO(부산)외부확인 필요——
12:30미스타교자 서초점(동부) 논현 · B2최OO(논현)내부AI 확정0어드민 CS 히스토리만
12:12그릭테이블(서부) 마포 · C1정OO(마포)내부AI 확정5어드민 CS 히스토리만
11:58잭슨피자 구의점(동부) 광진 · G한OO(광진)내부AI 확정3어드민 CS 히스토리만
11:40두지엠아라크렘(동부) 성동 · D2윤OO(성동)내부2차 일치5어드민 CS 히스토리만
… 1,095건 더 (3점 이하 · 비정상 사진 · 재발 업장이 전부 섞여 있음)
현행 : AI 1차(qwen) → 흔들린 건 2차(gemini) → 일치 시 어드민 CS 히스토리 자동 등록 · 갈린 건만 사람 검수 · 결과는 기사에게 전달되지 않음
2. 변경 요청검수 대시보드에 '위험 건' 그룹 추가 · 사람 검수 = 위험 건만 · 표본 재검수로 AI 정확도 측정 검수 서버 조회 데이터만으로 선별 가능 · 외부 시스템 연동 2종(재발 태그 · 스코어카드)
denji로그아웃
2026-10-21 ▾전체 센터 ▾검수 단계 · 전체 ▾적재 위치 · 전체 ▾엑셀새로고침
위험 건 자동 선별 5
오늘 위험 건 (중복 제거) 138
AI 1·2차 갈림 77
3점 이하 266
비정상 사진 69
등록 사진 부실 업장 41
재발 태그 업장 12
집중관리 기사 9
수취정보 변경 업장 15
표본 재검수 8
오늘 표본 30건 18 / 30
내부 적재 검수
전체 내부 적재 건 1,103
외부 적재 AI 검수
전체 외부 적재 건 271

오늘 위험 건

1,374건 중 138건 · 사유 7종 중복 제거
사람 검수 큐 · 상한 100 642 / 100
우선순위 상위 100 밖38건 · AI 확정
이번 주 AI 정확도 (표본)94.2%
기사 전달 (전일분)앱 확인 61% · 슬랙 발송 ✓
AI 갈림 773점 이하 266비정상 사진 69부실 등록 업장 41재발 태그 12집중관리 기사 9수취정보 변경 15
우선순위업장센터 · 코스배송인원적재위험 사유 7AI 1차 → 2차점수사람 검수기사 전달 9
1정성카츠 서면점(지방) 중부산 · A김OO(부산)외부AI 갈림 재발 태그 3점 이하사진 2 → 3—대기검수 후
2미스타교자 서초점(동부) 논현 · B2최OO(논현)내부비정상 사진 · 차량 집중관리 기사 0점0 · 2차 일치0완료 · 0점 확정앱 · 슬랙
3잭슨피자 구의점(동부) 광진 · G한OO(광진)내부시건 X · 정온 X 부실 등록 업장3 · AI 확정3완료 · 5점 수정앱 · 슬랙
4조개킹(동부) 송파 · 천안박OO(송파)내부요구사항 X · 시건 X3 · AI 확정3대기검수 후
5카페 모아 구리점(동부) 구리 · C서OO(구리)외부수취정보 변경 (10/19) AI 갈림정온 X → O—대기검수 후
6노계정 성수(동부) 성동 · D1오OO(성동)내부집중관리 기사5 · AI 확정5표본 전환앱
7깐깐 구의이스트폴점(동부) 광진 · F한OO(광진)내부부실 등록 업장 · 위치 식별 불가4 · AI 확정4상한 밖 · AI 확정앱
1고공중곡점(동부) 광진 · A한OO(광진)내부재발 태그 비정상 사진 · 상품만0 → 2 (갈림)—대기검수 후
표본 재검수 · AI 정확도 (자동 등록 건 중 무작위)
오늘 표본 30건 (내부 12 · 외부 18)
18 완료
이번 주 AI 정확도 94.2% · 필드별 : 사진 95 · 정온 97 · 요구 98 · 시건 96 · 주간 공표
자동 등록 건은 AI값 = 사람값으로 저장 → 현행 '정합성 97.7%'는 AI 정확도 아님 · 표본만 사람이 백지 재검수
위험 건 선별 규칙 10사유 7종 · 우선순위 = 사유 가중치 합
① 검수 서버 (즉시)AI 1·2차 갈림 +3 · 3점 이하 +2 · 비정상 사진 +2 · 부실 등록 업장 +1 · 수취정보 변경 7일 +1
+
② 외부 연동 (일 1회)재발 태그 업장 (PLD-1287) +3 · 집중관리 기사 (스코어카드) +2
→
③ 사람 검수 큐우선순위순 상한 100 · 초과분 = AI 확정 (표본 후보)
→
④ 기사 전달검수 확정 후 D+1 09:00 앱 · 슬랙
3. 변경 요청기사가 전일 사진 결과를 본인 화면에서 확인 · 소명 가능 · 센터장은 슬랙 묶음 앱 노출 = 개발 (앱 ↔ 검수 서버 조회 API) · 슬랙 = 11월 파일럿 (개발 없음)
A. 배송 탭 — 어제 결과 배너
배송
민스내부배송 완료
부산 동구 범일로 21 108동 상가 1층 · 13:35
정성카츠 서면점외부배송 완료
부산 부산진구 서면로 · 12:41
개미집 부산역점내부배송 완료
부산 동구 중앙대로 · 12:10
포옥쌀국수내부배송 중
부산 남구 수영로 · 예정 14:20
라포르포옹외부대기
부산 수영구 광안로 · 예정 14:50
B. 어제 사진 결과 목록
‹어제 사진 결과 · 10/20
본인 건만 · 전일분 · 2주 보관 16
사진 1
정성카츠 서면점외부2 / 5 12
냉장 상품이 냉장고 밖 바닥에 있음 · 문 닫힘 사진 없음
확인 필요소명 가능 · 10/22까지
사진 1
민스내부5 / 5
냉장고 적재 · 문 닫힘 확인 · 요청 위치 일치
정상
사진 2
개미집 부산역점내부5 / 5
테이블 위 적재 · 냉장고 문 닫힘 확인
정상
이번 주 평균 4.6 / 5 · 센터 평균 4.4 · 확인 필요 2건
C. 결과 상세 · 소명
‹정성카츠 서면점 · 10/20
배송 사진 1 · 12:41사진 (기사 촬영)
사진 정확도 (외부 0~3)2
정온 적재냉장 상품이 냉장고 밖 바닥 · 보냉팩 없음
X
요구사항 반영O
냉장고 문 닫힘 사진닫힌 문 사진 없음 · 1장 추가 촬영 필요
X
최종 점수2 / 5 13
다음 배송 시 : 냉장 상품 → 냉장고 적재 후 닫힌 문 1장
소명하기 14
소명 · 15자 이내
사장님 직접 전달냉장고 잠김외부 적재 요청직접 입력
사장님 직접 전달9 / 15
취소
보내기
D. 센터 슬랙 일일 알림 (파일럿)
# 중부산_센터
AI
씩씩봇 09:00
@here 10/20 배송 사진 결과 · 중부산 15
검수 187건 · 평균 4.5 / 5 · 확인 필요 6건 · 3점 이하 21건
기사별 내용은 스레드 · 상세는 나우히어로 배송 탭
씩씩봇 · @센터장
  • 김OO(부산) 41건 · 4.3 · 확인 필요 2 (정성카츠 서면점 2점 · 고공중곡점 0점)
  • 장OO(중부산) 38건 · 4.7 · 3점 이하 3
  • 서OO(중부산) 35건 · 4.8 · 3점 이하 1
  • 이OO(중부산/대구) 29건 · 4.1 · 확인 필요 1 · 집중관리
씩씩봇 · 반복 사유 TOP 3 : 냉장고 문 닫힘 사진 없음 9 · 냉장 상품 바닥 적재 6 · 차량 안 촬영 3
A → B → C 순서 · 소명 보내면 검수 '확인 필요' 큐로 재검수 · D는 개발 없이 검수 서버 조회로 11월 1센터 파일럿
4. 시나리오 시뮬레이션상황을 누르면 위험 선별 → 사람 검수 → 기사 화면 · 슬랙이 함께 바뀜 17규칙 번호 = 티켓 처리 기준
위험 건 패널 —
사람 검수 · 등록
기사 · 센터장
사진
——
—
—
‘와이어프레임 주석’ 토글로 핀·연결선·설명 표시 · 끄면 실제 화면만