← imai 홈imai · 산업안전 인지게이트
산업안전 · 이상탐지 · 쓰러짐

쓰러짐 인지 게이트 — VLM 맥락 오탐 기각

검출기가 "쓰러짐" 후보를 올리면, VLM 2차 게이트가 정상 작업/생활 자세(앉음·굽힘·눕기·웅크림)를 맥락으로 기각하고 실제 쓰러짐만 남긴다. 공개 낙상 벤치(URFD)로 게이트 메커니즘을 정직하게 실측.
정직 고지 — 이 수치를 어떻게 읽어야 하나
데이터: URFD(공개 학술, 실험실/가정). 정상 자세가 대부분 "직립"이라 분리가 자명하다 — 정상 크롭 p_normal 중앙값 ≈ 1.0. 즉 아래 오탐 기각률은 이 쉬운 도메인의 "상한(ceiling)"이지 산업 CCTV 난이도를 대변하지 않는다. 이 리포트의 주장은 딱 두 가지: ①게이트 메커니즘이 작동하고(정확한 한국어 근거로 자세 판별), ②쉬운 데이터에서조차 쓰러짐을 일부 놓친다(아래 04). 실제 산업 수치는 파일럿 때 고객 CCTV로 실측한다(CrackSeg9k zero-shot 정직 노출과 동일).
게이트는 zero-shot(안전 도메인 학습 0). 단일 프레임은 "부동"을 못 보므로 자세 그럴듯함으로 판별. 표본 n = 쓰러짐 153 · 정상 300 크롭(시퀀스 내 상관 有).

01실증된 것 — 메커니즘 · 설명가능성

85.0%
쓰러짐 recall (하드판정)
= 실제 쓰러짐을 "쓰러짐"으로
90.2%
recall 보존 @ p≥0.6
(soft 다이얼 상단)
100.0% ⚠상한
정상자세 오탐 기각
실험실=직립 자명, 산업 난이도 아님

핵심 실증은 % 가 아니라 게이트가 자세를 맥락으로 판별하고 한국어 근거를 단다는 것(03 샘플). 오탐 기각 100%는 URFD 정상이 대부분 직립이라 나온 상한이므로 세일즈 수치로 쓰지 않는다.

02정직한 한계 — 쉬운 데이터에서도 놓친 쓰러짐

하드판정에서 실제 쓰러짐 153건 중 23건(15.0%)을 "정상"으로 미탐. 그것도 게이트가 "바닥에 있으나 작업 중인 자세로 보인다"고 판단한 경우 — 바로 산업현장의 어려운 케이스다.

시계열 몽타주 게이트 — 미탐 저감 실험

단일 프레임시계열 몽타주
쓰러짐 recall(하드)85.0%88.2% (+3.3pp)
미탐(놓친 쓰러짐)23건 (15.0%)18건 (11.8%)
soft recall @p0.994.1%96.7%
정상자세 오탐 기각100.0%100.0% (상한)

직전 여러프레임을 가로로 이어 붙여 "기립→전도" 움직임을 게이트에 제공. 가설대로 미탐이 23→18건(22% 상대 감소)으로 줄었다. 단, 여전히 11.8%는 놓친다 — 시계열이 돕지만 완전 해결은 아니며(정직), 도메인 적응·검출기 개선이 추가로 필요.

그래서 자율 경보가 아니라 점검자 보조·2차 확인이고, 다이얼은 recall 보존 우선으로 기본 설정한다(미탐 배상 리스크). 남은 미탐은 도메인 적응·검출기 개선으로 이어서 줄인다.

03운영점 다이얼 — 오탐 기각 ↔ 쓰러짐 recall

02550751000255075100p0.3p0.4p0.5p0.6p0.7p0.8p0.9오탐 기각률 FP_reduction (%)쓰러짐 recall 보존 (%)
p_normal 임계오탐 기각recall 보존
0.3100.0%78.4%
0.4100.0%82.3%
0.5100.0%83.7%
0.6100.0%90.2%
0.7100.0%93.5%
0.8100.0%94.1%
0.9100.0%94.1%

임계를 올릴수록 확신 높은 것만 기각 → recall 보존↑·오탐 기각↓. 현장 SLA로 계약 가능한 운영점을 이 곡선에서 선택.

04게이트 판정 샘플 — 한국어 근거

쓰러짐 — 유지(FALL)

fall crop
FALL · p_normal 0.00
사람이 바닥에 누워 있으며, 다리와 팔이 자연스럽게 펼쳐져 있고, 몸은 지면에 접촉하고 있습니다.
fall crop
FALL · p_normal 0.00
사람은 바닥에 누워 있으며, 몸은 평평하게 펼쳐져 있고, 다리와 팔은 자연스럽게 휘어져 있어 실제 추락 또는 붕괴 상황을 나타냅니다.
fall crop
FALL · p_normal 0.46
사람이 바닥에 누워 있으며, 팔과 다리가 자연스럽게 펼쳐져 있고, 몸이 바닥에 기대어 있어 실제 추락/붕괴 상황으로 보입니다.
fall crop
FALL · p_normal 0.50
사람이 바닥에 누워 있으며, 다리와 몸의 자세가 무의미하고 자연스러운 자세가 아닌 상태입니다.

정상 자세 — 오탐 기각(NORMAL)

normal crop
NORMAL · p_normal 1.00
사람은 서서 한 손을 휘두르고 있으며, 바닥에 누워있는 것이 아니라 정상적인 직립 자세를 취하고 있습니다.
normal crop
NORMAL · p_normal 1.00
사람은 서서 손에 휴대폰을 들고 있으며, 바닥에 누워있는 것이 아니라 정상적인 직립 자세를 취하고 있습니다.
normal crop
NORMAL · p_normal 1.00
사람은 서서 한 손에 빛나는 물체를 들고 있으며, 바닥에 누워 있거나 몸이 뻗어 있는 상태가 아니므로 실제 추락이나 붕괴 상황은 아닙니다.
normal crop
NORMAL · p_normal 1.00
사람은 바닥에 누워있지 않고, 몸을 앞으로 숙인 자세로 서 있으며, 손은 휴대폰을 들고 있는 정상적인 작업 자세입니다.

각 크롭에 한국어 근거 문장이 붙는다(온프렘·설명가능). 이것이 "왜 기각했는가"를 점검자에게 제시하는 차별점.

05방법

파이프라인URFD 프레임 → COCO 사람검출 크롭 → VLM 안전 게이트(Cosmos-Reason2-8B, 온프렘) → p_normal 다이얼
라벨쓰러짐=URFD 낙상 시퀀스 중 "바닥(fallen)" 프레임 · 정상=ADL 시퀀스(걷기·앉기·물건줍기·무릎꿇기) + 기립 프레임
분할시퀀스 단위 clip-disjoint(프레임 누수 방지). 게이트는 zero-shot이라 학습셋 미사용
한계①단일 프레임=부동 미관측(시계열 seq 변형은 후속) ②실험실/가정 도메인(산업 CCTV 아님) ③쓰러짐 표본 153 — 절대수치 CI 넓음, 다이얼 트렌드가 핵심