AI CCTV 목적을 원론부터 재점검한 결과. 셋 다 새 추론 모델 없이 지금 있는 자세추정·구역·트랙 이력만으로 구현했다. ■ 추락 (fall_from_height) 잡고 있던 것은 같은 높이의 '넘어짐'이었고, 사망 1위 유형인 '떨어짐'은 못 잡았다. GhostIncidentDetector 가 트랙이 이미 위험 자세일 때만 무장하므로 (_DANGEROUS), 발판에 서 있다가 떨어지는 사람은 소실 순간 STANDING 이라 아무것도 안 걸렸다. 판정의 핵심은 bbox 중심이 아니라 하단(y2)이다. 쭈그려 앉으면 중심은 내려가도 발은 그 자리이고, 추락은 발 밑선이 통째로 내려간다 — 중심으로 재면 쭈그려 앉아 작업하는 사람이 전부 추락이 된다. 원근 접근은 y2 도 내려가므로 높이 증가 가드로 따로 막는다. Track.frames 가 90프레임을 들고 있어 별도 버퍼가 없다. 발보는 두 갈래로 나뉘되 한 사고는 한 건이다: 프레임 안에서 넘어짐이 확정되면 유형을 승격하고, 화각 밖으로 사라지면 ghost 무장을 넓혀 그쪽으로 낸다. 심각도 CRITICAL — 척추·두부 손상 주의가 통보에 실리려면 넘어짐(HIGH)과 등급이 갈라져야 한다. 고소 구역은 rules_json 의 elevated 키로 붙어 스키마 변경이 없고, 구역이 없어도 하강 신호만으로 동작한다. ■ 동시 다발 쓰러짐 (multi_down) 같은 구역에서 짧은 시간에 둘이 쓰러진 것은 넘어짐 두 건이 아니라 질식· 가스·폭발이다. 이 기능의 본체는 감지가 아니라 통보 문구다 — 밀폐공간 사망자의 상당수가 구조하러 들어간 사람이므로, 링크를 열기 전에 메일 본문에서 "공기호흡기 없이 진입하지 마십시오"가 읽혀야 한다. Channels::guidance 로 유형별 안내를 붙였고 문구를 테스트로 고정했다(문구가 사라지면 기능이 사라진 것과 같다). 서버에 둔 이유: 가스는 카메라 화각을 존중하지 않아 노드를 넘는 판단이 필요하고, 현장 즉시 대응은 첫 쓰러짐의 경광등이 이미 확보한다. 오탐 방어의 핵심은 근접성 — 넓은 공장에서 2분 안의 무관한 넘어짐 두 건은 실제로 일어나므로 같은 구역이거나 좌표가 가까워야 묶는다. 한 사람이 두 번 넘어진 것은 한 명으로 센다. ■ 구역 프리셋 6종 + max_workers:0 수정 밀폐공간 감시에 필요한 것(제한구역+2인1조+체류상한)은 이미 전부 있었는데 화면이 "최소 인원을 넣으세요"라고만 물어 아무도 그렇게 쓰지 못했다. 안전관리자는 min_workers 가 아니라 밀폐공간을 생각한다. 그 과정에서 잠복 결함 하나: max_workers:0 이 falsy 로 걸러져 "아무도 있으면 안 되는 구역"(크레인 짐 아래·굴착기 선회 반경 = 깔림 사고의 전형)이 통째로 꺼져 있었다. 운영자가 저장해 놓고도 아무 일이 안 일어났다. 감지기·입력란 (min=1)·저장 직렬화(>0)·목록 표시 네 곳에서 막혀 있었다. ■ 검증 pytest 322 passed / phpunit 263 passed. 신규 테스트 30건. 이벤트 유형 2종 추가는 test_event_type_parity 가 강제하는 5곳(엣지 enum · EventValidator · schema CHECK · 프런트 라벨 5파일 · 필터 옵션) 전부 동기화했고 기존 설치용 마이그레이션을 추가했다. ■ Pi 번들 1.1.0 과 달리 이번에는 edge/ 가 바뀌었으므로 Pi 번들 재빌드가 필수다. 낡은 1.0.0 번들은 dist/ 에서 제거했다 — 두면 추락 감지가 빠진 노드가 그대로 납품된다. arm64 + 네트워크 빌드 머신에서 재빌드해야 Pi 납품이 가능하다. Co-Authored-By: Claude Opus 5 (1M context) <noreply@anthropic.com> Claude-Session: https://claude.ai/code/session_01EBjuR7DW6PNNMows4KnbYU
193 lines
11 KiB
Python
193 lines
11 KiB
Python
from dataclasses import dataclass
|
|
|
|
from edge.tracking import Track
|
|
from edge.events import Event, EventType, severity_for
|
|
from edge.detectors.fall import FallDetector
|
|
from edge.detectors.immobility import ImmobilityWatchdog
|
|
from edge.detectors.ghost import GhostIncidentDetector
|
|
from edge.detectors.zone import ZoneIntrusionDetector
|
|
from edge.detectors.occupancy import OccupancyWatchdog, OccupancyConfig
|
|
from edge.detectors.ergonomics import ErgoMonitor, ErgoConfig
|
|
from edge.detectors.height import DescentWatch, DescentConfig
|
|
|
|
|
|
@dataclass
|
|
class EngineConfig:
|
|
camera_id: str = "cam"
|
|
cooldown_s: float = 30.0
|
|
|
|
|
|
_OCCUPANCY_TYPES = {"lone_worker": EventType.LONE_WORKER,
|
|
"overcapacity": EventType.OVERCAPACITY,
|
|
"overstay": EventType.OVERSTAY}
|
|
|
|
|
|
class EventEngine:
|
|
def __init__(self, fall: FallDetector, immobility: ImmobilityWatchdog,
|
|
ghost: GhostIncidentDetector, zone: ZoneIntrusionDetector,
|
|
cfg: EngineConfig, occupancy: OccupancyWatchdog | None = None,
|
|
ergonomics: ErgoMonitor | None = None,
|
|
descent: DescentWatch | None = None):
|
|
self.fall = fall
|
|
self.immobility = immobility
|
|
self.ghost = ghost
|
|
self.zone = zone
|
|
# Keyword-with-default so the existing 5-arg constructors (runtime, tests) keep working.
|
|
self.occupancy = occupancy if occupancy is not None else OccupancyWatchdog(OccupancyConfig())
|
|
self.ergonomics = ergonomics if ergonomics is not None else ErgoMonitor(ErgoConfig())
|
|
self.descent = descent if descent is not None else DescentWatch(DescentConfig())
|
|
self.cfg = cfg
|
|
self._last_emit: dict[tuple, float] = {}
|
|
|
|
def _allow(self, key: tuple, now: float) -> bool:
|
|
last = self._last_emit.get(key)
|
|
if last is not None and now - last < self.cfg.cooldown_s:
|
|
return False
|
|
self._last_emit[key] = now
|
|
return True
|
|
|
|
def forget(self, track_id: int) -> None:
|
|
"""트랙 소실 시 하위 감지기 + dedup 캐시의 트랙별 상태를 정리 (24/7 장치 메모리 누수 방지)."""
|
|
self.fall.forget(track_id)
|
|
self.immobility.forget(track_id)
|
|
self.zone.forget(track_id)
|
|
self.descent.forget(track_id)
|
|
self.occupancy.forget(track_id)
|
|
self._last_emit = {k: v for k, v in self._last_emit.items()
|
|
if not (len(k) >= 2 and k[1] == track_id)}
|
|
|
|
def _mk(self, etype: EventType, occurred_at: float, track_id=None, zone_id=None,
|
|
metrics=None, spatial=None) -> Event:
|
|
m = metrics or {}
|
|
duration_s = m.get("immobility_s") or m.get("waited_s") or m.get("dwell_s") \
|
|
or m.get("alone_s") or 0.0
|
|
return Event(etype, severity_for(etype), self.cfg.camera_id, track_id,
|
|
zone_id, occurred_at, duration_s, m, spatial)
|
|
|
|
def process(self, active_tracks: list[Track], lost_tracks: list[Track],
|
|
now: float, frame_wh=None, wall_now: float | None = None) -> list[Event]:
|
|
# `now` is a MONOTONIC clock (never jumps): it drives every detector timer, hysteresis,
|
|
# and cooldown, so an NTP step cannot instantly satisfy immobile_s / expire all tracks /
|
|
# reset a genuine immobility countdown. `wall_now` is real wall-clock time, used ONLY to
|
|
# stamp Event.occurred_at (the server correlates and retains by wall time). Defaults to
|
|
# `now` so single-clock callers (unit tests) keep their existing occurred_at behavior.
|
|
occurred_at = wall_now if wall_now is not None else now
|
|
events: list[Event] = []
|
|
self.ghost.on_lost(lost_tracks, now)
|
|
|
|
for tr in active_tracks:
|
|
# frame_wh lets the zone detector normalize the foot to the dashboard's 0..1 zone
|
|
# space (see ZoneIntrusionDetector._foot). run_once supplies the live frame size.
|
|
zone_hits = self.zone.update(tr, now, frame_wh)
|
|
in_zone = bool(self.zone.active_zone_ids(tr.track_id))
|
|
# 발 좌표(0..1)를 트랙 이벤트 전부에 부착 — 서버 히트맵의 원료. 존 감지기가 이미
|
|
# 계산하는 좌표계를 그대로 재사용해 존 폴리곤과 같은 공간에 놓인다.
|
|
foot = self.zone._foot(tr, frame_wh)
|
|
|
|
# 하강 감시는 낙상 판정보다 먼저 — 같은 틱에 확정된 넘어짐을 승격할 수 있어야 한다.
|
|
descent = self.descent.update(tr, now)
|
|
elevated = self.zone.in_elevated_zone(tr.track_id)
|
|
if descent is not None or elevated:
|
|
# 위험 자세가 아니어도 ghost 를 무장시킨다. 발판에 서 있다가 화각 밖으로
|
|
# 떨어지는 사람은 소실 순간 STANDING 이라, 기존 무장 조건으로는 안 걸린다.
|
|
self.ghost.arm_height(tr.track_id, descent, elevated)
|
|
|
|
sig, meta = self.fall.update(tr, now)
|
|
state = self.fall._states.get(tr.track_id)
|
|
self.ghost.note_state(tr.track_id, state.name if state else "STANDING")
|
|
# 자세 부담 노출은 사고 상태가 아닌 트랙만 — 쓰러진 사람의 90° 몸통은
|
|
# 인체공학 노출이 아니라 이미 사고로 처리 중인 상태다.
|
|
if state is None or state.name == "STANDING":
|
|
self.ergonomics.update(tr, now)
|
|
if sig == "fall":
|
|
# 방금 떨어진 사람이 바닥에서 확정되면 그것은 넘어짐이 아니라 추락이다.
|
|
# 두 건으로 올리지 않고 유형만 올린다 — 한 번의 사고는 한 건이다.
|
|
falling = self.descent.descending(tr.track_id, now)
|
|
etype = EventType.FALL_FROM_HEIGHT if (falling or elevated) else EventType.FALL
|
|
if self._allow((etype, tr.track_id), now):
|
|
m = dict(meta)
|
|
d = self.descent.detail(tr.track_id)
|
|
if d:
|
|
m.update(d)
|
|
if elevated:
|
|
m["elevated_zone"] = True
|
|
events.append(self._mk(etype, occurred_at, tr.track_id,
|
|
metrics=m, spatial=foot))
|
|
elif sig == "no_motion" and self._allow((EventType.NO_MOTION, tr.track_id), now):
|
|
events.append(self._mk(EventType.NO_MOTION, occurred_at, tr.track_id,
|
|
metrics=meta, spatial=foot))
|
|
elif sig == "near_fall" and self._allow((EventType.NEAR_FALL, tr.track_id), now):
|
|
# 니어미스(FALLING까지 갔다 확정 전 회복): 알람용이 아니라 히트맵/통계 재료.
|
|
events.append(self._mk(EventType.NEAR_FALL, occurred_at, tr.track_id,
|
|
metrics=meta, spatial=foot))
|
|
|
|
fired, imeta = self.immobility.update(tr, now, in_danger_zone=in_zone)
|
|
if fired and self._allow((EventType.IMMOBILITY, tr.track_id), now):
|
|
events.append(self._mk(EventType.IMMOBILITY, occurred_at, tr.track_id,
|
|
metrics=imeta, spatial=foot))
|
|
|
|
for hit in zone_hits:
|
|
# 협착(pinch) is the highest-danger zone (machinery entrapment) and must emit
|
|
# PINCH/HIGH — the old `restricted else WARNING` silently downgraded it. The
|
|
# dashboard offers exactly these three levels (see zones.php).
|
|
etype = {"pinch": EventType.PINCH,
|
|
"restricted": EventType.ZONE_RESTRICTED}.get(
|
|
hit["level"], EventType.ZONE_WARNING)
|
|
if self._allow((etype, tr.track_id, hit["zone_id"]), now):
|
|
events.append(self._mk(etype, occurred_at, tr.track_id,
|
|
zone_id=hit["zone_id"], spatial=foot))
|
|
|
|
# 존 규칙(2인 1조 · 정원 · 체류): 위 per-track 루프에서 zone.update가 갱신한 멤버십을
|
|
# 존별 인원으로 뒤집어 감시자에 넘긴다. stale 트랙은 run_once가 이미 걸러냈으므로
|
|
# 여기 인원수는 이번 틱에 실제로 검출된 사람만 센다.
|
|
zone_tracks: dict[str, set[int]] = {}
|
|
for tr in active_tracks:
|
|
for zid in self.zone.active_zone_ids(tr.track_id):
|
|
zone_tracks.setdefault(zid, set()).add(tr.track_id)
|
|
for o in self.occupancy.update(self.zone.zones, zone_tracks, now):
|
|
etype = _OCCUPANCY_TYPES[o["kind"]]
|
|
# 쿨다운 키에 zone_id 포함: 존 A의 위반이 존 B의 발보를 막지 않는다. track_id가
|
|
# None인 존 단위 이벤트의 키는 forget()이 지우지 못하지만, 존 수에 비례하는
|
|
# 소량이라 누수로 보지 않는다 (ghost와 달리 키 공간이 유한).
|
|
if self._allow((etype, o["track_id"], o["zone_id"]), now):
|
|
events.append(self._mk(etype, occurred_at, track_id=o["track_id"],
|
|
zone_id=o["zone_id"], metrics=o["metrics"]))
|
|
|
|
# 자세 부담 주기 리포트 — 간격이 자체 게이트라 쿨다운(_allow)을 타지 않는다.
|
|
# 카메라 단위 익명 합계: track_id·spatial 없음 (개인 좌표를 남기지 않는다).
|
|
ergo = self.ergonomics.report(now)
|
|
if ergo is not None:
|
|
events.append(self._mk(EventType.ERGO_REPORT, occurred_at, metrics=ergo))
|
|
|
|
for g in self.ghost.update(active_tracks, now):
|
|
# No _allow cooldown for GHOST: ghost.update pops each incident from its candidates as it
|
|
# emits, and track ids are never reused, so a given track fires GHOST at most once ever.
|
|
# Routing it through _allow would only insert a permanent (GHOST, track_id) dedup key for
|
|
# a track that was already forgotten reappear_s ago — a slow 24/7 memory leak that
|
|
# forget() can never reclaim (the track never appears in lost_tracks again).
|
|
# Ghost's loss point is camera-native pixels (bbox centre at loss time). Normalize to
|
|
# the same 0..1 space every other event's spatial uses so the heatmap can overlay them;
|
|
# frame_wh=None (unit tests) keeps raw coords, matching the zone detector's convention.
|
|
gs = g["spatial"]
|
|
if frame_wh and gs is not None:
|
|
w, h = frame_wh
|
|
if w > 0 and h > 0:
|
|
gs = (gs[0] / w, gs[1] / h)
|
|
gmeta = {"last_state": g["last_state"], "waited_s": g["waited_s"]}
|
|
# 추락 후보로 무장돼 있었으면 '위험 상태 소실'이 아니라 '추락'이다. 화각 밖으로
|
|
# 떨어진 사람에게는 이쪽이 유일한 발보 경로이므로 유형이 정확해야 한다.
|
|
if g.get("height_fall"):
|
|
for k in ("drop_ratio", "drop_s", "from_y2", "to_y2", "armed_by", "elevated_zone"):
|
|
if k in g:
|
|
gmeta[k] = g[k]
|
|
gmeta["exited_frame"] = True
|
|
etype = EventType.FALL_FROM_HEIGHT
|
|
else:
|
|
etype = EventType.GHOST
|
|
events.append(self._mk(etype, occurred_at, track_id=g["track_id"],
|
|
spatial=gs, metrics=gmeta))
|
|
|
|
# ghost.on_lost already consumed lost tracks' state above, so forgetting here is safe.
|
|
for tr in lost_tracks:
|
|
self.forget(tr.track_id)
|
|
return events
|