Workspace IndexKnowledge Notes › Anomaly detection — the alert that fires on everything or nothing

#1176PoC

Anomaly detection — the alert that fires on everything or nothing

Anomaly detectors flag points that do not fit a learned normal, and the entire product is the threshold: too tight and it is noise, too loose and it misses the one event that mattered.

Not yet scoped.

Why

The PoC runs isolation-forest and statistical detectors on transaction data and reports precision/recall at several thresholds, because the ROC curve is the honest deliverable.

How it works

Not yet built.

Where it lands in Jayverse

  • Auditor: report precision/recall at multiple thresholds for any anomaly flag it raises. An Auditor alert on suspicious settlement or transaction activity is only useful with an ROC curve behind it, not a single silent threshold nobody chose deliberately.
  • Verex: run an isolation-forest pass over order and fill data before trusting manual fraud rules. Compare a statistical anomaly detector's flagged trades against Verex's existing rule-based checks and report where they disagree.
  • gitboard: surface the threshold, not just the alert. Any anomaly-based alert gitboard displays should show what threshold produced it, so a noisy or missed alert can be tuned instead of silently ignored.

Key expressions

Words and phrases from this page worth keeping, with the Korean meaning and the sentence they come from.

Expression뜻 · 쓰이는 자리
flag(이상 징후로) 표시하다, 짚어내다 · 시스템이 의심스러운 항목을 골라낼 때. "Anomaly detectors flag points"
fit a learned normal학습된 '정상' 패턴에 들어맞다 · 데이터가 모델이 배운 평범한 범위 안에 있을 때. "do not fit a learned normal"
the entire product is the threshold제품 전체가 결국 그 임계값 하나로 귀결된다 · 성패가 딱 하나의 기준값 설정에 달려 있을 때. "the entire product is the threshold"
miss (an event)(중요한 것을) 놓치다 · 탐지기가 정작 중요한 사건을 못 잡아낼 때. "it misses the one event that mattered"
the honest deliverable있는 그대로 보여주는 결과물 · 과장 없이 진짜 성능을 드러내는 산출물. "the ROC curve is the honest deliverable"
ROC수신자 조작 특성 곡선(Receiver Operating Characteristic curve) · 여러 임계값에서 정밀도-재현율 트레이드오프를 보여주는 평가 곡선. "the ROC curve is the honest deliverable"
isolation-forest아이솔레이션 포레스트(Isolation Forest) · 데이터를 무작위로 분할해 이상치를 빠르게 고립시켜 탐지하는 알고리즘. "runs isolation-forest and statistical detectors"

← All Knowledge Notes · Workspace Index · Top ↑

이상 탐지 — 전부에 울리거나 아무것에도 안 울리는 경보

이상 탐지기는 학습된 정상에 맞지 않는 점을 표시하며, 제품의 전부는 임계값입니다: 너무 좁으면 잡음, 너무 넓으면 정작 중요한 그 한 사건을 놓칩니다.

아직 범위 미정.

이 PoC는 거래 데이터에 격리 숲과 통계적 탐지기를 돌려 여러 임계값에서 정밀도/재현율을 보고합니다. ROC 곡선이 정직한 산출물이기 때문입니다.

동작 방식

아직 만들지 않음.

Jayverse에서의 위치

  • Auditor: 이상 신호를 띄울 때마다 여러 임계값에서의 정밀도/재현율을 함께 보고한다. 정산이나 거래 활동에 대한 Auditor 알림은 아무도 신중히 고르지 않은 단일 임계값이 아니라 ROC 곡선이 뒷받침해야 의미가 있다.
  • Verex: 수동 사기 규칙을 신뢰하기 전에 주문·체결 데이터에 isolation-forest를 돌려본다. 통계적 이상 탐지기가 표시한 거래를 Verex의 기존 규칙 기반 검사와 비교하고, 둘이 어디서 어긋나는지 보고한다.
  • gitboard: 알림뿐 아니라 임계값도 함께 보여준다. gitboard가 표시하는 이상 기반 알림마다 어떤 임계값에서 나왔는지 보여야 시끄럽거나 놓친 알림을 조용히 무시하는 대신 조정할 수 있다.

핵심 표현

이 페이지의 영어 본문에서 배울 만한 단어와 표현, 뜻과 나온 자리.

Expression뜻 · 쓰이는 자리
flag(이상 징후로) 표시하다, 짚어내다 · 시스템이 의심스러운 항목을 골라낼 때. "Anomaly detectors flag points"
fit a learned normal학습된 '정상' 패턴에 들어맞다 · 데이터가 모델이 배운 평범한 범위 안에 있을 때. "do not fit a learned normal"
the entire product is the threshold제품 전체가 결국 그 임계값 하나로 귀결된다 · 성패가 딱 하나의 기준값 설정에 달려 있을 때. "the entire product is the threshold"
miss (an event)(중요한 것을) 놓치다 · 탐지기가 정작 중요한 사건을 못 잡아낼 때. "it misses the one event that mattered"
the honest deliverable있는 그대로 보여주는 결과물 · 과장 없이 진짜 성능을 드러내는 산출물. "the ROC curve is the honest deliverable"
ROC수신자 조작 특성 곡선(Receiver Operating Characteristic curve) · 여러 임계값에서 정밀도-재현율 트레이드오프를 보여주는 평가 곡선. "the ROC curve is the honest deliverable"
isolation-forest아이솔레이션 포레스트(Isolation Forest) · 데이터를 무작위로 분할해 이상치를 빠르게 고립시켜 탐지하는 알고리즘. "runs isolation-forest and statistical detectors"

← 전체 기술 노트 · 워크스페이스 인덱스 · 맨 위 ↑