문제
PhiUSIIL test 5,000건 중 9건의 phishing URL을 정상으로 분류 (Recall 0.9964).
9건 모두 character pattern으로 정상 URL과 구분 불가능한 형태.
FN 사례
가설
- 9건 모두
https://www.{도메인}.{tld} 단순 형태, path/의심 character 없음
- 8건은 score < 0.02 → threshold 튜닝(0.5→0.3)으로 1건만 추가 검출
- URL 문자열만으론 "평범해 보이는 신규 phishing 도메인" 본질적 구분 불가
- 예외 1건:
smtd.jp.zhukoudai.com (nested subdomain 위장) — 학습 가능했어야 함
작업 항목
목표 지표
- Recall 0.9964 → 0.9990 이상
- FN 9 → 2 이하 (smtd 같은 명백한 위장만 남기기)
참고
- baseline 확보 PR: #(PR번호)
- 관련 README 목표: 2번(성능 향상), 3번(모델 구조 개선)
문제
PhiUSIIL test 5,000건 중 9건의 phishing URL을 정상으로 분류 (Recall 0.9964).
9건 모두 character pattern으로 정상 URL과 구분 불가능한 형태.
FN 사례
가설
https://www.{도메인}.{tld}단순 형태, path/의심 character 없음smtd.jp.zhukoudai.com(nested subdomain 위장) — 학습 가능했어야 함작업 항목
목표 지표
참고