위성 대 L3 · 11/27 범위 실험

11/27 까지는 위성을 먼저 — L3 는 켜도 결과 그림이 한 장도 바뀌지 않았다

위성은 그림을 바꾸고 짝 비교에서 +20.5%p 앞선다. L3 는 세 관문에서 막혀 바뀐 그림이 0 장이다.

2026-11-04 실험 · 운영 원문 400 · 풀 2.7 판 · 판정 자리 1,000

위성은 그림을 바꾸고, L3 는 바꾸지 못한다 위성을 켜면 5,360 장 중 4,924 장의 그림이 바뀌고 짝 비교에서 ② 가 +20.5%p 앞선다. L3 를 켜면 원문 · 생성 · 공급 세 관문에서 막혀 5,292 장 중 0 장이 바뀐다. 위성L3 켠다 짝 비교 ② 위성 ① 과 그림이 다른 장4,924 / 5,360 짝 비교 순승 · ② − ①+20.5%p200쌍 ③ L3 원문0.25–0.5%✕ 생성꼴 일치 0✕ 공급N3 → 버림✕ ① 과 그림이 다른 장0 / 5,292 위성은 그림을 바꾸고, L3 는 바꾸지 못한다 위성을 켜면 5,360 장 중 4,924 장의 그림이 바뀌고 짝 비교에서 ② 가 +20.5%p 앞선다. L3 를 켜면 원문 · 생성 · 공급 세 관문에서 막혀 5,292 장 중 0 장이 바뀐다. 위성 · ② 를 켜면 ① 과 그림이 다른 장4,924 / 5,360 짝 비교 순승 · ② − ①+20.5%p200쌍 L3 · ③ 을 켜면 원문0.25–0.5% ✕ 생성꼴 일치 0 ✕ 공급N3 → 버림 ① 과 그림이 다른 장0 / 5,292
그림 0위성(②)은 바뀐 그림 92% 와 짝 비교 우세를 낸다. L3(③)는 원문 · 생성 · 공급에서 막혀 바뀐 그림이 0 장이다.

관문

L3 는 원문 · 생성 · 공급 세 관문에서 막힌다

L3 가 세 관문을 지나는 비율 운영 원문 400 은 관문 1 에서 0.25–0.5% 만 남고 관문 2 · 3 에서 0 이 된다. L3 유리 원문 50 은 관문 1 10–16%, 관문 2 2–10%, 관문 3 에서 0 이다. 운영 원문 400 L3 유리 원문 50 원문 400 50 관문 1 · L3 형으로 생성 0.25–0.5% · 1/400 · 2/399 10–16% · 5 · 8/50 관문 2 · 원본 조합 · 꼴 일치 ✕ 0 · 세 문서 모두 공급 꼴과 다름 2–10% · 1 · 5/50 관문 3 · 검색 앞 10 에 남음 ✕ 0 · N3 로 맞아 버림 ✕ 0 · L3 형 0/11 서비스 노출 0 장 0 장 L3 가 세 관문을 지나는 비율 운영 원문 400 은 관문 1 에서 0.25–0.5% 만 남고 관문 2 · 3 에서 0 이 된다. L3 유리 원문 50 은 관문 1 10–16%, 관문 2 2–10%, 관문 3 에서 0 이다. 운영 원문 400 원문 400 관문 1 · L3 형으로 생성 0.25–0.5% · 1/400 · 2/399 관문 2 · 원본 조합 · 꼴 일치 ✕ 0 · 세 문서 모두 공급 꼴과 다름 관문 3 · 검색 앞 10 에 남음 ✕ 0 · N3 로 맞아 버림 서비스 노출0 장 L3 유리 원문 50 원문 50 관문 1 · L3 형으로 생성 10–16% · 5 · 8/50 관문 2 · 원본 조합 · 꼴 일치 2–10% · 1 · 5/50 관문 3 · 검색 앞 10 에 남음 ✕ 0 · L3 형 0/11 서비스 노출0 장
그림 1L3 에 유리하게 쓴 원문 50 도 관문 3 에서 0 이 된다. 운영 원문은 관문 1 에서 이미 거의 0 이다.

관문 1 · 2 의 범위는 어휘 18종(V3) · 45종(V1) 두 판의 값이다. 유리 원문 50 은 LLM 이 포함 DO 에 맞춰 쓴 것이라 실제보다 L3 에 유리하다.

자세히: 본문 2-8 세 관문 · L3 세트

그림

L3 를 켜도 결과 그림이 0 장 바뀐다

0 장

③ L3 대 ① 기준

0/ 5,292 장
0 장

④ 위성+L3 대 ② 위성

0/ 5,360 장
0 장

③-49 대 ①-49 · 어휘 45종

0/ 5,444 장
92%

대조 · ② 위성 대 ① 기준

4,924/ 5,360 장
그림 2L3 를 켠 세 짝 모두 바뀐 그림이 0 장이다. 위성을 켜면 92% 가 바뀐다.

「그림이 다른 장」은 원문 · 대치 입력 · 글 칸이 하나라도 다른 장이다. 그림이 같으면 judge · 카드 판정도 같다.

자세히: 본문 2-2 judge · 판정 결과

짝 비교

짝 비교는 위성(②)을 고른다 — 이득은 제목이 아니라 위성에서 온다

짝 비교는 ② 를 고르고 judge BAD 는 차이가 없다 ② 대 ① 200쌍에서 ② 나음 92, 같음 17, 갈림 40, ① 나음 51. 순승 +20.5%p(+9.0 – +31.6). judge BAD 차이 ②−① −0.8%p(−4.0 – +2.5)는 0 을 걸친다. 참고로 ①-49 대 ① 순승 +14.0%p(+1.6 – +25.8). ② 위성 대 ①200쌍 92 ② 나음 17 같음 40 순서 바꾸면 갈림 51 ① 나음 ②ᵗ 제목만 대 ①200쌍 65 ②ᵗ 나음 33 같음 39 순서 바꾸면 갈림 63 ① 나음 차이와 95% 구간 · %p 짝 비교 순승② − ① · +20.5%p 제목만 · ②ᵗ − ①제목 몫 · +1.0%p 위성 몫 · ② − ②ᵗ+14.5%p judge BAD 감소BAD ②−① −0.8%p (−4.0 – +2.5) 참고 · 어휘 45종①-49 − ① · +14.0%p -10 0 +10 +20 +30 차이 없음 ② 가 낫다 → 짝 비교는 ② 를 고르고 judge BAD 는 차이가 없다 ② 대 ① 200쌍에서 ② 나음 92, 같음 17, 갈림 40, ① 나음 51. 순승 +20.5%p(+9.0 – +31.6). judge BAD 차이 ②−① −0.8%p(−4.0 – +2.5)는 0 을 걸친다. 참고로 ①-49 대 ① 순승 +14.0%p(+1.6 – +25.8). ② 위성 대 ① · 200쌍 ② 나음 92 같음 17 순서 바꾸면 갈림 40 ① 나음 51 ②ᵗ 제목만 대 ① · 200쌍 ②ᵗ 나음 65 같음 33 순서 바꾸면 갈림 39 ① 나음 63 차이와 95% 구간 · %p 짝 비교 순승② − ① · +20.5%p 제목만 · ②ᵗ − ①제목 몫 · +1.0%p 위성 몫 · ② − ②ᵗ+14.5%p judge BAD 감소BAD ②−① −0.8%p (−4.0 – +2.5) 참고 · 어휘 45종①-49 − ① · +14.0%p -10 0 +10 +20 +30 ② 가 낫다 →
그림 3② 대 ① 순승 +20.5%p 의 구간은 0 위에 있다. 제목만 켠 ②ᵗ 는 ① 과 비기고(+1.0%p), 위성 몫(② − ②ᵗ)이 +14.5%p 다. judge BAD 의 구간은 0 을 걸친다.

짝 비교는 judge 와 같은 모델 계열의 새 측정기다. 순서를 바꿔 두 번 묻고 두 답이 같을 때만 승패로 셌다. 사람 판정은 없다.

judge BAD 는 「② 가 낫다」가 오른쪽이 되게 ①−② 로 뒤집어 그렸다.

자세히: 본문 2-3 짝 선호 · 원문 탐색

감점

위성은 감점과 함께여야 한다

E3 채워지지 않은 자리 E3 결함 비율은 ① 6.4%, ② 5.9%, 감점을 끈 ②′ 15.7% 다. ① 기준 6.4% ② 위성 · 감점 켬 5.9% ②′ 위성 · 감점 끔 15.7% 감점을 끄면 +9.8%p E3 채워지지 않은 자리 E3 결함 비율은 ① 6.4%, ② 5.9%, 감점을 끈 ②′ 15.7% 다. ① 기준 6.4% ② 위성 · 감점 켬 5.9% ②′ 위성 · 감점 끔 15.7% 감점을 끄면 +9.8%p
그림 4위성 감점을 끄면 「채워지지 않은 자리」(E3)가 5.9% 에서 15.7% 로 는다.
나아짐

R6 순위 역전

①15.6②9.8% · 판정 자리 1,000
나빠짐

E5 정보 구조 흐림

①11.4②13.7% · 판정 자리 1,000
위성 고유

같은 글 두 번

5 / 30 장 · 검수 대체(에이전트)

위성은 순위 역전(R6)을 줄이지만, 정보 구조 흐림(E5)과 같은 글 두 번이라는 고유 결함을 가져온다. 같은 글 두 번을 재는 카드는 아직 없다.

자세히: 본문 2-4 카드 · 2-5 검수 대체

작업량

효과를 잰 쪽은 위성뿐이다

작업량 대 측정된 효과 위성은 작업량 중–대에 짝 비교 +20.5%p 로 효과를 잰 유일한 안이다. L3 조합 없음은 소–중에 바뀐 그림 0 장, L3 조합 포함은 대에 대리 6/6 패로 잠재 효과를 재지 못했다. 이득을 쟀다 효과 0 못 쟀다 소 중 대 작업량 → 위성 · 중–대 짝 비교 +20.5%p L3 조합 없음 · 소–중 바뀐 그림 0 장 L3 조합 포함 · 대 대리 6/6 패 잠재 효과는 미측정 작업량 대 측정된 효과 위성은 작업량 중–대에 짝 비교 +20.5%p 로 효과를 잰 유일한 안이다. L3 조합 없음은 소–중에 바뀐 그림 0 장, L3 조합 포함은 대에 대리 6/6 패로 잠재 효과를 재지 못했다. 이득을 쟀다 소 중 대 위성 · 중–대짝 비교 +20.5%p 효과 0 소 중 대 L3 조합 없음 · 소–중바뀐 그림 0 장 못 쟀다 소 중 대 L3 조합 포함 · 대대리 6/6 패 · 잠재 효과는 미측정 띠 = 작업량 범위 →
그림 5위성은 작업량이 중–대이고 효과를 잰 유일한 안이다. L3 조합 없음은 작고 효과가 0, 조합 포함은 크고 효과를 재지 못했다.

작업량 크기는 실험 구현과 코드 확인에 근거한 판단이다(정해진 공수 기준은 없다). ⑤ 대리는 자식이 썸네일 크기라 졌다. 이것은 잠재 효과의 측정이 아니다.

자세히: 본문 1-4 작업량 · 권고

자세히

글 본문과 원자료