AI 봇이 스스로 남긴 학습일지 243건 — 자기개선 루프는 진짜인가
봇이 자동으로 남긴 학습일지 243건을 10개 카테고리로 집계했습니다. 이 중 실제 '자기수정'에 해당하는 항목은 123건(50.6%)이고 나머지는 운영 로깅입니다. 루프가 어디까지 진짜인지 정직하게 판정합니다.
“AI가 스스로 학습한다”는 문장은 검증하기 어렵습니다. 그런데 이 봇은 스스로 학습일지를 남깁니다. 그래서 그 243건을 전부 열어, 어디까지가 진짜 자기개선이고 어디부터가 그냥 로깅인지 갈라 봤습니다(2026-05-30 ~ 2026-09-24, 활동 93일, 모든 수치는 코드로 계산 — 방법론).
학습일지 카테고리 분포 (243건)
| 카테고리 | 건수 | 성격 |
|---|---|---|
| 파라미터 변경 (리밸런싱) | 85 | 운영 |
| 성장 복기 (자기반성) | 64 | 개선 |
| 의사결정 채점 | 42 | 개선 |
| 입출금 감지 | 30 | 운영 |
| 종목 교체 | 13 | 개선 |
| 백테스트 게이트 | 3 | 개선 |
| 센티넬 매수정지 | 2 | 운영 |
| 센티넬 매수재개 | 2 | 운영 |
| 정책 변경 승인 | 1 | 개선 |
| param_feedback | 1 | 운영 |
‘성격’ 열이 이 연구의 핵심입니다. 저는 각 카테고리를 두 갈래로 나눴습니다 — 개선(봇이 자기 행동/파라미터/판단을 실제로 바꾸거나 반성한 것)과 운영(입출금 감지·리밸런싱 실행 같은 자동 기록).
- 개선(자기수정) 계열: 123건 (50.6%)
- 운영(로깅) 계열: 120건
진짜 ‘자기개선’은 무엇이었나
숫자만이 아니라 내용도 봐야 합니다. 실제로 남아 있던 자기수정의 예:
- 성장 복기(자기반성): “AI 성장 동력에 대한 확고한 믿음은 유지되었으나, 최근 성장 자산 매도와 방어 자산 매수가 혼재되어 포트폴리오의 방향성이 불분명해졌으며, AI 섹터의 단기 과열 징후에 대한 경계심이 높아진 하루였다.”
- 백테스트 게이트(자기검증): “통과 — [판정: 홀드아웃 18개월] CAGR 41.9% vs SPY 18.5% · Sharpe 1.34 vs 1.34 · MDD -12.2% vs -6.5% | [전체 59개월·참고] CAGR 37.9% vs 11.2% ※유니버스 2026-06 선정 → 절대수치 과대(생존편향), 월간 추세 변화 감지용”
- 정책 변경(자기수정): “성장복기 제안 3건 승인 (2026-06-13): 과열시 방어전환·장기시각·정기 리스크모니터링”
이건 단순 로그가 아니라, 봇이 손실을 인식하고 → 원인을 서술하고 → 정책 변경을 승인 흐름에 올리는 루프의 흔적입니다. 특히 백테스트 게이트는 봇이 스스로 새 설정을 SPY 대비로 검증한 뒤에야 통과시킨 기록이라, 연구 0006의 ‘우위 가설’을 봇 스스로도 조심스럽게 다룬다는 증거입니다.
해석 — 절반은 진짜, 절반은 로깅. 그리고 n이 작다
정직하게: 243건 중 50.6%만이 진짜 자기수정이고 나머지는 운영 기록입니다. 그리고 성장 복기의 문구들이 날마다 거의 비슷하게 반복된다는 점도 눈에 띕니다 — 매일 새로운 통찰이 아니라 정기 리포트에 가깝습니다. 즉 ‘자기개선 루프’는 존재하지만 아직 얕습니다. 루프가 돈다는 것과, 루프가 성과를 바꾼다는 것은 다른 얘기입니다.
무엇을 배웠나
- “AI가 학습한다”는 주장은 일지의 카테고리 분포로 검증할 수 있다 — 개선 대 로깅의 비율.
- 이 봇의 루프는 진짜지만 얕다: 반성은 남기되, 그 반성이 파라미터를 크게 바꾸는 단계까지는 아직 도달하지 않았다.
- 로그를 남기고 그걸 그대로 공개하는 것 자체가 연구 0007에서 본 ‘비어 있는 필드’를 발견하게 해 준다 — 투명성이 곧 디버깅이다.
다음 연구 예고: 성장 복기가 실제 파라미터 변경으로 이어진 사례만 추려, ‘반성 → 수정 → 성과’의 인과 사슬이 닫히는지 추적합니다.