도구 실험

  1. AI 심사평 재학습과 판단의 획일화

    AI가 만든 심사평을 다시 학습했을 때의 변화. 평점 분포, 내용의 다양성, 판단의 정확성을 구분하고 독립 검토에 필요한 근거를 살폈다.

  2. Paper2Agent: 논문 실행 도구의 검증 기준

    논문을 질문답변 대상으로 읽는 단계에서 실행 도구로 옮길 때 필요한 것. 가중평균 예제를 직접 실행해 호출 성공과 계산 검증의 차이를 확인했다.

  3. Jev의 ‘환각 0%’와 빠진 선택지

    Jev의 출력 보장과 판단 오류는 어디서 갈리는가. 공식 평가의 조건을 확인하고, AI 세션에서 글감을 고르는 문제로 질문 설계·근거 선택·확률·비용을 분석한다.

  4. 공통 스킬 관리: 원본 하나, 배포본 둘

    스킬 파일이 있어도 필요한 도구와 인증은 없을 수 있었다. 캘린더 스킬의 의존성 확인과 별도 스킬을 Codex·Claude에 배포한 작업에서 구분한 확인 단계.

  5. Whisper 전사의 반복 오류: 30초 샘플의 함정

    30초 샘플은 빨리 처리됐지만 전체 전사에는 같은 구절이 반복됐다. 설정을 바꿔 재전사한 과정과 반복·끝 구간 검사로도 확인할 수 없는 부분.