#작업 설계
18편
AI 앱 복제: 화면과 동작의 격차
RecreationBench의 58.1%와 완전 통과 2.8%는 무엇이 다른가. 같은 첫 화면을 가진 계산 예제를 직접 검사하며 입력·계산·저장을 나눠 확인할 기준을 정리했다.
AI의 출처 인용과 무단 업로드
정답을 확보한 AI가 인용을 붙이려고 파일을 외부에 올린 사례. 답의 정확성, 출처의 신뢰성, 도구의 공개 권한을 나눠 살폈다.
AI 심사평 재학습과 판단의 획일화
AI가 만든 심사평을 다시 학습했을 때의 변화. 평점 분포, 내용의 다양성, 판단의 정확성을 구분하고 독립 검토에 필요한 근거를 살폈다.
코딩 AI의 계획 기능: 정확도와 비용의 차이
계획 기능은 언제 성공률을 높이고 언제 비용만 줄이는가. 네 모델의 비교 연구에서 계획의 구현, 검증 단계 변화, 성공 한 건당 비용과 중단 기준을 살폈다.
AI 외부 평가: 접근 권한과 비용의 출처
Anthropic과 Accenture의 내부 상주 평가 계획. 자료 접근, 평가 비용, 결과 공개 권한을 구분하고 실제 배포를 검증할 때 필요한 기록을 정리했다.
Paper2Agent: 논문 실행 도구의 검증 기준
논문을 질문답변 대상으로 읽는 단계에서 실행 도구로 옮길 때 필요한 것. 가중평균 예제를 직접 실행해 호출 성공과 계산 검증의 차이를 확인했다.
AI 개발팀의 교차 검증: 개별 테스트가 놓친 연결 오류
구현 담당과 별도로 둔 AI 검토자가 두 프로그램의 응답 형식 차이를 발견했다. 검사 범위를 나누고, 배포를 보류하고, 수정된 결과를 다시 확인한 사례.
허깅페이스 침해 사건: AI의 인터넷 우회와 평가 조작
평가용 AI는 어떻게 인터넷 제한을 우회하고 외부 시스템에 접근했나. 중계 서버, 데이터 처리 취약점, 에이전트 간 정보 공유를 공식 조사와 독립 분석으로 살펴본다.
Jev의 ‘환각 0%’와 빠진 선택지
Jev의 출력 보장과 판단 오류는 어디서 갈리는가. 공식 평가의 조건을 확인하고, AI 세션에서 글감을 고르는 문제로 질문 설계·근거 선택·확률·비용을 분석한다.
한국어 글쓰기 스킬, 적용 전후 비교
hjongc/humanizer-kr를 적용해 기존 글 두 편을 고쳤다. 실제 문장 전후 비교, 별도로 손본 구성, 자동 문체 검사에서 걸러 읽어야 했던 결과를 남겼다.
AI 세션에서 블로그까지: 글감 8개의 선별 기준
지난 AI 대화에서 글감 여덟 개를 고르고 한영 초안으로 옮겼다. 정정과 실패를 찾은 기준, 보류한 소재, 원문 51곳을 대조하며 제한한 주장을 기록했다.
AI 팀 운영: 역할표 다음의 독립 검토
AI 팀을 요청했는데 사람팀 설명이 돌아왔다. 역할 문서에서 멈추지 않고 독립 의견, 교차 검토, 실행과 보고로 이어지도록 요구를 구체화한 과정.
Discord 원격 작업: 같은 터미널, 다른 입력창
휴대폰에서 명령을 보내도 Mac에서 쓰던 AI 세션을 이어가고 싶었다. 세션 대상 지정 오류, 여러 채널 연결, 중간 진행 표시를 다룬 구현 기록.
문장 다듬기: 반복 설명까지 고친 두 편의 글
im-not-ai로 문장만 다듬은 글과 순서·반복 설명까지 고친 글을 비교했다. 실제 수정 전후와 그대로 쓰지 않은 제안을 정리했다.
작업 폴더 10개 정리, 브랜치 10개 보존
비슷한 프로젝트 폴더가 늘어나 AI에 조사부터 맡겼다. 미커밋 변경과 브랜치 차이를 확인하고, 폴더만 정리하면서 작업 이력을 보존한 과정.
AI 초안 재편집: 빠져 있던 실제 사례
AI가 작성한 사용법 세 편을 실제 구축 사례로 다시 썼다. 최초 요청과 초안을 대조하고, 시안과 오류 기록을 넣은 과정을 수정 전후 문장으로 살폈다.
AI 블로그 제작기: 디자인 재작업부터 번역 오류까지
AI에 구현과 검증을 맡기고 공개 범위와 디자인을 정했다. 경로를 직접 찾게 한 지시, 네 가지 시안 비교, 한·영 글 충돌을 고친 기록.
AI 작업 환경 이전: 끊어진 연결과 해시 검증의 한계
폴더 이전을 AI에게 맡긴 뒤 세션·자동화·OneDrive 연결에서 생긴 문제. 파일이 같다는 검사와 실제로 쓸 수 있다는 검사가 어떻게 달랐는지 작업 기록을 대조했다.