도구 도입 평가
새 도구를 도입하기 전에 효과와 위험을 비교하는 실험 절차와 기록 양식입니다. 무엇을 만들지 결정할 때 사용합니다.
내가 맡은 일
도구 도입 비교 실험 절차·기록 양식 정립 · 다른 모델 교차 검증 적용
실험 방법
2026-06 ~ 지금
주요 결과
- 신규 도구 도입 전 효과·위험 비교 실험 절차 정립
- 측정 결과로 도입·개발 여부 결정기억 도구 미개발 등 불필요한 개발 배제
도구 도입을 결정할 질문과 평가 기준, 현재 방식으로 충분한지 확인하는 원칙을 보여 줍니다.
공개용 화면 안내
공개된 실제 문서의 본문을 촬영했습니다. 탐색 메뉴를 제외하고 설명·표가 끝나는 지점에서 나눴습니다.
문제와 시작
"이거 만들까, 도입할까"를 의견과 열정으로 결정하면 잘못된 yes가 실제 빌드 시간을 통째로 태웁니다. 정직한 답이 "지금 것으로 충분"일 때가 많은데, 측정 없이는 그걸 지나치기 쉬웠습니다.
직접 한 일
세 가지를 원칙으로 박았습니다. ① 만들기 전에 측정 — 현재(공짜)부터 기성 도구 순으로 싸게 게이팅하고, 기성을 실제로 붙여보고도 부족할 때만 직접 만듭니다(buy-before-build). ② 자기감사로 끝내지 않고 다른 벤더 모델로 교차 적대감사 — 한 모델은 자기 맹점을 못 보기 때문입니다(실제로 자기감사 8건 위에 교차감사가 13건을 더 찾음). ③ 모든 결론에 "실측(n)·추론·메커니즘" 신뢰도 라벨을 붙여, 안 돌려본 것을 판정으로 둔갑시키지 않았습니다.
결과와 현재 상태
여러 실제 결정을 데이터로 내렸고, 흔한 정직한 결론은 "안 만든다"였습니다 — 기억 도구는 안 만들고, 코드 심볼 도구는 범위를 한정해 유지하고, 토큰 프록시는 안전한 명령에만 조건부로. 열정이 아니라 측정이 빌드 시간을 지켰습니다. 실험 방법
만든 화면
현재 공개 문서의 방법·기준·사례는 탐색 메뉴를 제외한 본문으로 촬영했습니다. 측정 양식은 실제 원본 파일을 읽기 전용 터미널 형태로 보여 줍니다.
질문 정의부터 현재 방식 확인, 대안 비교, 측정, 최종 결정까지 일곱 단계를 끊김 없이 보여 줍니다.
공개용 화면 안내
공개된 실제 문서의 본문을 촬영했습니다. 탐색 메뉴를 제외하고 설명·표가 끝나는 지점에서 나눴습니다.
표본 수·측정 여부·비교 조건을 다루는 열 가지 기준과 각 기준을 둔 이유를 표 전체로 보여 줍니다.
공개용 화면 안내
공개된 실제 문서의 본문을 촬영했습니다. 탐색 메뉴를 제외하고 설명·표가 끝나는 지점에서 나눴습니다.
도구를 만들지 않기로 한 사례와 재측정 후 유지로 판단을 바꾼 사례를 비교합니다. 각 사례의 판단 근거와 측정 범위를 함께 읽을 수 있습니다.
공개용 화면 안내
공개된 실제 문서의 본문을 촬영했습니다. 탐색 메뉴를 제외하고 설명·표가 끝나는 지점에서 나눴습니다.
실제 측정 양식의 비교 대상·모델 고정·판정 기준과 결과 기록 항목을 끝까지 담았습니다.
공개용 화면 안내
화면이 없는 도구라 실제 명령 출력과 현재 원본 파일을 읽기 전용 터미널 형태로 렌더링해 촬영했습니다. 비밀 값 검사는 가짜 토큰만 사용했습니다.