테스트는 통과했는데, 완성이라고 말할 수 없었다
통과한 테스트와 처음 계획을 실제 화면에서 다시 맞춰 봅니다.
AI로 만들고, 경험으로 판단합니다.
제품과 업무 시스템을 만들며 선택한 기준을 기록합니다.
대표 사례 · 마음결 사주
AI가 만든 화면의 완료 기준
AI와 함께 만드는 마음결 사주 앱의 테스트 보고를 실제 화면과 대조한 기록입니다. 빠진 기능과 중복 처리를 확인하며, 사용 흐름을 기준으로 완료 범위를 다시 나눴습니다.AI 구현 보고와 사용 흐름을 대조했습니다.
최근 글
80편 · 최신순
연결이 끊겼다고, 원인까지 같은 건 아니었다
컴퓨터·네트워크·앱의 기록을 나누어 이번 원인을 좁혔습니다.
AI 비서에게 일을 맡겼더니, 확인할 일이 늘었다
기록을 다시 믿고 쓰려면 근거와 반영 책임이 필요했습니다.
보고를 만들었다는 확인과, 내가 받았다는 확인 사이
일일 보고가 생성되는 것과 메신저로 발송되는 것은 다른 완료 조건이었다. 정상이라는 답을 어디까지 믿을 수 있는지 범위를 정해야 했다. 생성·통합 기록과 발송 기록을 분리해 확인하고 복구 실행 뒤 다음 정기 발송이 실제로 있었는지도 따로 남겼다.
보고서는 길어졌는데, 오늘의 중요한 변화는 빠졌어요
자동 보고가 사실을 많이 담아도 오늘과 이전 일을 섞거나 중요한 변화를 놓쳤다. 사용자는 무엇이 바뀌었고 왜 그런지 다시 물어야 했다.
사주 앱을 만들다가, 첫 화면에서 멈췄다
사용자가 부담 없이 첫 질문을 꺼낼 진입 흐름을 고민합니다.
더 큰 모델로 바꾸기 전에, 어떤 답이 나아져야 하는지 봤어요
규격 이름만으로 품질 개선을 기대할 수 있었다. 현재 상태와 비교 근거를 확인하고 실측 전 교체 보류.
작업 개수를 제한해도 디스크가 찰 수 있다
작업 개수와 함께 빌드 중 사용량과 남겨둘 결과물을 봅니다.
비어 있는 일일 브리핑을 다시 만드는 것만으로는 부족했어요
브리핑 생성이 멈춰 현재 자료를 읽을 수 없었다. 실제 브리핑 실행의 막힘을 복구.
보고서는 왔는데, 확인하는 쪽이 다른 날짜를 찾았어요
보고서 생성과 전달은 끝났는데 확인 과정의 날짜 해석이 어긋나 결과가 없다고 판단했다. 이미 성공한 생성 작업을 다시 돌리기보다 실제 결과와 확인 경로를 비교했다. 보고서를 읽는 쪽의 날짜 처리를 바로잡았다.
실행은 옮겼는데, 상태창은 예전 작업을 보고 있었어요
보고서의 실제 예약 실행 경로는 바뀌었지만 평가는 폐기된 예약 작업과 오래된 결과를 계속 기준으로 삼았다. 어디가 실제 실행의 기준인지 먼저 정하고 해당 날짜의 결과를 연결했다. 과거 실패를 지우는 것과 새로운 운영을 검증하는 것을 구분했다.
성공 표시 뒤에서, 보고서의 읽기 규칙이 깨져 있었어요
예약 작업과 상태창은 성공을 표시했지만 보고서가 필요한 기본 정보를 갖추지 못해 이후 읽기와 검증을 신뢰하기 어려웠다. 파일 존재와 유효한 보고서를 구분했다. 생성 마지막 단계에서 필요한 정보가 갖춰졌는지 확인하고 상태 판단도 그 결과를 따르도록 보강했다.
자료를 읽지 못했다고 기존 지식까지 지우면 안 됐어요
최신화가 기존 유효 자료를 덮거나 실패를 삭제로 읽을 수 있었다. 유효 자료 보존과 검토·최신화 범위를 단계적으로 연결.
방금 쓰던 이미지 메뉴가 사라졌어요
이전 상태의 배포가 먼저 반영된 메뉴를 덮었다. 현재 배포 기준에 기능을 포함시키고 실제 페이지 재확인.
화면의 버전 숫자가 현재 기능을 설명하지 못했어요
공개 화면의 오래된 숫자가 현재 제공 기능을 설명하지 못했다. 공개 앱 숫자와 자산의 버전을 구분해 정리.
새 모델 이름이 보인다고 답변까지 바뀐 것은 아니었어요
표시나 설정만 바꿔서는 실제 응답이 바뀌었는지 알 수 없었다. 선택·실제 실행·응답 근거를 함께 확인.
보고서에 메뉴를 붙였더니 읽기와 출력도 함께 지켜야 했어요
퇴역할 화면과 실제 리포트 진입·조판이 섞일 수 있었다. 기존 진입 범위와 공용 메뉴·문서 배치를 정리.
여러 이미지를 골랐는데 업로드가 모두 거절됐어요
허용 크기 안내와 실제 업로드 조건이 맞지 않아 파일이 거절됐다. 올릴 파일을 다루는 흐름과 실패한 항목의 표시를 조정.
이름 한 글자만으로는 지금 계정을 알기 어려웠어요
계정 요약에서 장식과 실제 계정 정보의 비중이 맞지 않았다. 계정 정보와 아바타의 역할을 다시 정리.
같은 입구를 반복해 놓는 것이 더 친절한 것은 아니었어요
중복 진입 카드와 라벨·메뉴 위치가 내용 읽기를 방해했다. 역할별 탐색과 홈 순서·라벨의 소속을 조정.
갤러리에 들어왔는데 관리 화면부터 읽어야 했어요
기능은 있었지만 공개 갤러리가 과거 관리 콘솔처럼 읽혔다. 기존 탐색 기능을 유지하면서 이미지와 제목이 먼저 보이는 화면으로 변경.
성능표에서 먼저 나누어 적어야 할 것
성능 수치와 함께 입력 시점·평가 대상·검증 범위를 남깁니다.
컴포넌트가 좋다는 설명 대신, 실제로 눌러 볼 수 있게 했어요
원칙 문장만으로는 실제 모습과 행동을 비교하기 어려웠다. 실제 사용하는 소수 컴포넌트의 예와 문서 연결 제공.
첫 화면을 보는 순간과 내용을 읽는 순간은 달랐어요
첫 화면의 분위기와 이후 내용 읽기의 탐색이 같은 틀에 묶였다. 홈의 헤더 전환과 바닥 여백·프레임을 구분해 수정.
공개 이미지를 보러 왔는데, 내부 관리 안내가 먼저 보였어요
자산을 보려는 외부 방문자에게 내부 관리·권한 안내가 앞섰다. 공개 진입과 자료 순서·빈 상태를 바꾸고 기존 데이터 경계 유지.
글이 없는 블로그를 완성된 것처럼 채우지 않았어요
가짜 글로 채우거나 목록만 만들면 실제 기록이 있다는 오해를 만든다. 빈 상태를 명시하고 실제 공개 글의 목록·상세·아카이브 연결.
보고 방식은 바뀌었는데, 검사는 옛 파일을 찾고 있었어요
안전한 보고 방식으로 결과 구성이 바뀐 뒤 검사기는 더 이상 만들지 않는 이전 파일을 요구해 실패로 표시했다. 결과 생성 실패인지 검사 기준의 지연인지 구분했다. 새로 합의한 결과와 소비자가 요구하는 증거를 맞췄다.
짧은 후속 질문에서, 프로젝트 맥락이 떨어져 나갔어요
같은 프로젝트 대화에서 이어진 짧은 질문이 넓은 기본 분류로 흘러가 작업 기록의 맥락이 약해졌다. 문장 하나만 분류하지 않고 앞선 대화의 프로젝트 맥락을 함께 대조했다. 분류가 약한 경우를 숨기지 않고 실제 입력을 다시 확인했다.
외부 페이지를 바꾸다 내부 작업 화면까지 바뀔 뻔했어요
공개 Root와 내부 Workspace의 역할·시각 기준이 섞일 수 있었다. 공개 콘텐츠와 내부 작업의 범위를 정하고 문서 화면으로 연결.
보고서는 만들어졌는데 화면에는 어제 자료가 있었어요
자료 생성·수신·표시가 같은 시점을 가리키지 않았다. 현재 자료가 실제 읽는 화면까지 도달하는지 확인.
탭을 다시 찾을 때도 사이트를 알아볼 수 있어야 했어요
사이트 아이콘이 없거나 바뀐 정체성과 맞지 않았다. 사이트별 아이콘의 실제 제공 상태 확인.
관리자 화면에 들어가니 로그아웃할 곳이 없었어요
일반 화면의 로그아웃 입구가 관리자 화면에서는 사라졌다. 공통 관리 헤더에 로그아웃을 넣고 실제 운영 세션 종료 확인.
Labs를 완성된 제품 회사처럼 소개하고 있었어요
외부 페이지의 지표·제품 목록이 현재 실험의 역할과 달랐다. 기존 페이지를 보존하며 실험·관찰·기록 중심 첫 화면으로 전환.
멋진 이미지가 실제 작업의 증거처럼 보일 수 있었어요
분위기 이미지가 실제 현장·성과로 읽히거나 내용을 가릴 수 있었다. 이미지 역할과 글자 위계·반응형 배치를 조정.
홈에서 서비스를 쓰려는데 로그인 입구가 없었어요
헤더에서 과거 자료로 갈 수 있었지만 로그인 목적지는 분명하지 않았다. 데스크톱·모바일의 로그인 입구와 기존 아카이브 동선 구분.
로그인 화면에서 사이트 소개를 다시 읽게 하고 있었어요
브랜드 화면을 그대로 옮기면 로그인 행동보다 소개가 앞선다. 서비스 진입 맥락과 인증 작업을 구분해 배치.
로그아웃했는데 돌아갈 화면이 없었어요
세션을 끝낸 뒤 접근할 수 없는 주소로 이동했다. 로그아웃과 인증 뒤 귀환을 실제 서비스 화면에 맞춤.
답변은 남았는데 누가 물었는지는 알 수 없었어요
계정으로 들어온 질문이 작성자와 연결되지 않았다. 질문과 작성자 귀속을 설계.
서버는 살아 있는데 사용자에게는 열리지 않았어요
접속의 문제와 데이터 장애가 화면에서 같은 문제처럼 보였다. 실제 접속 상태와 데이터 상태를 나눠 확인.
쓰지 않는 연결 하나가, 계속 장애를 만들고 있었어요
주요 운영 경로는 정상인데 더 이상 쓰지 않는 보조 연결이 반복해서 시작되고 종료되며 혼란을 만들었다. 전체 서비스를 재설치하기보다 실제 사용 경로와 폐기된 연결을 구분했다. 필요한 운영 흐름을 확인한 뒤 오래된 보조 실행만 중지했다.
잘 돌아간다는 말이, 잘 읽힌다는 뜻은 아니었어요
시스템이 작동한다는 이유로 보고 품질의 경고가 정상으로 덮이거나, 반대로 품질 경고가 전체 장애로 읽힐 수 있었다. 작동 여부와 내용의 유용성을 따로 표시했다. 없애야 할 실행 장애와 남겨야 할 품질 경고를 구분했다.
빈 보고서와 못 만든 보고서를 구분하기까지
운영 화면은 정상이지만 일부 오래된 작업이나 필수 결과 누락을 충분히 보여 주지 못했다. 빈 목록도 수집 실패와 실제 0건이 섞여 있었다. 실행 성공, 필요한 결과, 원천 조회 상태를 따로 확인했다. 작업 중인 폴더를 보존하면서 결과가 없는 이유를 설명할 수 있도록 복구했다.
다시 켰다는 말 대신, 다시 읽고 있는지 확인했어요
연관 Windows 수집 작업이 반복 재시작 제한에 걸려 멈췄다. 예약 작업의 표시만으로 실제 수집이 재개됐는지는 알 수 없었다. 허용된 재시작만 수행하고 예약 상태, 실제 작업 프로세스, 새 시작 기록을 함께 확인했다.
버전이 되돌아간 줄 알았는데, 확인하는 곳이 달랐어요
Windows에서 명령으로 확인한 버전은 오래됐지만 실제 메시지를 처리하는 서비스는 새 실행 환경을 쓰고 있었다. 표시 하나로 롤백을 단정하기 쉬웠다. 화면에 보이는 버전과 실제 실행 중인 프로세스를 대조했다. 사용자의 질문을 처리하는 경로를 기준으로 판단했다.
첫 화면이 돌아왔다고 서비스가 복구된 것은 아니었어요
실행 환경과 앱 변경의 범위가 섞이거나 복구 상태가 불분명했다. 서비스 복구·기준 문서·후속 변경을 구분.
보고서는 멀쩡했는데, 첨부를 열면 한글이 깨졌어요
원본 보고서에는 문제가 없는데 메신저에서 첨부를 여는 방식에 따라 한글이 읽히지 않았다. 파일 생성과 파일 전달의 문제를 분리할 필요가 있었다. 원본을 고쳐 덮어쓰기보다 읽는 사람에게 전달되는 표현만 조정했다. 원본 보존, 발송, 다시 받은 첨부를 각각 확인했다.
백업이 있다는 것과, 돌아갈 수 있다는 것은 달랐어요
운영 중인 비서를 업데이트하면서 기존 기록과 예약 작업을 잃지 않아야 했다. 백업 파일을 갖고 있는 것만으로 실제 복원이 보장되지는 않았다.
허락받고 바꾼 문서가, 다음날에는 오류가 됐어요
사용자가 승인한 문서 변경도 정기 검사가 읽을 수 있는 증빙이 없어 설명되지 않은 변화로 처리됐다. 매번 같은 수동 확인이 필요해졌다. 실패를 무시하기보다 승인된 변경의 앞뒤를 연결했다. 먼저 해당 문서만 확인해 복구하고 이후 정상 변경을 증명하는 흐름을 보강했다.
실패 알림을 봤지만 보고서는 이미 만들어져 있었어요
이전 실패 알림·검증 기준이 현재 장애처럼 읽힐 수 있었다. 현재 실행과 산출물·실패 기준을 대조.
실패 알림을 받았다고, 모든 것을 고쳐도 되는 것은 아니었어요
실패를 자동으로 복구하려는 흐름이 오래 걸리는 작업과 변경 권한의 경계에 부딪혔다. 알림을 받는 것과 외부에 변경을 반영할 권한은 달랐다.
Mac과 Windows가 같은 캐릭터를 읽게 하려면
두 앱이 같은 캐릭터 결과물을 읽을 공통 기준을 검토합니다.
같은 계정을 쓴다고 로그인까지 하나가 되지는 않았어요
계정이 있어도 실제 로그인 접근이 막히거나 서비스 경계가 섞일 수 있었다. 사용자 확인과 각 서비스 로그인 흐름의 범위를 정리.
문제가 오래되자 마지막 확인 시점도 사라졌어요
최근 범위 바깥의 마지막 수신이 빈칸처럼 보였다. 마지막으로 확인한 시각의 의미와 표시 범위를 정리.
로그인 만료를 자료 조회 장애라고 안내하고 있었어요
비슷한 화면 오류 아래 계정과 자료 수신의 원인이 달랐다. 사용자가 해야 할 행동을 실제 원인에 맞춰 안내.
보기 좋은 시안이 실제 운영 화면처럼 보이고 있었어요
시안이 실제 데이터와 완성 기능처럼 읽힐 수 있었다. 화면의 실제값·예시·연동 전 범위를 구분.
현재 상태를 보려는데 상단 도구가 먼저 화면을 채웠어요
제목·탭·버튼·로딩 안내가 한꺼번에 상단을 차지했다. 상시 읽을 정보와 필요할 때 여는 조작을 구분하고 화면 폭별 영향 확인.
시간이 지났다는 표시를 실제 기록으로 읽고 있었어요
시간·날짜·비어 있음의 의미가 화면마다 다르거나 수집 사실을 과장했다. 기록과 화면의 시간·날짜·품질 표시 의미를 대조.
화면에서 본 상태를 나중에도 확인할 수 있어야 했어요
결과는 보여도 판단 근거와 변경 범위가 사후에 이어지지 않을 수 있었다. 기록과 운영 변경의 확인 범위를 정리.
아무 일도 없던 날이, 오류로 기록됐어요
새 활동이 없는 날 보고서는 만들어졌지만 어떤 입력을 확인했는지 남기는 정보가 빠져 검증에 실패했다. 정상적인 빈 하루와 수집 실패가 섞였다. 0건도 확인한 결과라면 근거를 남기도록 했다. 기존 입력과 부속 기록을 보존한 채 필요한 보고 부분만 다시 만들었다.
다른 보고서가 있다고, 이 작업도 성공한 것은 아니었어요
특정 작업이 실패했는데 같은 프로필의 다른 일일 보고서가 존재해 성공처럼 표시됐다. 사용자는 무엇을 다시 확인해야 할지 알기 어려웠다. 전체 폴더의 파일 존재 대신 해당 작업이 만들어야 하는 결과를 확인했다. 실행 결과와 산출물의 연결을 좁혔다.
같은 사이트에 들어와도, 하려는 일은 달랐어요
외부 방문자의 소개 화면과 팀원의 작업 화면이 섞여 있었다. 현재 미션과 자산·업무보고 진입을 목적에 맞게 정리.
관리 메뉴를 줄였더니, 무엇을 판단해야 하는지가 보였어요
관리 기능이 많고 예외 검토와 담당자 지정의 흐름이 흐려졌다. 메뉴와 검토 화면·담당자 선택을 실제 운영 행동에 맞춤.
필요한 응답을 살리면서, 중복된 실행은 줄였어요
모델 응답과 기록 작업의 운영 경계가 섞여 있었다. 필요한 응답과 별도 작업 실행을 구분.
답변을 읽으러 왔는데 입력창이 먼저 공간을 차지했어요
채팅 형태와 큰 입력부·집계 차이가 분석 기록을 읽기 어렵게 했다. 분석을 읽는 패널과 근거·입력·브리핑의 관계 조정.
다른 작업 환경으로 옮길 때 자료의 의미까지 이어져야 했어요
흩어진 회사 지식의 읽기·승격 단계를 다른 환경에 전달해야 했다. 단계별 책임과 전달 범위를 정리.
기록을 많이 만들었는데 판단할 보고서는 부족했어요
생성된 보고서와 실제 주간 서비스 판단의 기준이 달랐다. 보고서 의미·버전·주간 판단 기준을 구분.
기록이 사라진 줄 알았는데, 읽는 방식이 뒤처져 있었어요
보고서 형식이 바뀐 뒤 기존 읽기 과정이 첫 줄을 다르게 해석하며 기록이 누락된 것처럼 보였다. 원본 내용은 남아 있었다. 내용 손실인지 읽기 실패인지 먼저 분리했다. 새 형식을 만드는 쪽과 이를 읽는 쪽이 같은 약속을 사용하도록 맞췄다.
예측값을 본 다음 무엇을 바꿀 수 있을까
예측을 받는 시간과 담당자가 결정을 바꿀 시간을 맞춥니다.
새로 설치해 달라는 말과, 실행되게 해 달라는 말은 달랐어요
새 Windows 환경을 요청했지만 기존 실행 파일을 재사용한 작업이 진행됐다. 새 설정을 만든 사실만으로 새 설치가 됐다고 설명할 수 없었다. 메시지 수신 대상도 한 차례 혼동됐다.
시선 추적을 부드럽게 해도 남는 어색함
포인터 입력과 캐릭터 자세의 자연스러움을 따로 살펴봅니다.
첨부를 고쳤는데, 채팅창에는 여전히 글자만 왔어요
첨부 처리 코드는 바뀌었지만 실제 운영 프로세스가 이전 코드를 계속 실행하고 있어 문서가 파일로 전달되지 않았다. 파일과 코드만 확인하지 않고 현재 떠 있는 프로세스가 어떤 변경을 읽었는지 확인했다. 수정 완료와 운영 반영을 다른 단계로 다뤘다.
업데이트가 끝나도, 서비스의 시작 조건은 남아 있었어요
업데이트 뒤 서비스의 실행 위치 때문에 상태가 오래된 것처럼 보일 수 있는 문제가 진단됐다. 단순한 버전 교체만으로 운영 문제가 모두 끝난 것은 아니었다.
업데이트 전에, 지금 잘되는 이유부터 남겼어요
여러 프로필이 같은 실행 환경을 쓰고 있었고 기존 운영에 필요한 수정도 들어 있었다. 새 버전으로 교체하면 그 수정이 사라질 수 있었다.
u:san에서 제외와 보류를 나눈 이유
제외와 보류를 나누고 후보 옆에 다음 확인사항을 둡니다.
메시지는 받았는데, 답변만 돌아오지 않았어요
메신저에서는 질문을 받았지만 응답 처리 중 멈췄다. 처음에는 오래된 대화 상태를 의심했으나 뒤의 진단은 다른 원인을 가리켰다. 접수 여부와 답변 생성·처리를 나눠 확인했다. 초기 추측을 유지하지 않고 실제 응답 형식과 처리 방식의 충돌을 근거로 수정 범위를 잡았다.
같은 비서에게 부탁했는데, 답을 만드는 경로가 달랐어요
사용자는 일관된 품질과 단순한 운영을 기대했지만 보조 처리에서 다른 응답 경로가 선택되고 있었다. 계정 문제와 설정 문제를 혼동하기 쉬웠다. 주 응답과 보조 처리를 함께 살폈다. 계정을 없애는 조치보다 실제로 선택되는 경로를 맞추는 편이 사용자의 의도에 가까웠다.
쓸모 있는 것에 표정을 주기
명료하게 쓰는 화면에 기억할 만한 작은 감각을 더합니다.
많이 실행하기 전에, 판단할 수 있게
목표와 실행의 근거를 연결해 다음에 판단할 일을 찾습니다.
일은 끝났는데, 결과를 보내는 단계에서 실패했어요
위임한 작업은 끝났지만 긴 실행 기록을 메시지로 보내는 마지막 단계에서 오류가 났다. 사용자는 작업 자체가 실패한 것으로 받아들일 수 있었다.
생각이 이어질 여백을 남기는 일
AI의 짧은 반응 뒤에도 자기 생각을 이어갈 자리를 남깁니다.
시리즈로 읽기
한 프로젝트의 판단을 이어서 살펴봅니다.
Monifren 제작 기록캐릭터 반응, Mac·Windows 공통 기준과 빌드 저장공간을 살펴봅니다.3편 사주 서비스 기획 기록첫 질문의 진입 흐름과 테스트 뒤에도 남은 화면·기능을 살펴봅니다.2편 현장 AI 설계 노트가상 생산·물류 사례로 예측을 쓸 시점과 모델 평가 조건을 살펴봅니다.2편 DS 작업 기록공개 페이지와 관리 화면에서 생긴 문제와 판단을 시간순으로 읽습니다.15편 Labs 작업 기록소개, 계정 접근과 서비스 화면을 다듬은 과정을 읽습니다.9편 회사 지식 서비스 기록질문과 응답이 이어지는 조건과 남은 확인을 읽습니다.4편 운영·관제 화면 기록관측 상태를 읽고 다음 조치를 고르는 과정을 읽습니다.10편 회사 보고·검토 기록보고와 검토를 이어가는 데 필요한 조건을 읽습니다.3편 에르메스 운영 기록설치, 업데이트, 보고와 전달 과정의 문제를 시간순으로 읽습니다.26편 u:san 설계 기록우산을 고르는 사람의 판단 순서를 살펴봅니다.1편 AI 비서 운영 기록보고와 결과를 신뢰할 수 있는 조건을 살펴봅니다.1편 연결 문제 확인 기록같아 보이는 연결 오류의 원인과 대응을 살펴봅니다.1편