← 포트폴리오로 돌아가기

프로젝트 검증 기록

무엇을 바꿨고 어떻게 확인했는지 정리했습니다. 아래 수치는 각 날짜에 짧게 시험한 결과입니다. 현재 서비스가 항상 같은 상태로 동작한다는 뜻은 아닙니다.

마케팅 AI · 결과를 알 수 없는 모델 호출을 다시 보내지 않기

개인 프로젝트 · 공개 Olist 데이터 · 2026.10.12 단기 AWS 검증 / 2026.10.18 별도 로컬 검사

문제와 구현

모델 호출이 중간에 끊기면 요청이 처리됐는지 알기 어렵습니다. 이때 자동으로 다시 호출하지 않도록 했습니다. 호출하기 전에 예산을 예약하고, 완료된 조사는 모델을 다시 부르지 않고 저장한 결과를 돌려주도록 만들었습니다.

Olist 리드 8,000건·계약 842건을 연결했습니다. 주문 표본과 연결되지 않은 계약 462건은 판매가 없다고 판단하지 않도록 0건과 구분했습니다. 모델은 질문을 분류하고 허용된 읽기 전용 도구만 고릅니다. 조회와 수치 계산은 정해진 코드가 맡습니다.

시험 방법과 결과

확인한 범위: EC2 한 대에서 SQLite·파일 잠금(flock)을 사용한 시험입니다. 여러 서버에서 동시에 실행하거나 서버 전체를 옮기는 복구는 시험하지 않았습니다. 외부 API의 정확히 한 번 실행이나 고가용성을 확인한 결과도 아닙니다.

GitOps · CPU 할당량 부족으로 멈춘 배포 복구

래플 팀 프로젝트 이후 개인 개선 · 2026.10.06 저장소에 기록된 단기 시험

문제와 변경

HPA가 늘린 복제 수를 GitOps가 덮어쓰지 않도록 바꿨습니다. 카나리 승격 때는 구·신 버전이 함께 쓰는 자원량도 검사하도록 수정했습니다.

10월 6일 시험 결과

확인한 범위: 수동으로 조치한 뒤 복구를 확인한 기록입니다. 자동 승격이나 현재의 SLA를 확인한 시험은 아닙니다. 10월 19일 수정한 이미지의 AWS 재배포도 이 결과에 포함하지 않습니다. 일부 지표가 없으면 0으로 처리하는 코드가 있어, 지표 누락을 모두 막는 구성도 아닙니다.

청년 법률 AI · 철회한 기록을 제외하고 백업 복구하기

2026.06 팀 금융 Agent·질문 분류·검색 / 2026.10 개인 후속 개발 · 합성 자료만 사용

문제와 구현

예전 DB 백업을 그대로 복원하면 이미 철회한 자료가 다시 나타날 수 있습니다. 인증 후 기록을 저장하고, 철회하거나 보관 기한이 지나면 삭제하도록 했습니다. 삭제 이력은 DynamoDB에 따로 남겼습니다. 백업을 복원하기 전에 이 이력을 적용하도록 했습니다.

따로 진행한 두 시험

확인한 범위: 합성 자료로 한 번 복구했고, 내부 HTTP 시험에서는 수동 조치가 필요했습니다. 자동 장애 전환·즉시 권한 철회·공개 HTTPS·실제 사용자 대상 서비스 수준은 시험하지 않았습니다. 처음 복구 시험에서는 IAM 차단을 관찰하지 못했고, 이후 HTTP 시험에서 다시 확인한 결과를 따로 남겼습니다.

청년 법률 AI · 답변 지침을 비교하고 기존 지침을 유지한 이유

개발에 사용한 검색 120문항 / 별도 고정 12문항 답변 비교

검색 결과 확인

금융 검색은 개발에 사용한 120문항에서 hit@3 0.975·MRR@3 0.840을 기록했습니다. 필요한 근거가 상위 세 검색 결과에 있는지와 그 순위를 확인한 수치입니다. 이력서와 로컬 기록에 남긴 결과이며, 공개된 독립 평가셋이나 답변 정확도 측정은 아닙니다.

2026년 10월 19일에는 AI로 작성한 가상 금융 질문 12개를 고정해 답변 지침을 한 번 비교했습니다. 생성 모델·판정 모델·검색 결과·채점 출력 상한을 같게 맞췄습니다. 앞의 검색 120문항과는 별도 시험입니다.

기존 지침을 유지한 이유: 평균 점수는 높아졌지만 필요한 조항이 빠지거나 문맥에 없는 내용을 연결한 답변이 있었습니다. 그래서 기본 지침은 바꾸지 않고 후보 지침과 비교한 기록을 남겼습니다.