개발일지
개발일지 전체 글 목록 (116편)
- 플립플롭 경보 재조사 - 사자마자 되파는 원인은 밴드 진동이 아니라 종목 수 변화자동매매가 어떤 종목을 샀다가 바로 다음 라운드에 일부를 되파는 "플립플롭" 경보가 또 울렸다. 설계 당시엔 반올림 경계의 가격 흔들림을 의심했는데, 두 달치 집행 기록을 읽기전용으로 다시 집계해보니 진짜 원인은 보유 대상 종목 수가 바뀌면서 종목당 목표금액이 줄어든 것이었다. 스위치를 끄는 대신 관찰을 유지하기로 한 판단 과정을 정리했다.
- 개장 1시간 지연일에 아침 매매 라운드가 오발화 - 개장시각 게이트로 막다시장이 1시간 늦게 열리는 날, 멈춰뒀던 스케줄 타이머를 다시 켜는 순간 지나간 발화 시각이 즉시 실행되면서 아침 라운드가 닫힌 시장에 주문을 냈다. 전건이 거절됐고, 그 라운드가 집행 슬롯을 선점한 탓에 뒤 라운드까지 막혔다. 원인을 추적해 '실제 개장 시각'을 달력에서 읽어 개장 전 라운드를 보류하도록 고친 과정을 정리했다.
- 미체결 주문 자동취소 첫 발동 - 증권사 취소 거절과 주문번호 타입 정규화미체결 매도 주문을 장중에 자동으로 취소·재계획하는 경로가 실계좌에서 처음 작동했는데, 증권사 취소 API가 주문번호 타입 불일치로 거절했고 거절 사유 로그마저 비어 있었다. 원인을 추적해 주문번호를 정수로 정규화하고 거절 사유를 출력하도록 고친 과정과, 같은 날 아침 큰 하락 상태에서 반등일 매수가 전부 막힌 안전장치를 외부 AI 자문으로 점검한 결과를 정리했다.
- 가격 기반 매매 규칙 백테스트 전부 미달 - 실거래 대신 주문 없는 전방 기록으로리포트에 들어있는 가격 값(진입가·손절가·목표가)으로 수익을 더 낼 수 있을지 하루 종일 과거 데이터로 검증했는데, 판정한 규칙이 전부 기준선을 넘지 못했다. 그래서 실거래에 넣는 대신 주문을 내지 않는 전방 기록기를 세워 몇 달 뒤 판정하기로 한 과정과, 그 와중에 발견한 사전등록 규칙 위반을 정리했다.
- 자동매매 실전 첫 거래일 - 안전장치는 대부분 발동하지 않았다실거래 코드를 실제 장에서 처음 돌린 날, 주문은 깨끗이 체결됐고 증거금 재시도·주문 취소 같은 안전장치는 한 번도 발동하지 않았다. 발동 안 한 안전장치를 어떻게 신뢰할지, 그리고 수능날 특수 장시간처럼 코드가 모르는 달력 예외를 어떻게 막았는지 정리했다.
- 성과 측정 교정과 목표 재정의 - 절대수익 전환과 집행 레이어 정비벤치마크 착시를 걷어내니 종목선택의 우위가 사실상 0이었고, 오너가 시스템 목표를 절대수익 연 10% 안팎으로 못 박으며 "상시 풀투자" 원칙을 폐기했다. 남은 한 주는 그 결정이 부른 장중 필터·주문 재시도·측정 규율 작업으로 채웠다.
- 학습 목표 재설계 실험 판독 - 합격 0, 효과 없음이 아니라 측정 불가어제 규칙부터 박아둔 학습 목표 재설계 실험의 결과가 나왔다. 합격 0으로 현행을 그대로 뒀는데, 외부 AI 검토가 "수익이 안 난다"는 해석을 "지금 자료로는 수익 여부를 잴 수 없다"로 바로잡았다.
- 예측력 개선 로드맵과 "판정 불능이면 현행 유지" 규칙모델을 실제로 사고파는 구간으로 다시 채점하니 예측력이 생각만큼 바닥은 아니었다. 종목군을 좁히는 6년 실험은 전부 "판정 불능"으로 나와 현행을 그대로 뒀고, 재학습 배포에는 기준 모델 대비 비열등 게이트를 넣었다.
- 실계좌 증거금 부족 매수 재시도와 미체결 주문 취소·재계획실계좌 1라운드 매수가 주문가능금액 부족으로 거부되는 일이 있어, 같은 라운드에서 자금이 차면 한 번 다시 주문하는 장치를 넣었다. 묵은 계획가 탓에 하루 종일 안 체결되던 주문은 다음 라운드 직전에 취소하고 다시 계획하도록 고쳤다.
- 장중 매매 필터 전일 종가 기준 교정 - 포털 일봉의 종가 정의 결함어제 실계좌에 넣은 장중 필터가 급등·급락을 판정하는 기준값(전일 종가)을 틀린 데이터로 보고 있었다. 원인은 한 포털 일봉의 종가 정의가 장후 거래를 포함하도록 바뀐 것이었고, 증권사 API의 정규장 종가로 교정한 v1.1을 다시 올렸다. 같은 날 회귀 테스트를 돌리다 실제 알림 6건이 바깥으로 나가는 사고도 있었다.
- 자동매매 시스템 목표 확정 - 절대수익 연 10%, 상시 풀투자 원칙 폐기어제 "지수가 내려도 플러스"와 "현금을 놀리지 않는다" 중 하나를 골라야 한다고 적었는데, 오너가 답을 줬다. 수수료를 빼고도 장기적으로 연 10% 안팎의 절대수익을 내는 수익용 시스템이고, 늘 풀로 투자해야 한다는 원칙은 폐기한다. 첫 조치로 급등·급락에 매매를 잠깐 미루는 장중 필터를 실계좌에 넣었다.
- 성과 벤치마크 재정의 - 기간 불일치 착시를 종목선택 효과 지표로 교체실계좌 성과 리포트가 지수 대비 큰 손실처럼 보이던 건 분자와 분모를 서로 다른 기간으로 잰 착시였다. 벤치마크를 로트별 같은 보유기간 비교로 다시 정의하고, 정직하게 재니 종목선택의 우위가 사실상 0이라는 더 불편한 질문과 마주했다.
- 토큰 핑퐁과 야간배치 행 - 두 번의 근본원인 추적인증 토큰이 서로를 계속 무효화하던 문제와 야간 배치가 밤새 멈춰 있던 문제, 두 운영 사고를 추적해 고치고 재발방지까지 자동으로 확인하게 만들었다.
- TA 배치 밤새 멈춤 원인 - 타임아웃 없는 외부 호출 2건밤사이 종목평가 배치가 멈춰 있었던 원인을 찾아 고쳤는데, 재발방지가 충분한지 되짚어보니 같은 유형의 구멍이 하나 더 있었다.
- Toss 토큰 401 핑퐁 근본원인 - 캐시 재확인 없는 즉시 재발급아침마다 되풀이되던 Toss API 토큰 무효화 소동의 진짜 원인을 찾아 고치고, 재발 여부를 사람이 기억하지 않아도 자동으로 확인하게 만들었다.
- 거래소 접속차단부터 GPU 제거까지 - 장애 원인을 끝까지 추적한 한 주거래소 접속 차단으로 생긴 크래시를 조용한 실패로 낮추고, 수동 주문으로 1주 실거래 매수팔기 테스트를 마쳤습니다. 반복되던 토큰 폐기 버그는 재시작 순서 어긋남이 원인이었고, 보조 그래픽카드 정리는 절반에서 멈추지 않고 끝까지 밀어붙였습니다.
- 보조 그래픽카드 제거 - 레지스트리 fail-loud가 영향 범위를 바로 알려줬다일주일 관찰 후 판매할 보조 그래픽카드를 재부팅 전에 뽑았는데, 설계해 둔 적색 경보가 그 즉시 영향 범위를 정확히 짚어줬습니다.
- Toss 토큰 폐기 재발 원인 - 상주 두 개 재시작 시점 어긋남외부 시세 API 토큰이 자꾸 무효화되는 문제의 원인을 찾아 고쳤고, 신규 거래소 진입 실험은 기준 미달이지만 최종 판정까지 기다리기로 했습니다.
- 실거래 1주 매수팔기 테스트 경로 확정 - 자동화 대신 수동주문으로내일 장중에 한 주를 사고파는 작은 실거래 테스트를 하기로 하면서, 퇴역해둔 자동 경로 대신 수동 주문을 선택한 이유를 정리했습니다. 오늘 쌓인 여러 변경도 모아서 상주 프로세스를 재시작했습니다.
- 청산 기준 완화 병합 - 재시작 후 전체 테스트로 무관 실패 가려내기매도 타이밍 판단 기준을 느슨하게 조정하는 변경과 모의 주문 처리 개선을 같은 날 병합하고 상주 프로세스를 재시작했습니다. 이어서 전체 테스트를 돌려 나온 실패들이 이번 변경 때문인지 하나씩 확인했습니다.
- KRX 접속 차단 - 라이브러리 임포트 크래시를 로그인 실패로 강등거래소 접속이 막히자 데이터 라이브러리를 불러오는 순간 프로세스가 통째로 죽는 버그가 터졌고, 같은 날 새 리서치 가설 하나를 사전등록부터 병합까지 끝냈습니다.
- 성과 재판정, 조기진입 실거래, 자금이동 코드리뷰 — 숫자를 두 번씩 확인한 한 주지수 대비 성과를 냉정하게 재판정하고 조기진입을 실거래에 올린 한편, 리포트 침묵 버그와 자금이동 기능의 숨은 결함을 직접 재확인으로 잡아낸 한 주였습니다.
- 계좌 간 자금 이동 기능 - 코드리뷰가 두 번 잡아낸 자금 불일치 위험12월 중순으로 예정된 계좌 구조 변경에 대비해 자금 이동 기능을 만들었는데, 독립 리뷰에서 돈이 조용히 사라지거나 반대로 생겨날 수 있는 결함을 두 차례 찾아 고쳤습니다.
- 블로그 주간 리포트 5주째 스킵 - 죽은 계좌 참조가 원인E1 주간 리포트가 5주 연속 스킵된 원인을 추적했더니, 계좌 이전 후에도 리포트가 예전 계좌 상태만 보고 있었습니다.
- 조기 진입 실거래 첫날, 핵-액티브 구조는 재원 문제로 보류랭킹을 미리 얼려 첫 라운드를 당기는 조기 진입이 실거래에 들어갔고, 어제 제안받은 두 층 구조는 투입 재원이 없어 보류됐습니다.
- 자동매매 성과 재점검 - 지수 대비 냉정한 판정과 돈 버는 구조 설계지수보다 못하면 그만둘 이유가 있다는 질문을 AI 자문에게 던져 판정을 받고, 이어서 실제로 비용을 넘어서는 구조 설계안까지 받았습니다.
- 증권사 경로 단일화 - 모의 계좌 비교 시스템을 새로 갈아끼웠다오래 쓰던 모의 비교 트랙을 접고 새 시뮬레이션 브로커로 하루 만에 갈아탔고, 되돌리기 경로는 남겨뒀습니다.
- 실험 버그, GPU 사고, 실계좌 매수 차단 — 사람 개입을 감시 대상으로 만든 한 주이번 주 터진 사고 세 건 모두 직접 손을 대서 넘겼는데, 그 뒤로 "같은 개입이 다시 생기면 자동으로 기록·경보되게" 만드는 작업이 매번 따라붙었습니다.
- 60일 섀도 실험 종료 — 사전등록한 기준대로 접었다통계적으로 기준을 못 넘긴 실험을 미리 정해둔 규칙대로 종료하고, 데이터 정정과 지난 장애 재발방지도 마무리했습니다.
- 실전 계좌 수동 개입, 하루 만에 안전장치 8건으로 정리실계좌 매수 차단으로 현금이 쌓여 직접 앱으로 매매했는데, 그 과정에서 드러난 구멍을 같은 날 전부 메웠습니다.
- GPU 드라이버 버전 꼬임, 사람 없이 재부팅으로 넘긴 날자동 업데이트가 커널 모듈과 라이브러리 버전을 어긋나게 만들었는데, 재부팅부터 복구 확인까지 전부 자동화해서 넘겼습니다.
- 미국장 시세 반영 A/B 테스트, 하루에 버그 세 개를 연달아 밟았다프롬프트 한 줄을 추가할지 말지 가리는 실험을 돌렸는데, 실험 자체보다 실험을 돌리는 장치에서 결함이 세 번 터져 나왔습니다.
- 주문 실행·안전장치 계층 확장과 사전등록 A/B 실험 틀 구축출력 상한·장부대조 가드·부분충전 매수·입출금 반영까지 실행 계층을 연일 손봤고, 성급히 반영하는 대신 결과를 보기 전에 기준을 못박는 실험 틀을 먼저 세운 한 주였습니다.
- 계좌 입출금 반영 로직을 앞당겨 구현하고 같은 날 배포했다원래 주말로 미뤄뒀던 입출금 장부 처리(머니패스)를 오너 지시로 오늘 당겨 구현했는데, 코드 리뷰가 잡은 치명적 버그가 로직이 아니라 "실패 안내 문구"에 있었습니다.
- 현금 부분충전 매수 적용과 프롬프트 A/B 실험 사전등록현금이 모자라면 주문을 통째로 거부하던 동작을 가용 현금만큼 줄여 사는 방식으로 바꿔 배포했고, 성급히 반영할 뻔한 아이디어 둘은 접고 대신 제대로 된 사전등록 A/B 실험 틀을 세웠습니다.
- 종목 분류기 오분류 수선과 모의계좌 장부대조 보정거래정지가 아닌 종목을 거래정지로 오판해 매수를 막던 버그를 찾아 고치고, 모의 거래 계좌의 장부대조 잔차 원인도 추적해 정정했습니다.
- 출력 토큰 상한 적용과 주문 장부대조 가드 확장어제 발견한 출력 토큰 상한 부재 문제를 두 서빙 경로 모두에 적용해 배포했고, 주문 장부대조 안전장치도 두 단계 더 늘렸습니다.
- 백업 GPU 자가치료 전멸과 모의계좌 체결 오매칭 원인 규명백업 GPU 자가치료가 실전 첫날 밤 전멸하면서 복구 로직을 다시 설계했고, 모의계좌 잔차의 9일 전 체결 오매칭 원인도 끝까지 추적해 찾아냈습니다.
- 동시성 올리기 스모크와 출력 토큰 상한 부재 발견모델 서빙 처리량을 올리려 동시요청수를 단계적으로 올려봤는데 스모크 테스트에서 걸렸고, 그 와중에 출력 쪽에 애초에 토큰 상한이 없었다는 걸 알게 됐습니다.
- 공유계좌 실거래 확장과 GPU 이중화, 그 사이 측정 도구 자체의 결함들이번 달은 공유계좌로 실거래 범위를 넓히고 두 번째 그래픽카드로 처리 능력을 이중화하는 진전이 있었고, 그 과정에서 벤치마크·리포트·안전장치 같은 측정 도구 자체의 결함을 반복해서 찾아 고쳤습니다
- 모의계좌 장부대조 잔차 원인 규명과 방치된 경보 정리9일 전 전혀 다른 종목 체결이 엉뚱한 매도에 잘못 붙었던 사고를 찾아냈고, 한 달 넘게 매일 울리던 미사용 경보 항목도 함께 정리했습니다.
- R9700 백업 GPU 전멸 사고, 두 번 틀린 원인 진단어젯밤 붙인 자가치료가 이번엔 전혀 먹히지 않았고, 빠진 종목을 되살리는 과정에서 원인 진단을 두 번이나 다시 뒤집었습니다.
- R9700 백업 GPU 자가치료 배선과 동시요청 상향 재검토죽은 슬롯을 고치는 코드를 실전에 붙였고, 동시 요청을 더 늘리자는 판단이 틀린 전제 위에 있었다는 걸 확인했습니다.
- 안전장치를 겹겹이 쌓고, 전제를 다시 검증한 한 주서버 퇴화 감지부터 GPU 죽은 슬롯 감지까지 안전장치를 여러 겹 쌓았고, 그 사이사이 "고친 게 정말 원했던 걸 이뤘나"를 다시 검증해 틀린 전제를 찾아냈습니다.
- R9700 백업 GPU, 병목 원인과 죽은 슬롯 감지기백업 경로가 왜 동시 요청을 늘려도 안 빨라지는지 원인을 찾았고, 슬롯이 죽어서 응답이 폭주하는 문제를 잡아내는 감지기를 만들었습니다.
- Qwen3.6-35B-A3B를 AMD R9700에서 llama.cpp로 돌린 속도 튜닝 - Vulkan vs HIP, 동시 슬롯, MTP tokens/s 실측Vulkan이 HIP을 이겼고, 동시 슬롯은 4개가 무릎이었고, MTP는 단일 요청에서만 도움이 됐습니다
- self-ρ 측정 전면 퇴역과 테스트발 원장 오염 발견자원 낭비로 판단한 측정 하나를 완전히 껐고, 그 과정에서 테스트가 실거래 원장에 가짜 기록을 남기고 있던 걸 찾아 정리했습니다.
- Qwen3.8-27B를 RTX 5090 한 장에서 vLLM으로 돌린 속도 튜닝 - NVFP4·MTP 적용 결과와 KV 캐시 병목tokens/s 실측: 동시 슬롯 3 → 14 → MTP+8로 올리며 100종목 야간 배치를 6시간대에서 3시간 안쪽으로 줄인 과정, 그리고 그 숫자를 믿으면 안 되는 이유들
- 뉴스 수집 범위 실시간화와 보조 카드 안전장치 배포어제 시각 조정만으로는 풀리지 않던 문제를 오늘 뉴스 수집 구조 자체를 바꿔서 풀었고, 보조 카드 상시운용을 위한 안전장치도 실제로 배포했습니다.
- 야간 실행 시각 조정과 보조 카드 상시운용 설계 검토검증해보니 시각 조정만으로는 원래 목표를 이루지 못했고, 보조 카드 상시운용 자문에서는 예전에 참고했던 성능 수치가 오독이었다는 것도 확인했습니다.
- 주문 식별 로직 마무리와 비대해진 작업 문서 다이어트실행 계층의 남은 구멍 하나를 메우고, 계속 불어나던 작업 추적 문서를 관리 가능한 크기로 되돌렸습니다.
- 서버가 조용히 망가지는 문제 - 감지·격리·복구 안전장치를 만든 하루어제 발견한 뉴스 입력 사고를 마무리하자마자 새로운 결함이 나타났고, 재발 방지 장치를 하루 만에 만들었습니다.
- 온도를 처음으로 진짜 바꿔봤더니 - 사전등록 규칙이 "기각"이라 했는데 내가 뒤집은 이유몇 주 동안 "논의했다"고 믿었던 샘플링 온도 실험이 사실은 한 번도 실행된 적이 없었습니다
- 측정·검증 도구 자체의 결함을 연달아 찾은 한 주유니버스 오염 사고로 시작해, 랭킹 로직·AI 샘플링 설정·벤치마크 도구까지 검증 자체가 잘못돼 있던 지점을 하나씩 찾아 고쳤습니다.
- AI 응답 온도 실험 - 판정은 애매, 최종 결정은 내일로이틀째 이어온 비교 실험 결과가 나왔지만 크기가 애매해 다른 AI에게 재검토를 맡겼고, 성능측정 도구에 밀려있던 수선들도 한번에 끝냈습니다.
- 성능측정 하네스 - 자동 재개가 권한 벽에 막혀 GPU를 헛되이 점유했다어제 고친 측정 도구로 새벽에 자동 재개가 걸렸는데, 첫 트라이얼만 띄운 채 조용히 멈춰버렸습니다. 결국 사람이 직접 이어받아 라운드를 마무리했습니다.
- 성능측정 하네스 - 측정 도구 자체의 계측 오류 두 건을 발견해 고쳤다GPU 사용량을 실제보다 3배 넘게 잘못 계산하고 있었고, 측정 시간제한이 너무 짧아 후보 순위까지 거꾸로 나오고 있었습니다. 두 건 다 오늘 안에 찾아 고쳤습니다.
- 벤치마크 하네스 첫 검증 - 설정이 새는 지점을 하나씩 막았다어제 고친 모델 설정이 새로 만든 성능 측정 도구에는 하나도 안 들어가고 있었던 걸 발견해 하루 종일 하나씩 막았고, 11일째 방치돼 있던 안전장치 항목들도 오늘 전부 정리했습니다.
- AI 판단 모델 샘플링 설정 점검 - 의도와 다른 값으로 돌고 있었다AI 리포트용 모델들이 몇 주째 의도한 것과 다른 샘플링 설정으로 돌고 있었다는 걸 발견해 바로잡았고, 지난주 그래픽카드 장애의 후속 안전장치도 마무리했습니다.
- 동점 점수 처리 로직 교체 - 기각된 방식에서 새 방식으로순위 동점 처리 방식 하나가 사전에 정한 판정 기준을 통과하지 못해 기각됐고, 같은 날 새 방식으로 즉시 교체했습니다.
- 외부 시세 데이터가 통째로 비어버린 날 - 유니버스 오염 사고시가총액 데이터가 전부 비어버리자 종목 구성 순위가 알파벳순으로 둔갑했고, 이를 막는 3중 방어층을 새로 넣었습니다.
- 공유계좌 실거래 전환 - 계좌 구분값 누락이 반복해서 문제를 일으켰다새 공유계좌로 실거래를 시작했고, 그 과정에서 계좌 구분값을 안 넘기거나 전역으로 공유해버리는 같은 유형의 버그가 킬스위치 오발과 강제매도로 여러 번 반복됐습니다
- 킬스위치 사고 사후검토 - 증상만 지웠던 원인이 남아있었다어제 급하게 지운 킬스위치 오발 증상, 오늘 사후검토에서 뿌리 원인이 월요일 실거래를 다시 막을 위험으로 남아있는 걸 발견해 수선했습니다.
- 킬스위치 오발 - 계좌 구분값 누락이 부른 실거래 정지 위험정보용 모의 틱이 실계좌 킬스위치와 같은 이름공간을 공유하면서, 무관한 계좌 잔고로 계산한 가짜 손실이 월요일 실거래를 막을 뻔했습니다.
- 이관 방지 플래그가 다른 계좌 매물을 잘못 건드린 사고한쪽 계좌 재매수를 막으려고 걸어둔 플래그가 전역으로 적용되면서, 방금 이관받은 다른 계좌 종목을 도로 강제매도시키고 있었습니다. 같은 날 성능 최적화 자동화 도구도 하나 새로 완성했습니다.
- 계좌 이관 첫날 버그 두 건과 그래픽카드 인시던트 근본수선실물 이관은 끝났지만 자동전환은 버그로 하루 종일 죽어있었고 실계좌 대사 사고도 하나 터졌습니다. 반복되던 그래픽카드 인식 실패의 진짜 원인도 오늘 찾아 고쳤습니다.
- 새 증권사 계좌를 공유계좌로 재설계하고 첫 실거래를 냈다개인 자금과 봇 자금이 섞여 있는 새 계좌를 위해 안전장치 전체를 다시 설계했고, 그 계좌로 첫 실주문이 나갔고, 계좌 간 자금 이관 방식도 은행이체 없는 자동전환으로 확정했습니다
- 증권사 로그인 자격증명 로딩 순서 버그와 유출 위험을 잡은 하루증권사 API 로그인이 매번 실패하던 원인을 찾다가, 고치지 않고 배포했으면 열렸을 뻔한 정보유출 구멍까지 함께 막았고, 별도로 종목 유니버스 편입 규칙에 완충을 넣었습니다
- VRAM 정리 패치가 저녁 프로덕션 장애로 되돌아온 하루낮에 적용한 GPU 메모리 정리 패치가 저녁 프로덕션 3연속 실패로 돌아왔고, 별도로 증권사 API 페이지네이션 버그도 하나 잡았습니다
- 재발한 원장 오염과 자동화 함정을 뿌리부터 추적한 한 주이틀 연속 재발한 원장 오염 사고의 뿌리를 결국 찾아냈고, 그 사이 장중 관측 파이프라인과 GPU 확장으로 새 실험 트랙도 열었습니다
- 로컬 대형모델 100종목/10시간 목표 - 서버 튜닝과 원인 진단으로 보낸 하루벤치마크에서 이긴 설정이 실전에서는 오히려 손해였던 이유를 추적했고, 별도로 진행 중이던 통계 경보 하나도 최종 종결했습니다
- 몇 번이나 기각했던 그래픽카드를 오늘 결국 들였습니다 - AMD Radeon AI PRO R9700메인 카드로는 세 번 넘게 떨어뜨렸던 카드를, 목적을 바꿔서 다시 산 이야기
- 어제 남긴 우회 경로 허점과 오탐 버그 두 건을 마저 수선하다수동 라운드를 막던 하드코딩 문제를 근본적으로 고치고, 이틀째 재발한 테스트 오염과 야간 복구 로직의 오탐 원인도 함께 잡았습니다
- 야간 크래시 하나가 부른 하루 종일의 뒤처리어젯밤 배선 실수로 밤새 못 돈 배치를 아침에 발견해 복구하다가, 우회 경로의 허점과 이틀째 재발한 테스트 오염 버그까지 같이 잡았습니다
- 장중 MoE 섀도 실가동과 코스피·코스닥 후보풀 재조정새로 켠 관측 파이프라인에서 버그 세 개가 연달아 튀어나왔고, 같은 날 후보 종목 구성비도 바꿨다
- 구조 자문 리팩터링 4단계 실행과 사후검증, 그리고 재시작 자동화AI에게 프로젝트 구조를 통째로 봐달라고 했고, 고친 뒤엔 다시 검증까지 맡겼다
- 실거래 전환과 두 번째 증권사 연동, 그 사이 조용히 죽어있던 버그들이번 달 가장 큰 진전은 실거래 시작과 두 번째 증권사 병행운영이었고, 그 사이사이에서 며칠씩 티 안 나게 실패하고 있던 버그를 반복해서 걷어냈습니다
- 상주 프로세스 재시작 누락과 모의계좌 원장 오염, 하루 새 겹친 두 장애며칠째 조용히 멈춰 있던 갱신 프로세스와 증권사 API 스케일 오류가 만든 원장 오염 사고
- 두 번째 증권사 병행운영을 시작하며 잡아낸 조용한 버그들이번 주 가장 큰 진전은 새 증권사 실계좌 검증과 모의투자 병행운영 개시였고, 그 사이사이에서 며칠씩 티 안 나게 실패하던 버그를 여럿 걷어냈습니다
- 판정 조건이 몇 달째 성립을 못 하길래, 수동 확인을 자동 센서로 바꿨다시장 레짐 자동 감시와 AI 재검토로 찾아낸 야간 감시 공백 두 건
- 새 로컬 모델로 정식 전환, 그 옆에 예전 모델을 조용히 얹었다몇 주 끌어온 모델 비교를 끝내고 전환을 확정한 날, 완주 판정 버그 하나도 함께 잡았다
- GPU 작업 시간창 충돌 - 반복되는 실패를 인프라로 정리했다손으로 계산하던 안전 시간창을 코드로 옮기고, 실계좌에서 발견한 매매 되돌림도 함께 고쳤다
- 블로그를 옮겼습니다 - 티스토리에서 깃허브 페이지·Dev.to로글 쓰는 과정을 자동화하려다 보니, 결국 플랫폼 자체를 옮기게 됐습니다
- 그래픽카드 세대별 로컬 LLM 속도와, 우리 프로덕션이 매일 처리하는 토큰량모델명·서빙 설정·prefill/decode 실측치까지 전부 공개합니다 (2026-09-26 기준으로 재정리)
- 기가바이트 RTX 5090 AORUS MASTER ICE 구매 후기 - 그래픽카드 두 장을 한 장으로 정리했습니다나눠 쓰던 그래픽카드 두 장을 한 장으로 합치면서 달라진 것들을 정리했습니다
- 백로그 전수분류로 찾아낸 며칠째 조용히 죽어있던 버그들작업 목록을 처음부터 끝까지 다시 훑다가 여러 날 동안 티 안 나게 실패하던 기능 두 개를 발견했고, 두 번째 증권사 모의투자 병행운영도 시작했습니다
- 프로덕션 시작 시각을 당겼다가 발견한 순차 실행 문제, 그리고 새 증권사 연동 검증시작 시각을 앞당기면서 드러난 순차 실행 버그를 병렬 배칭으로 고치고, 새 증권사 API를 실계좌로 검증했습니다
- 07:30 리포트 안전장치 정리 + 그래픽카드 반품 결정 번복겹쳐 있던 방어장치를 하나로 정리하고, 지난주 반품하기로 했던 카드를 다시 쓰기로 했습니다
- 발행 인프라를 새로 짜고, 조용히 사라지는 신호들을 잡았다블로그 발행 방식을 바꾼 김에, 표본에 속지 않는 판단과 소리 없이 죽는 파이프라인을 잡아내는 계측을 함께 정비했습니다
- 주말 A/B 테스트 결과 판정 + 실행 파이프라인 안정성 보강성과가 더 좋아 보이는 표본에 속지 않게 결과를 정리하고, 실행 계측을 함께 보강했습니다
- 그래픽카드를 바꾼 뒤, 검증 도구들의 허점을 연달아 잡았다하드웨어 교체 판정이 한 주 동안 두 번 뒤집혔고, 자동 검증 도구 두 개가 조용히 오류를 놓치고 있었다는 게 드러났고, 실계좌에서는 사람이 두 번 직접 개입해야 했습니다
- 티스토리를 떠나 GitHub Pages + Dev.to로 - 발행 자동화 개편개발일지가 몇 주째 뜸했던 진짜 이유를 찾아 고치고, 발행 플랫폼 자체를 바꿨습니다
- 실거래 첫 주 - 준비, 시작, 그리고 보완월요일엔 마지막 점검만 했고, 화요일에 실거래를 시작했고, 수요일까지 이틀 동안 실제 운영에서만 드러나는 문제들을 하나씩 잡았습니다
- 주말 작업일지 - 전략 가설 정리와 실거래 준비 점검평일 사흘은 비교적 조용했고, 주말 이틀에 몰아서 세 가지 전략 아이디어를 검토해 접었고, 실거래 직전 마지막 점검에서 생각보다 큰 구멍들을 발견해 고쳤습니다
- 알림 정비 마무리, 성과 계산 오차, 그리고 회귀 사고주말을 사이에 두고 닷새를 정리합니다 - 알림 체계 정비를 마무리하다가, 모의계좌 성과 계산이 실제 잔고와 미묘하게 안 맞는다는 걸 발견했고, 하루 뒤엔 그 여파로 작은 회귀 사고까지 겪었습니다
- 미국 시장 이식 검토 - 기술은 가능해도 아직 이르다지난 며칠 고친 것들이 실제로 버티는지 확인한 하루였고, 동시에 이 시스템을 미국 주식 시장으로 옮길 수 있을지도 진지하게 검토해봤습니다
- 조용한 크래시, 기록 누락, 27시간 신호 침묵사흘 내내 "돈이 잘못 나간" 사고가 아니라 "아무 일도 안 일어난" 사고들을 쫓아다녔습니다 — 월요일 새벽의 조용한 크래시, 독자 제보로 찾은 성과 기록 누락, 그리고 서킷브레이커 상황에서 하루 넘게 이어진 신호 침묵까지
- 시스템 자산의 백업 체계 구축시작 이후 쌓아온 데이터가 단일 디스크 위에 있는 치명적 위험을 발견하고, 오프사이트 백업과 버전관계를 완전히 새로 꾸몄습니다
- 현금 배치 버그, 위험종목 안전망, 시계 오차 사고사흘 동안 새 기능보다는 이미 있던 것들을 촘촘하게 다듬었습니다 — 모의계좌 현금 배치 버그를 잡고, 지인이 알려준 종목 하나가 계기가 된 위험종목 안전망을 만들고, 재부팅 후 생긴 시계 오차 사고를 수습했습니다
- "환각"인 줄 알았던 버그를 잡고, 첫 실주문을 냈다실거래 준비 마지막 단계라 정신없이 작업하다 보니 그날그날 글 쓸 틈이 없었는데, 그 이틀 안에 데이터 버그 하나와 이 프로젝트의 첫 실거래가 같이 있었습니다
- 품고 있던 의심 두 가지, 검증해보니 둘 다 틀렸다네트워크 감시 프로그램에 대한 걱정을 다른 AI 자문에게 검증시켜봤더니 둘 다 반증됐고, 실거래 준비 쪽에서는 진짜 안전장치 버그를 하나 더 잡았습니다
- 첫 실주문 앞에서, 믿을 수 없는 것부터 다 끄집어냈다WiFi가 15초 끊긴 사고가 견고함의 원칙을 세우게 했고, 실제 돈이 나가는 코드를 감사하자 "아직 첫 주문을 넣지 말라"는 결론이 나왔습니다
- 첫 실주문 앞에서, 코드가 반대표를 던졌다실제로 돈이 나가는 코드를 다시 감사했더니 진짜 버그가 여럿 나왔고, 그 김에 증권사 선택도 다시 따져봤습니다
- 한국어로 물었는데 영어로 답했다 — 그리고 코드 감사 시즌데이터 넘기는 방식을 바꿨더니 리포트가 갑자기 영어로 나왔고, 그 김에 여러 곳을 감사했더니 실버그와 사각지대가 하나씩 나왔습니다
- 끊긴 건 15초였는데, 피해는 4시간 45분이었다와이파이가 잠깐 끊겼다가 조용히 반쪽짜리 연결로 남아있었던 사건과, 그 김에 다시 세운 "가장 싼 걸 가장 위험한 것에 의존시키지 말자"는 원칙
- 같은 유형의 버그를 또 잡았다, 이번엔 재발 자체를 막기로 했다큰 종목 이름을 못 알아보던 버그를 또 발견했고, 이번엔 고치는 대신 다시는 이런 일이 안 생기게 구조를 바꿨다
- 케이스를 바꿨더니, 미뤄뒀던 일이 한꺼번에 풀렸다두 번째 그래픽카드를 드디어 제대로 꽂았고, 그 김에 가장 중요한 종목 두 개가 몇 주째 데이터에서 빠지고 있던 것도 발견했다
- AI가 자신 있게 틀렸던 순간을 목격했다리포트를 검토해준 AI가 실제 실적을 "있을 수 없는 수치"라며 오염이라 판정했는데, 확인해보니 진짜였다
- 겉보기 지표를 의심하는 데서 시작해, 재현되는 속도로 끝난 한 주월요일 "제일 깨끗하다"던 모델이 사실 아무 근거 없이 돌고 있었다는 게 화요일에 드러난 뒤로, "겉보기 지표도 빨라진 속도도 그대로 믿지 말자"가 이번 주를 관통했습니다
- 어제 "뒤집었다"던 결과, 오늘 다시 파보니 더 복잡했다속도는 진짜 빨라졌는데 일관성이 흔들린다는 걸 알게 됐고, 그 와중에 전원 케이블 사고로 재부팅까지 겪었다
- 그래픽카드 확장, 일단 새 카드부터 갈아 끼워 테스트했다두 장을 같이 꽂기 전에 새 카드 안정성부터 확인했고, 예전에 "효과 없다"고 접었던 방법도 다시 꺼내 뒤집었다
- '조용히' 잘못되고 있던 것들을 하루에 세 개 잡았다생성이 끝없이 폭주하던 문제부터, 아침에 고친 게 저녁에 조용히 속도를 반토막 낸 것까지
- 몇 주째 미스터리였던 새벽 크래시의 진짜 범인을 찾았다메모리 문제의 진짜 원인을 찾아 고치는 김에, 프로덕션을 실수로 죽여버리기도 한 하루
- 요약 모델 말만 믿었다가 실계좌에 취소 안 되는 주문이 남았다새 자동투자 기능을 안전하게 검증하는 트랙을 만드는 김에, API를 잘못 추측했다가 겪은 사고까지
- 앙상블의 한 축이 6개월 넘게 완전히 비어있었다리서치 파이프라인 한 축이 사실상 무근거로 동작하던 이중 사고를 잡아내고, 그 김에 야간 프로덕션을 통째로 다시 짠 하루
- 로컬 LLM 3종 비교에서 찾아낸 숨은 실패 패턴들등급 분포만 봐서는 안 보였던 두 가지 실패 유형, 그리고 프레임워크 마이그레이션으로 잡은 구조화 출력 문제