콘텐츠로 이동
개발 기록
← 전체 글

404는 돌려줬지만 요청한 경로는 남기지 않은 로그

허니팟을 처음부터 만드는 건 처음 구상한 프로젝트보다 훨씬 어려운 주제가 될 것 같았다. 그래서 기존 허니팟을 활용하기로 하고, 웹 요청을 관찰할 후보인 OpenCanary에 직접 입력을 보내 봤다. 존재하지 않는 경로를 요청하고, 쿼리나 POST 본문도 넣었다.

서버는 요청에 응답했지만, 로그에서 얻을 수 있는 정보는 기대보다 적었다. 아래 사례는 에이전트와 함께 별도 클라이언트에서 보낸 시험 요청이며, 실제 공격을 수집한 운영 기록은 아니다.

존재하지 않는 경로를 요청하면 서버는 404를 반환했다. 요청이 서버에 도달해 처리됐다는 것은 알 수 있었다. 그러나 나중에 cheesetrap에서 이 요청을 검토하려면, 어떤 경로를 요청했는지가 로그에도 남아 있어야 했다. 기본 웹 로그에는 그 내용을 확인할 요청 기록이 없었다.

로그가 전혀 나오지 않는 상태는 아니었다. opencanary.log에는 시작 메시지와, 로거의 동작을 확인하려고 보낸 로그인 페이지 요청이 남았다. 여기에는 시각과 연결 주소가 있었지만, 신고문에 담으려던 메서드와 전체 경로, 헤더와 본문을 설명하기에는 정보가 부족했다.

이 공백은 관찰성의 문제로도 볼 수 있었다. 남은 기록으로 요청의 내용과 확인 가능한 범위를 파악할 수 있어야 했다.

로그를 살피다 보니 별도의 접근 로그에 시험용 비밀 값을 넣은 쿼리 표식이 원문으로 남아 있었다. 다만 이건 허니팟이다. 온갖 시도가 들어올 텐데, 그 안의 비밀 값을 평문으로 남겨야 할지 가려야 할지 생각이 오갔다. 일단은 가리기로 했다. 그래서 필요한 요청 내용을 보충하면서, 이런 값이 다른 로그에 복사되는 경로도 함께 정리해야 했다.

없는 정보를 수집기에서 만들 수는 없었다

섹션 제목: “없는 정보를 수집기에서 만들 수는 없었다”

이미 기록된 정보라면 수집기에서 필드 이름을 맞추거나 관련 로그를 연결할 수 있다. 하지만 처음부터 남지 않은 경로나 본문은 그런 가공으로 되살릴 수 없다. 수집기에 넘기기 전에, 엔진이 남기는 내용부터 달라져야 했다.

남은 방법은 허니팟을 새로 만들거나 기존 도구를 보강하는 것이었다. 새로 만드는 건 처음부터 피하려던 일이었으므로, OpenCanary가 요청을 읽는 쪽에 기록을 추가하기로 했다. 이 엔진은 Twisted라는 프레임워크로 HTTP 요청을 처리한다. 기존 파서가 읽은 경로와 헤더, 본문을 그 과정에서 관찰하고, 요청별 JSON 레코드를 한 줄씩 별도 파일에 남기도록 보강했다.

HTTP와 HTTPS의 요청 처리 객체를 만드는 두 지점을 수정하고 기록 모듈을 붙였다. 이 범위에서 필요한 정보를 확보할 수 있어, HTTP 파서를 새로 만들거나 Go로 별도 허니팟을 구현할 필요는 없었다.

대신 기존 엔진의 내부 동작에 맞춘 코드를 유지해야 했다. OpenCanary나 Twisted의 버전이 바뀌면 보강 코드도 다시 확인해야 한다. 원본 모듈이 예상한 파일인지 해시로 검사하고, 업데이트할 때 같은 입력을 보내 결과를 비교하도록 했다.

본문이 비어 있다는 것만으로는 알 수 없는 일

섹션 제목: “본문이 비어 있다는 것만으로는 알 수 없는 일”

요청을 읽는 지점에 기록을 추가해도 모든 내용을 그대로 저장할 수는 없다. 큰 본문이 들어올 수도 있고, 전송 도중 연결이 끊길 수도 있다. 이런 요청을 처리한 뒤 본문 칸만 비워 두면, 애초에 본문이 없었는지 기록하는 과정에서 빠졌는지 구분하기 어렵다.

본문은 최대 16 KB까지만 보관하고, 실제로 받은 양은 따로 세도록 했다. 제한을 넘으면 잘렸다는 사실을 남겼다. 경로와 헤더, 최종 로그 한 줄에도 크기 제한을 뒀다.

비밀 값을 가리는 과정에서도 일부 내용을 남기지 못할 수 있었다. 알려진 비밀 필드는 가리되, 깨지거나 잘린 입력을 안전하게 가릴 수 없다면 값을 억지로 남기지 않았다. 대신 사용할 수 없다는 unavailable 표시와 이유를 기록했다. 기본 접근 로그에 원문이 다시 복사되는 경로도 억제했다.

누락 이유를 알더라도, 신고 판단에 필요한 정보가 빠졌다면 해당 기록만으로 판단을 진행해서는 안 된다.

다시 보낸 요청은 무엇을 남겼나

섹션 제목: “다시 보낸 요청은 무엇을 남겼나”

보강 과정에서는 시험 자체도 손봐야 했다. 일부 입력은 본문 길이 선언과 실제 바이트 수가 달랐고, 연결 중단 사례에서는 요청이 서버에 도달했는지부터 확인해야 했다. 이를 보정한 뒤 같은 입력을 기본 엔진과 보강 엔진에 다시 보냈다.

최종 비교에는 HTTP와 HTTPS 각각 19개씩, 총 38개 요청을 사용했다. 기본 엔진의 로그에는 여전히 시작 메시지와 로그인 페이지 요청만 남았다. 보강 엔진에서는 보낸 요청마다 하나씩, 38개의 레코드를 확인할 수 있었다. 각 레코드에는 읽어 들인 요청 내용과 함께, 잘리거나 남기지 못한 정보가 있다면 그 이유가 표시됐다. 기본 접근 로그에 남았던 시험용 비밀 표식도 보강 후 확인한 로그에서는 발견되지 않았다.

요청마다 기록이 생겼다고 해서 내용을 하나도 빠짐없이 저장한 것은 아니다. 본문이 잘린 사례와 필수 값을 남길 수 없었던 사례도 있었다. 이런 요청을 검토할 때는 로그에 표시된 한계를 함께 읽어야 한다.

이 비교는 OpenCanary 0.9.10과 Twisted 26.4.0을 사용해 Linux ARM64 서버와 별도 macOS 클라이언트 사이의 공개 IPv4 경로에서 수행했다. 입력은 해당 클라이언트 주소로 제한했다. 시험 이벤트는 자동 신고 대상에서 제외했고 실제 신고도 보내지 않았다.

이 결과를 근거로 cheesetrap의 초기 웹 엔진은 기록을 보강한 OpenCanary를 사용하기로 했다. 요청 내용과 빠진 정보의 이유가 함께 남으면서, 수집기가 가져와 검토 화면에 보여 줄 기록이 마련됐다.

덧붙임(2026-11): 지금도 보강한 OpenCanary를 쓰고 있다. 버전이 바뀔 때마다 보강 코드를 계속 확인해야 할 것이다. 그게 어려워지면 HTTP 요청을 어떻게 기록할지, 기존 OpenCanary로는 정말 안 되는지, 다른 허니팟은 없는지 다시 판단해야 한다.