코호트 파이프라인 비용, 생각보다 훨씬 많이 든다

트레이딩 봇을 만들거나, 대시보드 아이디어를 구현하거나, Hyperliquid에서 Smart Money 포지셔닝을 추적하고 싶은 펀드를 운영하고 있다면, 첫 번째 본능은 명확하다. 애널리틱스 파이프라인을 직접 구축하는 것이다. L1에서 원시 데이터를 가져오고, 지갑을 분류하고, 코호트 지표를 계산하고, 자체 API를 통해 제공한다. 얼마나 어렵겠어?

생각보다 훨씬 어렵고, 비용은 자릿수가 다르게 비싸다. 자체 코호트 파이프라인을 구축하기 시작하는 팀들은 일관되게 다섯 가지를 과소평가한다. 관련된 인프라 레이어의 수, 각 레이어가 소모하는 엔지니어링 시간, 파이프라인이 가동된 이후의 지속 비용, 세 달 후에 드러나는 데이터 품질 문제, 그리고 고위 엔지니어들이 본래 맡겨진 제품을 만드는 대신 배관 작업을 하는 기회비용이다.

이 글은 Hyperliquid 코호트 애널리틱스 파이프라인의 모든 레이어를 원시 체결 데이터 수집부터 프로덕션 API까지 단계별 현실적인 비용 추정과 함께 살펴본다. 목표는 단순하다. 빌더들이 실제 수치를 바탕으로 자체 구축 대 구매 결정을 내릴 수 있도록 충분한 정보를 제공하는 것이다.

코호트 파이프라인의 다섯 가지 레이어

코호트 애널리틱스 파이프라인은 데이터베이스 하나와 API 엔드포인트 몇 개로 끝나지 않는다. 각각 고유한 장애 유형과 엔지니어링 요구사항을 가진 다섯 개의 독립적인 인프라 레이어다. 그 중 하나라도 건너뛰면 전체가 무너지고, 그것도 조용히, 데이터가 이미 오염된 한참 후에야 발견하게 되는 방식으로.

레이어 1: 데이터 수집

모든 것은 Hyperliquid L1에서 원시 데이터를 가져오는 것에서 시작된다. RPC 노드 연결이 필요하고(Hyperliquid의 퍼블릭 엔드포인트는 분당 100 요청으로 제한되므로 전용 공급자가 필요하다), 포지션 업데이트 스트리밍을 위한 WebSocket 핸들러, 연결 끊김에 대한 재연결 로직, 스로틀링을 피하기 위한 속도 제한, 그리고 체결, 포지션, 주문 이벤트를 추출하기 위한 블록 파싱이 필요하다.

RPC 공급자 비용만으로도 상당한 반복 지출이 발생한다. Dwellir는 gRPC 스트리밍에 월 $299를 청구하며, 무제한 처리량을 위한 전용 클러스터는 월 $4,000부터 시작한다. 더 저렴한 옵션도 있지만(Chainstack은 2,000만 요청에 월 $49부터 시작한다), 거래소의 모든 체결을 처리하는 대용량 애널리틱스 파이프라인은 속도 제한을 금방 소진한다.

이 레이어만 해도 통상 약 200시간의 엔지니어링 시간이 소요된다. 복잡성이 숨어있는 곳은 엣지 케이스이기 때문이다. 노드가 블록 중간에 끊기면 어떻게 되나? 중단으로 인한 데이터 공백을 어떻게 감지하고 채우나? 이벤트를 놓치지 않으면서 Hyperliquid의 롤링 속도 제한을 어떻게 처리하나? 이것들은 이미 해결된 문제들이지만, 처음부터 풀려면 시간이 걸린다.

레이어 2: 지갑 분류

가장 올바르게 구현하기 어려운 레이어이자, 대부분의 팀이 가장 과소평가하는 레이어다. 코호트 분류란 Hyperliquid의 모든 지갑에 대한 누적 PnL을 계산하고, 각 지갑을 현재 퍼프 에쿼티 크기에 따라 분류하며, 분포에서 각 지갑이 해당하는 위치를 기반으로 행동 라벨을 부여하는 것을 의미한다.

우리 데이터는 16개의 행동 코호트를 사용한다. 크기별 8개(Shrimp부터 Leviathan까지)와 누적 PnL별 8개(Giga-Rekt부터 Money Printer까지)다. 각 코호트는 특정 달러 기준을 갖는다. 예를 들어, Smart Money 지갑은 누적 전체 PnL이 +$100K에서 +$1M 사이이고, Leviathan은 퍼프 에쿼티가 $5M 이상이다.

어려운 점은 초기 분류가 아니다. 새로운 체결이 들어올 때 분류를 정확하게 유지하는 것이다. 모든 거래는 지갑의 PnL과 잠재적으로 에쿼티를 변경하므로, 코호트 멤버십은 동적이다. 지난주에 Consistent Grinder였던 지갑이 $100K 기준을 넘어 오늘 Smart Money가 될 수 있다. 파이프라인은 들어오는 데이터 속도에 뒤처지지 않으면서 모든 체결에서 재계산 및 재분류를 해야 한다.

이 레이어에는 약 300 엔지니어링 시간이 필요하고, 분류가 프로덕션 정확도에 맞을 때까지 최소 두 달의 튜닝 기간을 예산에 포함시켜야 한다. 기준 근처에 있는 지갑들, 포지션을 빠르게 열고 닫는 계정들, 그리고 계정 마이그레이션에 걸친 PnL 연속성 유지의 어려움과 관련된 엣지 케이스들을 발견하게 될 것이다.

레이어 3: 스토리지와 컴퓨팅

코호트 지표는 시계열 데이터다. 핫 스토리지용 시계열 데이터베이스(최근 데이터, 빈번한 조회), 히스토리컬 백필용 콜드 스토리지(백테스팅을 위한 수개월치 포지션 및 체결 데이터), 집계를 위한 컴퓨팅 레이어(코호트 수준 포지셔닝, 편향 신호, 주문 흐름 요약), 그리고 데이터베이스를 과부하시키지 않고 반복 쿼리를 처리하기 위한 캐싱 레이어가 필요하다.

여기서 클라우드 비용은 데이터 볼륨에 크게 의존한다. Hyperliquid는 활발한 거래 시간 동안 분당 수천 건의 체결을 처리하며, 체결 수준의 세부 정보로 6개월치 포지션 이력을 저장하면 비용이 빠르게 쌓인다. 관리형 데이터베이스 서비스에 월 $1,000에서 $2,000, 그리고 원시 체결을 코호트 수준 지표로 변환하는 집계 작업의 컴퓨팅 비용이 추가로 발생한다.

엔지니어링 시간: 약 200시간. 초기에 내린 스토리지 아키텍처 결정은 나중에 변경하기가 비싸다는 복잡성이 따른다. 잘못된 시계열 백엔드를 선택하면 세 달 후 마이그레이션을 마주하게 된다.

레이어 4: API 레이어

지갑을 분류하고 코호트 지표를 계산했으면 이를 제공해야 한다. JWT 인증, 사용자별 속도 제한, API 버전 관리(클라이언트를 깨뜨리지 않고 엔드포인트를 발전시킬 수 있도록), 문서화, 오류 처리, 그리고 사용자가 선호하는 언어용 클라이언트 SDK가 필요하다.

웹훅 전달(코호트가 특정 기준을 넘을 때 푸시 업데이트) 또는 WebSocket 스트리밍이 필요하다면, 기본 REST API 위에 또 다른 복잡성 레이어가 추가된다. 각 전달 메커니즘은 자체 인프라가 있다. 메시지 큐, 연결 관리자, 재시도 로직, 그리고 데드 레터 처리다.

프로덕션 품질의 REST API에 약 150 엔지니어링 시간을 예산에 포함하고, 푸시 전달이 필요하다면 더 많이.

레이어 5: 모니터링과 유지보수

무언가가 깨질 때까지 아무도 예산에 포함하지 않는 레이어다. 파이프라인에는 업타임 알림(데이터 수집이 멈췄나?), 데이터 품질 검사(코호트 수치가 흘러가고 있나?), RPC 노드가 새벽 3시에 다운될 때를 위한 온콜 로테이션, 새 엔드포인트를 추가할 때의 스키마 마이그레이션, 그리고 잘못된 배포로 분류 상태가 손상될 경우의 파이프라인 복구 절차가 필요하다.

이것은 한 번 구축하고 끝나는 비용이 아니다. 영구적인 오버헤드다. 파트타임 온콜 엔지니어는 월 $5,000 이상의 비용이 들고, Hyperliquid는 24시간 거래되기 때문에 24/7 커버리지가 필요하다.

실제 월간 청구서

모두 합산하면 자체 코호트 파이프라인 운영의 지속적인 월 비용은 대략 이렇다:

| 비용 항목 | 월 예상 비용 | 비고 | | --- | --- | --- | | RPC 노드 공급자 | $300 ~ $4,000 | 처리량 요구사항에 따라 다름 | | 클라우드 컴퓨팅 | $1,500 ~ $2,500 | 집계 작업, API 서버 | | 데이터베이스 (관리형) | $1,000 ~ $2,000 | 시계열 핫 + 콜드 스토리지 | | 모니터링 및 툴링 | $200 ~ $500 | 알림, 로깅, 대시보드 | | 온콜 엔지니어링 | $5,000+ | 파트타임, 24/7 커버리지 | | 합계 | $8,000 ~ $14,000+ | 제품 코드 한 줄 작성 전 |

이것은 초기 엔지니어링 투자를 포함하지 않는다. 다섯 레이어에 걸쳐 850시간 이상이고, 크립토 경험이 있는 엔지니어의 혼합 시급 $150으로 계산하면 초기 구축에만 약 $125,000의 엔지니어링 비용이 든다. 더 낮은 단가라도 구축 작업이 고위 엔지니어의 3개월에서 6개월 풀타임 집중을 흡수한다.

팀들이 항상 과소평가하는 비용

인프라 청구서는 명백한 비용이다. 숨겨진 비용이 더 심각하다.

기회비용

최고의 엔지니어들이 6개월 동안 데이터 배관 작업에 시간을 쓴다. 수익을 창출하는 제품, 즉 트레이딩 봇, 포트폴리오 대시보드, 리스크 관리 시스템을 만들지 못한 6개월이다. 코호트 파이프라인은 인프라다. 구축하고 있는 것에 필요하지만, 사용자들이 돈을 지불하는 대상이 아니다.

데이터 품질 부채

코호트 분류는 그것을 공급하는 데이터만큼만 좋다. 누락된 체결은 잘못된 PnL 계산을 만들어낸다. 잘못된 PnL은 지갑을 틀린 코호트에 집어넣는다. 틀린 코호트는 틀린 신호를 만든다. 그리고 위험한 부분은 이 오류들이 조용하다는 것이다. 지갑이 잘못 분류될 때 파이프라인이 충돌하거나 오류를 던지지 않는다. 누군가가 하위 신호가 현실과 맞지 않는다는 것을 알아챌 때까지 그냥 자신 있게 틀린 데이터를 제공할 것이다.

데이터 품질은 출시 때 한 번 해결하는 문제가 아니다. 검증 파이프라인, 대조 확인, 주기적인 감사가 필요한 지속적인 규율이다. 예산에 포함시키지 않으면 코호트 데이터가 시간이 지남에 따라 실제 기준에서 벗어나는 것을 받아들여야 한다.

유지보수 부담

Hyperliquid는 빠르게 진화하고 있다. 새로운 자산 클래스(HIP-3 스팟 상장, 예측 시장), 프로토콜 업그레이드, API 변경 모두 파이프라인 업데이트를 요구한다. L1이 새로운 주문 유형을 도입하면 수집 레이어가 이를 처리해야 한다. 가스 메커니즘이 변경되면 체결 파싱이 깨질 수 있다. 모든 프로토콜 변경은 유지보수 작업을 만들고, Hyperliquid는 업데이트를 자주 출시하기 때문에 유지보수는 절대 멈추지 않는다.

구축이 의미 있는 경우

자체 구축 경로가 항상 잘못된 것은 아니다. 두 가지 시나리오에서는 진정으로 유리하다:

커스텀 코호트 정의. 온체인 활동과 오프체인 신호를 결합하거나, 범용 API가 지원하지 않는 특정 전략 패턴을 중심으로 코호트를 정의하는 것처럼 표준 행동 세그먼트를 넘어서는 분류 로직이 필요하다면, 직접 구축하면 분류 엔진에 대한 완전한 제어권을 갖는다.

극단적인 규모. 애플리케이션이 월 200만 건 이상의 API 요청을 처리하고 보장된 지연 백분위수와 함께 커스텀 SLA가 필요하다면, 매우 높은 볼륨에서는 자체 구축이 결국 쿼리당 더 적게 들 수 있다. 하지만 손익분기점은 높고, 대부분의 팀은 얼마나 빠르게 거기에 도달할지를 과대평가한다.

다른 모든 경우에 수치는 한 방향을 가리킨다.

관리형 대안

HyperTracker의 Pulse 플랜은 월 $179에 21개의 REST API 엔드포인트를 통해 크기 계층 8개와 PnL 계층 8개를 포괄하는 16개의 행동 코호트를 모두 제공한다. 여기에는 월 50,000 API 요청, 5분 데이터 갱신, 포지션과 체결에 대한 6개월 이상의 히스토리컬 데이터, 청산 리스크 점수, 리더보드, 그리고 스탑 및 테이크프로핏 가시성이 있는 주문 흐름이 포함된다.

상위 플랜은 볼륨과 전달 옵션을 추가한다. 150,000 요청의 Surge는 월 $399, 웹훅과 400,000 요청의 Flow는 월 $799, WebSocket 전달과 200만 요청의 Stream은 월 $1,999다.

차이는 미묘하지 않다. $179/월에 직접 운영하면 월 $10,000 이상이 드는 인프라 스택의 결과물을 얻는다. 구축 시간 제로, 유지보수 부담 제로, 그리고 거래소 출시 이후부터 Hyperliquid 체결을 처리해온 팀이 보장하는 데이터 품질과 함께.

프로덕션 쿼리가 어떻게 생겼는지

다섯 개의 인프라 레이어를 구축하고 유지하는 대신, 단일 API 호출로 Hyperliquid의 모든 자산에 대한 코호트 수준 포지셔닝을 반환받는다:

curl -X GET "https://ht-api.coinmarketman.com/api/external/cohort-metrics?coin=BTC&start=2026-07-01T00:00:00.000Z" \
  -H "Authorization: Bearer YOUR_JWT_TOKEN"

응답은 코호트 수준 집계를 제공한다. 각 행동 세그먼트의 지갑 중 몇 개가 롱이고, 숏이고, 얼마나인지. 코호트 편향, 포지셔닝 델타, 진입/이탈 흐름. 수백 시간을 들여 구축해야 할 인텔리전스를 한 번의 호출로.

폴링 대신 푸시 전달을 원하는 빌더라면, 월 $799의 Flow 플랜에 코호트 포지셔닝이 설정 가능한 기준을 넘을 때 발동하는 웹훅이 포함되어 있다. "Money Printer 코호트가 ETH에서 순 숏으로 전환"에 대한 웹훅을 설정하면, 봇이 폴링 없이 그 순간 신호를 받는다.

파이프라인은 건너뛰고, 제품을 출시하라.

HyperTracker는 16개의 행동 코호트, 21개의 엔드포인트, 그리고 6개월 이상의 히스토리를 제공한다. 인프라를 구축하지 않고 데이터로 바로 구축을 시작하라.

HyperTracker 무료로 시작하기

결정 프레임워크

코호트 애널리틱스에 대해 자체 구축 대 구매를 저울질하고 있다면, 세 가지 질문을 해보라:

1. 코호트 애널리틱스가 핵심 제품인가, 아니면 그것을 위한 인프라인가? 제품 자체라면(애널리틱스를 판매하는 것이라면) 차별화가 중요하므로 구축이 맞다. 인프라라면(코호트 데이터를 소비하는 봇, 대시보드, 또는 펀드를 구축하는 것이라면) 구매가 수익을 창출하는 제품 레이어에 집중하게 해준다.
2. 커스텀 분류가 필요한가? 표준 행동 세그먼트(크기와 PnL 기반)가 사용 사례를 커버한다면, 그것을 다시 발명할 이유가 없다. 독점적인 분류 로직이 필요하다면 구축으로 완전한 제어권을 갖는다.
3. 3개월에서 6개월의 구축 시간을 감당할 수 있는가? 크립토에서는 시장이 빠르게 움직인다. 6개월의 파이프라인 구축은 트레이딩 제품이 라이브되지 못한 6개월이다. 출시 지연의 기회비용은 종종 자체 호스팅으로 인한 인프라 절감보다 크다.

자체 구축을 시작하는 대부분의 팀은 파이프라인의 진정한 범위가 명확해지는 처음 두 달 안에 관리형 API로 전환한다. 성공적으로 구축을 완료하는 팀들은 대체로 제품 쪽에 필요하지 않은 전담 인프라 엔지니어를 갖춘 자금이 풍부한 팀이다. 그것은 좁은 프로필이다.

어떤 경로를 선택하든, 실제 수치를 갖고 시작하라. 파이프라인은 생각보다 훨씬 많은 비용이 든다.