TechFlow Logo
로그인/ 회원가입
ETH 가스
Gwei
공포
gas
유튜브 추천 알고리즘에 불만을 느껴 Karpathy가 Claude로 2시간 만에 HackerTube 제작

유튜브 추천 알고리즘에 불만을 느껴 Karpathy가 Claude로 2시간 만에 HackerTube 제작

2026.11.02
공유하기
Karpathy는 방대한 데이터 마이닝부터 프로덕션 배포에 이르기까지 전체 과정을 종단 간으로 완수했습니다.

저자: TechFlow

핵심 요약: 최고 수준의 AI 연구자들이 상용 플랫폼의 알고리즘 추천에 지치를 느끼며 개인 소프트웨어 혁명의 서막이 조용히 열리고 있다. 11월 2일, 오픈AI 공동 창업자 안드레이 카루펫(Andrej Karpathy)은 유튜브의 획일화된 추천 시스템과 클릭 유도형 썸네일에 질린 나머지, 클로드(Claude)를 활용해 단 2시간 만에 자체적으로 비디오 사이트 '해커투브(HackerTube)'를 완성했다고 밝혔다.

이 실험의 핵심은 코드 작성 그 자체가 아니라, 기술 커뮤니티에서 지난 20년간 축적해 온 진정성 있는 지혜로 블랙박스 기반 추천 알고리즘에 맞서는 데 있다. 클로드가 해커 뉴스(Hacker News)의 약 4,300만 건 역사적 코멘트를 효율적으로 정제하고 의미론적 식별을 수행하는 기능을 바탕으로, 카루펫은 방대한 데이터 추출부터 프로덕션 배포까지 전 과정을 완성했다.

약 5억 토큰(Token)이 투입된 인간-AI 협력 과정에서 카루펫은 클라우드 인프라 설정과 API 키 관리만 담당했을 뿐, 코드 작성, 보안 강화 및 성능 최적화는 모두 에이전트(Agent)가 자율적으로 처리했다. 이러한 고효율 실습은 단순한 대안 제시를 넘어, AI 네이티브 풀스택 개발의 명확한 모범 사례를 제시했다.

2시간 완공 프로젝트: 알고리즘 조작과 자극적 썸네일 탈피

카루펫의 SNS 게시물에 따르면, 유튜브의 기계적이고 일괄적인 전달 메커니즘과 자극적인 과장된 썸네일에 지친 그는 플랫폼의 공식 추천 피드를 완전히 우회하여, 기어(Geek) 기술 미학에 순수하게 기반한 비디오 탐색 도구를 직접 제작하기로 결정했다.

이로써 탄생한 해커투브(HackerTube)는 극도의 미니멀리즘 스타일을 보여준다. 해당 사이트는 150개 수직 테마를 아우르는 6,454개의 양질의 영상을 수록했으며, 이들 모두 해커 뉴스(Hacker News) 커뮤니티에서 지난 20년간 축적해 온 내용을 기반으로 한다. 사용자는 별도의 로그인 없이도 이용할 수 있으며, 모든 데이터는 로컬에 저장되어 브라우저 기록 추적이라는 고민을 원천 차단한다.

해커투브는 조회수 경쟁을 위해 창작자가 고의로 설계한 과장된 커버아트를 완전히 배제했으며, 대신 스크립트를 통해 비디오 화면 중앙에서 정지 프레임 한 장을 자동으로 추출한다. 이는 반상업적 마케팅 관행에 반대하는 미니멀 디자인으로, 비디오 콘텐츠의 객관적 본질로 회귀시켜 악성 클릭베이트(Clickbait)로 인한 시각적 혼란을 방지했다.

4,300만 건 코멘트 속 보석 찾기: 듀얼 모델 연계 데이터 정제

광활한 인터넷의 파편들 속에서 고품질 기술 영상을 걸러내려면 백엔드 데이터 작업량이 매우 어마어마하다. 전체 절차에서 클로드는 해커 뉴스 창간 이후 누적된 약 4,300만 건의 역사적 토론 데이터를 망라식으로 정제하며 시작한다. 이를 통해 정규식 매칭을 활용해 잠재적인 비디오 대상 범위를 빠르게 좁힌다.

이어 시스템은 손넷(Sonnet) 모델을 호출해 정교한 의미론적 선별 작업을 진행한다. 모델은 프로그래머들이 문맥 속에 담긴 진정한 평가를 읽어내고, 진심 어린 추천과 영양분 없는 유령 광고를 효과적으로 분리해 내야 한다. 다중 순환 교차 검증을 거친 결과, 최종적으로 약 4만 건의 유효 추천 사항 중 귀중한 콘텐츠 인덱스를 추출해 냈다.

대형 언어모델(LLM)을 활용한 데이터 마이닝 역량은 강력한 산업화 레버리지 효과를 발휘한다. 과거에는 몇 주 동안 수동 검토가 필요했던 비정형 데이터 정제가, AI의 다중 필터링 파이프라인 덕분에 불과 수십 분 내에 완료되었으며, 이는 극소한 시간 비용으로 고품질 기술 지식을 추출했다는 의미다.

클로드 코드(Claude Code)가 주도하는 전 과정: 엔지니어는 인프라 지휘자로 후퇴하다

코드 작성 및 배포 단계에서 카루펫은 완전 무키보드(Unkeyed) 개발 환경을 경험했다. 전체 해커투브 프로젝트는 터미널 개발 도구인 클로드 코드(Claude Code)에 의해 완전히 추진되었으며, 논리적 아키텍처가 훨씬 강력한 옵러스 5.5(Opus 5.5)가 데이터 흐름, 웹사이트 풀스택 코드 및 배포 스크립트 작성을 담당한 것이다.

카루펫은 공개한 바에 따르면, 전체 2시간 동안 단 한 줄의 비즈니스 코드도 직접 작성하지 않았으며 터미널에 복잡한 명령어를 입력하지도 않았다. 오직 API 키를 수동으로 신청하고 도메인을 구매했을 뿐이다. 클라우드 서버 설정 초기화부터 서버 보안 강화 및 고수요 성능 최적화까지 모든 과정은 모델이 자율적으로 진행했다.

이러한 역할 분담은 명확한 협력 패러다임을 보여준다. 플래그십 모델인 옵러스 5.5(Opus 5.5)가 시스템 아키텍터이자 데브옵스(DevOps) 엔지니어 역할을 맡고, 가성비 높은 손넷(Sonnet)은 방대한 분류 작업을 처리하는 주요 파이프라인으로 기능한다. 개발자는 복잡한 구문 세부 사항으로부터 완전히 자유로워져 전역 비즈니스의 제품 관리자(Product Manager)와 요구사항 제안자로 전환되었다.

5억 토큰의 경제학: 개인 맞춤형 소프트웨어 시대의 도래

프로젝트 뒤에 숨겨진 연산 비용 역시 흥미롭다. 카루펫에 따르면 이번 작업에서는 총 5.04억 개의 입력 토큰과 760만 개의 출력 토큰이 소모되었다. 컨텍스트 프롬프트 캐싱 메커니즘 덕택에 입력 부분의 캐시 히트율이 약 90%에 달해 실제 컴퓨팅 비용을 대폭 절감했다.

이러한 연산 비용 중 90% 이상이 손넷(Sonnet)의 말집계 분류 작업에 할당되었으며, 핵심 아키텍처 구축과 웹사이트 배포 자체에는 약 100만 개의 옵러스(Opus) 토큰만 소모되었다. 이는 고부가 가치의 아키텍처 생성 비용이 이미 매우 저렴해졌음을 의미하며, 대부분의 연산 자원이 대규모 데이터 추론에 집중되고 있음을 보여준다.

현재 해커투브(HackerTube)는 정식 출시되었으며, 정제된 데이터셋 또한 대중에게 오픈소스로 공개되었다.