카파시, 클로드로 해커튜브 공개…유튜브 영상 6,454개 모았다

안드레이 카파시가 해커뉴스 토론에 등장한 유튜브 영상을 모아 탐색하는 독립 사이트 ‘해커튜브(HackerTube)’를 10월 31일 공개했다. 주제별 영상을 찾고, 어떤 맥락에서 소개됐는지 원래 댓글까지 확인하는 서비스다. 카파시는 클로드 코드의 맥 데스크톱 앱과 Opus 5.5로 약 두 시간 만에 만들었다고 밝혔다. 추론 강도는 기본으로 쓰는 Medium으로 설정했다.

카파시는 개발과 배포를 클로드에 맡겼으며, 유튜브 메타데이터용 API 키 생성과 서버 시작, 도메인 구매는 직접 했다고 설명했다. 영상의 대표 화면에는 업로더가 고른 썸네일 대신 영상 중간 시점의 프레임을 쓴다.

그는 해커뉴스 댓글에서 입력 약 5억400만 토큰과 출력 760만 토큰을 썼다고 설명했다. 입력의 약 90%는 캐시된 처리였으며, 전체 처리량의 90% 이상은 댓글에 분류표를 붙이는 Sonnet 작업이었다고 밝혔다. 카파시는 구독으로 작업했고 클로드에 사용량 합산을 맡겨 이 숫자를 얻었다고 했다.

사이트는 서로 다른 세 명 이상이 최소 세 달에 걸쳐 링크를 남긴 영상을 수집 대상으로 골랐다고 설명한다. Sonnet은 댓글과 토론 제목을 읽고 추천·단순 인용·농담·비판을 분류했다. 영상별로 보존하는 언급은 최대 20개다.

공개 통계에는 2007~2026년의 영상 6,454개와 영상 언급 기록 3만9,834건, 150개 주제가 담겨 있다. 자료는 주제를 16개 영역으로 묶고 있다. 이 수치는 사이트의 수록 범위이며 방문자나 시청자 규모를 뜻하지 않는다.

1,658개에는 긍정적 추천자 표시가 0명

AI Ping이 11월 2일 공개 영상 파일의 전체 기록을 대조한 결과, 긍정적 추천자가 0명으로 표시된 영상은 1,658개였다. 전체의 약 25.7%다. 파일 안의 AI 분류값을 센 결과이므로 실제 영상 품질을 평가한 수치와는 구분된다.

자료에 붙은 영상 종류도 함께 집계했다. 발표 영상으로 분류된 항목은 1,448개, 해설은 1,091개, 시연은 827개였다. 코미디로 표시된 567개와 음악 187개도 포함돼 기술 강연 전용 목록으로 좁혀지지는 않는다. 같은 파일의 서로 다른 영상 ID는 6,454개로 전체 행 수와 같았다.

카파시는 공개 뒤 이용자 의견을 받아 길이·게시일·영상 종류 필터를 추가했다고 밝혔다. 최근 해커뉴스에서 추천된 순서로 정렬하거나, 한 시간 넘는 영상을 ‘Longs’에서 찾을 수 있다. 한 페이지의 영상 최대 50개를 유튜브 임시 재생목록으로 여는 기능도 추가했다. ‘Hidden gems’ 필터는 해커뉴스에서 좋은 반응을 얻고 유튜브 조회수가 10만 회 아래인 영상을 찾는다.

개인화에는 회원 계정을 쓰지 않는다. 좋아요·시청 기록·나중에 볼 목록은 해당 브라우저에 저장된다고 사이트는 설명한다. 홈은 좋아한 영상과 비슷한 자료나 같은 해커뉴스 이용자들이 함께 추천한 자료를 섞는다. 영상 페이지에는 실제 댓글과 원문 링크가 붙는다. 재생에는 유튜브의 개인정보 보호 강화 임베드가 쓰인다.

개발자가 다른 화면이나 추천 도구를 만들 수 있도록 분석 자료도 배포했다. 10월 31일자 공개 배포 목록에는 영상 6,454행, 분류된 언급 3만9,834행, 150개 주제를 담은 파일이 각각 등록돼 있다. 관련 영상 관계가 있는 3,778개 항목과 검색용 데이터도 포함하며, 전체 ZIP 크기는 약 17.8MB다.

영상의 기본 순위는 추천이 나온 서로 다른 달의 수에 바탕을 두고 강한 추천이 있었던 달에 가중치를 더한다. 설명서는 요약과 분류를 언어모델이 작성했으며 일부 오류가 있을 수 있다고 명시한다. 댓글 본문은 1,500자에서 잘리고, 같은 강연이 다른 영상 ID로 중복 업로드됐을 가능성도 안내한다.

데이터는 ODC-By 1.0으로 공개하며 해커튜브와 원본 해커뉴스 데이터셋의 출처 표시를 요구한다. 유튜브 조회수·좋아요·길이·게시일 등은 배포에서 제외하며, 이를 더할 때는 영상 ID로 유튜브 Data API에서 따로 가져오게 했다. 카파시는 해커뉴스 댓글에서 사이트의 서버 코드는 공개하지 않았다고 밝혔다.