디지털 가든
로그인 없는 정원의 높은 담: 샤오홍슈의 구멍 영 판결, 위챗 공중호의 세 갈래 무로그인 파이프라인, 그리고 무료 수집 판도의 최종 결산
X의 지도가 그려진 뒤, 같은 라운드수 더하기 실지 시험의 방법론이 두 개의 새 전선으로 진군했다. 그리고 거울 한 면을 들고 돌아왔다. X의 개방과 샤오홍슈의 폐쇄는 현대 대크롤링 생태의 양극이다.
하나, 샤오홍슈: 구멍 영 개의 판결
샤오홍슈의 십 라운드 더 이십 라운드 더 보충의 결론은 차갑고 단단하다. 로그인 없이, 키 없이 쓸 수 있는 데이터 구멍은 존재하지 않는다. edith.xiaohongshu.com의 모든 API는 미인증이면 406이나 로그인 정보 없음을 돌려보낸다. X가 제공하는 og 메타 태그조차 없다. 공개 RSSHub 실례에 경로가 없고, x-s/x-t 서명 방식은 버전마다 흘러가며 독립 서명 라이브러리는 산 것이 없다. 짧은 링크는 풀려도 착지는 같은 서명의 담이고, CDN에는 핫링크 보호가 있다. 오픈소스계의 합의 경로는 MediaCrawler(별 육만구천)다. 산 브라우저 안에서 서명을 계산해 역공을 회피하는 것. 대가는 자기 계정으로 한 번 스캔해 로그인하는 것이다. 상용 플랫폼(신방/천관과)의 무료층은 순위표 요약뿐이다. 리스크 차원의 차이가 급소다. X는 IP 차원에서 관리한다(IP를 바꾸면 풀린다). 샤오홍슈는 계정 더하기 기기 서명 차원에서 관리한다(진짜 로그인 상태가 필수). 그래서 X는 GitHub Actions로 공짜를 할 수 있었지만, 샤오홍슈는 키 없는 공공 도구조차 만들 수 없다.
둘, 위챗 공중호: 세 갈래 파이프라인이라는 뜻밖의 수확
샤오홍슈의 정반대인 위챗 공중호는 실측으로 쓸 수 있는 무로그인 경로를 세 갈래나 내놓았다. 소가우이챗 검색(weixin.sogou.com)은 로그인 없이 진짜 결과를 돌려보내고, 한 페이지 이십 건, 페이지 넘김이 안정되며, 여섯 번 연발에도 제한이 없다. 이번 라운드 최대의 발견이다. 글 직접 링크(mp.weixin.qq.com/s/
셋, X 측의 십팔 라운드 추가: 줍기에서 천장까지
X의 지도도 확장한 뒤 수렴했다. 세 번의 검증은 syndication CDN의 단건 상세 엔드포인트를 파냈다(토큰을 트윗 ID에서 수학적으로 도출 가능, 무로그인 무키, 세 상세 소스 가운데 가장 안정). 다섯 라운드는 trends24 트렌드 사이트(인증 없이 전 세계와 지역별 핫 태그)와 Shitter(산 Nitter 포크의 이십일 실례표, 이원 소스 실례 발견의 착지)를 파냈다. 열 라운드는 Archive.org의 Twitter Stream Grab(Archive Team이 구출한 2006-2023 전량 트윗 스트림, 백삼십여 개 월간 항목, 무료 역사 데이터의 바른 길)을 파냈다. 두 개의 부정적 발견도 똑같이 값진다. guest token은 활성화되지만 GraphQL은 나그네에게 모조리 404/422를 돌려보낸다. 무로그인 경로는 2026년에 X가 봉쇄했다. x-client-transaction-id 라이브러리의 등장은 대크롤링이 아직 오르고 있음을 증명한다. 최종 판도는 여섯 부류로 정해졌고, IP당 하루 500~5,000건, Actions의 IP 교체로 만을 넘는다.
넷, 지도학의 종점
쉰여 라운드, 십여 개 검색엔진, 마흔여 개 엔드포인트의 실지 시험이 조사 자신의 국경을 그었다. 가벼운 무료 인터페이스란 정확히 RSS 미러, 매입 JSON, 트렌드 사이트, 역사 아카이브의 네 부류다. 그 너머는 계정과 유료의 영토다. 경로의 유통기한은 일에서 주 단위로 센다(vxTwitter는 몇 시간 만에 200에서 403으로 떨어졌다). 그러나 교체 기제는 죽지 않는다. 이 조사의 진짜 산출은 경로 목록이 아니라, 자기 손으로 경로를 발견하고 검증하고 교체하는 도구다. 지도는 낡는다. 측량술은 낡지 않는다.
댓글