Xiaohongshu, Douyin, Bilibili 등 주요 자매 미디어 플랫폼의 공개 콘텐츠 데이터를 암호화 알고리즘 역공학 없이
요약
Xiaohongshu, Douyin, Bilibili 등 7개 주요 미디어 플랫폼의 공개 데이터를 수집할 수 있는 Python 기반의 크롤링 도구입니다. Playwright를 활용해 암호화 알고리즘 역공학 없이도 효율적인 데이터 수집을 지원합니다.
핵심 포인트
- 7개 주요 플랫폼(Xiaohongshu, Douyin 등) 지원
- Playwright 기반 브라우저 자동화 활용
- 암호화 알고리즘 역공학 없이 데이터 수집 가능
- 로그인 상태 저장 및 시그니처 파라미터 검색 기능
Xiaohongshu, Douyin, Bilibili 등 주요 자매 미디어 (self-media) 플랫폼의 공개 콘텐츠 데이터를 암호화 알고리즘 (encryption algorithms) 역공학 (reverse-engineering) 없이 원클릭으로 수집
https://github.com/NanmiCoder/MediaCrawler
Xiaohongshu, Douyin, Kuaishou, Bilibili, Weibo, Baidu Tieba, Zhihu의 7개 플랫폼에서 콘텐츠 및 댓글 크롤링 (crawling)을 지원하는 Python 기반의 다중 플랫폼 자매 미디어 데이터 수집 도구입니다.
이 도구는 Playwright 브라우저 자동화 프레임워크 (browser automation framework)를 활용하여 로그인하고 로그인 상태를 저장하며, JS 표현식 (JS expressions)을 통해 시그니처 파라미터 (signature parameters)를 검색함으로써 복잡한 암호화 알고리즘의 역공학을 피합니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 X @qingq77 (검증됨)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기