Lucas Ferreira
크롤링 엔지니어
EveryInfra에서 Lucas는 웹 계열 API의 브라우저 핑거프린트 처리를 맡고 있습니다.
학력
- Universidade Federal de Minas Gerais, 컴퓨터과학 학사 (2010–2014)
경력
- Oxylabs (빌뉴스, 원격) — 스크래핑 엔지니어 → 프린시펄 엔지니어 (2016–2024)
Lucas Ferreira의 글
- Apify Twitter 스크레이퍼 대안: 검색, 프로필 게시물, 답글의 1,000행당 비용 실측
Apify Tweet Scraper V2의 표시 가격은 트윗 1,000개당 $0.40입니다. 저희가 측정한 검색 비용은 $0.0033이었습니다. 답글은 10~25배 저렴했지만 게시물당 50개로 제한됩니다.
- Reddit, 11월 13일 RSS 종료: 모니터링에서 달라지는 점
Reddit은 2026년 11월 13일 모든 RSS 피드를 중단합니다. 종료 전에 RSS와 데이터 API를 같은 시점에 수집해 비교했습니다. 게시물은 일치했지만 필드, 요청 속도 제한, 댓글 스레드는 달랐습니다.
- Reddit 댓글 수집은 왜 불완전할까: MoreComments를 빈 데이터로 취급하지 마세요
Reddit 댓글 트리, PRAW replace_more의 limit 의미, 펼쳐지지 않은 플레이스홀더, 댓글 수 불일치를 설명하고, 수집 누락, 답글 관계, 삭제 처리를 분석 결과에 반영하는 방법을 알아봅니다.
- Douyin 댓글 가져오기: 동영상 URL에서 답글 구조를 유지한 JSON까지
douyin.comments의 현재 파라미터에서 출발해 최소한의 요청으로 댓글을 읽고, 동영상 출처, 댓글 ID, 답글 관계를 보존하며, 한도, 빈 결과, 타임스탬프 파싱, 반복 관측을 처리하는 방법을 다룹니다.