Lucas Ferreira
スクレイピングエンジニア
EveryInfraでは、Web系APIのブラウザフィンガープリントの扱いを担当しています。
学歴
- Universidade Federal de Minas Gerais、コンピュータサイエンス学士（2010–2014）
職歴
- Oxylabs（ヴィリニュス、リモート）— スクレイピングエンジニア → プリンシパルエンジニア（2016–2024）
Lucas Ferreiraの記事
- Apify Twitter Scraperの代替：検索、プロフィール投稿、返信の1,000件あたりの費用を実測
Apify Tweet Scraper V2の表示価格は1,000ツイートあたり$0.40です。実測した検索コストは$0.0033でした。リプライは10〜25倍安価でしたが、1投稿あたり50件が上限です。
- RedditのRSSが11月13日に終了：モニタリングで何が変わるか
Redditは2026年11月13日にすべてのRSSフィードを停止します。停止前に、RSSとデータAPIから同じタイミングでデータを取得しました。投稿は一致しましたが、フィールド、レート制限、コメントスレッドは一致しませんでした。
- Redditのコメント収集が不完全になる理由：MoreCommentsを空データとして扱わない
Redditのコメントツリー、PRAWのreplace_moreにおけるlimitの意味、未展開のプレースホルダー、コメント数の不一致について解説し、収集の欠落、返信関係、削除の扱いを分析結果に引き継ぐ方法を紹介します。
- Douyinのコメントを取得する：動画URLから返信構造を保ったJSONへ
douyin.commentsの現在のパラメータを確認するところから始め、最小限のリクエストでコメントを読み取り、動画の取得元、コメントID、返信関係を保持します。あわせて、上限、空の結果、タイムスタンプの解析、繰り返し観測への対処も扱います。