Google対SerpApi訴訟: ボット判定自体は論点ではない
2つの裁判所、同一のGoogleボット判定に対し、11日間隔で下された正反対の判決。Google対SerpApiの訴訟は、判定の背後にあるコンテンツの帰属こそが争点であることを示しています。
Search、Agent、Training: Webにおける新しいBotルール
CloudflareはBotの分類基準を振る舞いからSearch、Agent、Trainingといった目的に移行しました。9月15日のデフォルト設定は懸念されていたほど広範ではなく、1つのカテゴリが欠落しています。
Webスクレイピング市場の統合。何が変わるのか。
Oxylabsは評価額36億ドルで1億3000万ドルを調達。Bright DataはARR3億ドルを突破。ミッドマーケット向けのWebスクレイピングAPIは急速に消失しつつある。以下の5つの問いを確認すべきだ。
2026年にheadlessブラウザのリークが増加する理由
2026年、検知システムによりheadlessと通常のブラウザセッションの差が拡大した。本番環境でPuppeteerやPlaywrightを運用する場合、検知対策のコストを想定する必要がある。
Cloudflare Precursor: セッションが新たなフィンガープリントに
Cloudflareは7月13日にPrecursorをリリースした。セッション単位の行動検知により、ページを更新してもbotスコアはリセットされなくなった。その重要性を解説する。
Pay-Per-Crawlがウェブを二分する
CloudflareのPay-Per-CrawlマーケットプレイスとHTTP 402は、ウェブをライセンスデータとオープンデータに二分します。2026年にウェブデータを収集するチームにとって何が変わるのかを解説します。
LLM抽出の費用対効果が合わなくなるとき
Firecrawlでは、ページのスクレイピングに対して、LLMによる抽出には5倍の料金がかかります。1日10万ページ規模になると、この計算は破綻します。LLM抽出がそのコストに見合うケースと、そうでないケースを解説します。
2026年にプロキシプールサイズが重要でなくなった理由
ベンダーは4億個のレジデンシャルIPを宣伝しています。しかし2026年、防御策としてのIPレピュテーションは崩壊し、プロキシプールのサイズは実際の成功率を予測する指標ではなくなりました。
ポスト量子TLSとワイヤレベルのフィンガープリントが基本的なスクレイパーを破壊した
User-Agentヘッダーはもはや重要ではありません。接続レベルのフィンガープリントにより、ヘッダーが読み取られる前に98.6%の精度でボットが分類されます。2026年に何が変わったのかを解説します。
EU AI法が学習データの無秩序な収集に終止符を打つ
AI学習データの収集は、技術的課題からコンプライアンス課題へと変化しました。EU AI法とベンダーへの監視の強まりにより、2027年に向けてルールが再定義されます。