validateルールが「成功」の基準を決定する
validateルールを使用して、どのresponseを成功とするかを宣言できます。許容された200以外のresponseも正しく課金され、Activityフィードに成功として表示されるようになりました。
Playground: DashboardでRequestを作成してテストする
Dashboard内にPlaygroundをリリースしました。endpointを選択し、フィールドを入力してSendをクリックし、curlをコピーするだけです。3つのendpoint、1つのcookie jar、すべてのheaderに対応しています。
420万リクエスト全体でレスポンス時間を2.5秒から1秒未満に短縮
24時間で420万リクエスト。平均774ミリ秒で、前週の2.5秒から短縮。実際のパーセンタイルとともに、リクエストパスで何が変更されたかを紹介します。
Web Unblockerの内部：Unblockerフラグの実際の動作
1つのフラグで3つのスイッチ（実際のブラウザのheader、一致するTLS fingerprint、gzipとbrotliの自動展開）を切り替えます。変更点とその理由を解説します。
リダイレクト制御とRaw Bufferモード
FourAのAPIが、カスタマイズ可能なリダイレクト制限と生のバイナリレスポンスに対応しました。実際のスクレイピングにおけるエッジケースの処理方法を変える2つのオプションです。
Browser Tasks: JavaScriptを多用したサイトをスクレイピングする方法
現代のウェブサイトの70%以上は、コンテンツのレンダリングにJavaScriptを必要とします。HTTP requestが空を返す場合に、FourAのbrowser tasksを使って完全なページを取得する方法を解説します。
ダッシュボードのアナリティクスと使用状況インサイト
ドメインごとの request 数、成功率、レスポンス時間、コストの内訳。FourA のアナリティクスダッシュボードは、何が機能しており、次にどこを最適化すべきかを示します。
Smart Proxy Routingのご紹介
FourAは、ターゲットサイトの防御に基づいて、すべてのrequestに対して最適なproxyタイプとロケーションを自動的に選択するようになりました。成功率は最大23%向上しました。