Alle Beiträge

Web Scraping konsolidiert sich. Das ändert sich jetzt.

Oxylabs nahm 130 Mio. $ bei einer Bewertung von 3,6 Mrd. $ auf. Bright Data hat 300 Mio. $ ARR überschritten. Die Mid-Market Web-Scraping-API verschwindet schnell. Stelle diese fünf Fragen.

Unabhängige Anbieter für Web Scraping werden seltener

Am 9. Juli 2026 kündigte Oxylabs ein 130-Millionen-Dollar-Investment von Warburg Pincus bei einer Bewertung von 3,6 Milliarden Dollar an. Ihr Portfolio umfasste bereits Webshare (übernommen 2022) und ScrapingBee (übernommen 2025). Das ist kein Zufall. Es ist die aktuelle Form des Marktes.

Die Web-Scraping-API für den Mittelstand verschwindet. Nicht ein Anbieter nach dem anderen. Alle auf einmal.

Vor drei Jahren hattest du ein Dutzend verlässliche Optionen zwischen der Enterprise-Ebene (Bright Data, Zyte) und der Bastler-Decke (ein Shell-Skript und eine Proxy-Liste von GitHub). Heute sind die meisten Namen in der Mitte entweder gekauft worden oder haben ihren Pitch angepasst, um eine andere Zielgruppe zu umwerben. Das Muster ist so beständig, dass die Frage "Wem gehört dieser Anbieter in 18 Monaten?" nun auf dieselbe Evaluierungsliste gehört wie Uptime und Erfolgsrate.

Hier steht, was wirklich passiert und was du dazu fragen solltest.

Das Konsolidierungsmuster

Die Dateninfrastruktur-Kategorie, die 2026 auf 1,17 Milliarden Dollar geschätzt wird und bis 2031 auf 2,23 Milliarden Dollar wachsen soll, wächst schnell genug, um Private-Equity-Kapital anzuziehen. Sie ist aber klein genug, dass eine 130-Millionen-Dollar-Runde sie umkrempeln kann. Die öffentliche Darstellung des Oxylabs-Deals macht die Absicht klar: Kapital für Produktentwicklung in der Ära der AI-Agents, mit Raum für weitere Akquisitionen. Übersetzung: Rechne mit zwei bis vier weiteren Mid-Market-Deals noch in diesem Jahr.

Oxylabs ist nicht allein. Bright Data meldet über 300 Millionen Dollar Jahresumsatz und 50 Prozent Wachstum im Jahresvergleich, angetrieben hauptsächlich durch die Nachfrage nach Daten für KI. Zyte veröffentlicht kostenlose Branchen-Whitepapers und positioniert sich im oberen Marktsegment als die von Haus aus konforme Option. Firecrawl hat stillschweigend offizielle SDKs in sechs Sprachen (Python, Node.js, Go, Rust, Java, Elixir) sowie eine CLI ausgeliefert und vermarktet sich als "Web-Daten-API für AI-Agents". Nichts davon sind neutrale Schritte. Jeder ist ein Anspruch auf ein bestimmtes Käufersegment.

Was der Käufer sieht, sind weniger Namen in derselben Kategorie. Was der Käufer nicht sieht (und das ist wichtiger), ist die Änderung der Anreize, wenn ein ehemals unabhängiges Produkt zu einem Posten in einem größeren Portfolio wird.

Was du verlierst, wenn dein Anbieter übernommen wird

Der beste Fall: Ein Jahr lang ändert sich nichts. Die Gründer gehen leise, die Roadmap wird auf das Kundensegment der Muttergesellschaft neu ausgerichtet, und eines Morgens stellst du fest, dass deine Preisstufe eingestellt wird.

Der realistische Fall: Das Pricing wird auf Enterprise-Kunden ausgerichtet. Die Antwortzeiten bei Nischen-Bugs steigen, weil die Spezialisten, denen du früher geschrieben hast, nun drei Produkte betreuen. Die Docs erwähnen den alten Produktnamen an vielen Stellen nicht mehr. Und dein Account Manager, falls du einen hattest, wechselt zweimal in sechs Monaten.

Wir sagen das nicht, um die kaufenden Unternehmen schlechtzumachen. Der Post-Acquisition-Pitch von Oxylabs für ScrapingBee ist stimmig und ihr Engineering-Team ist gut aufgestellt. Aber wenn du ScrapingBee ursprünglich gekauft hast, weil du die einfachste API und keinen Enterprise-Sales-Prozess wolltest, hast du eigentlich Unabhängigkeit gekauft, nicht den Endpoint. Wenn der Endpoint bleibt und die Unabhängigkeit verschwindet, hast du die Hülle behalten und den eigentlichen Grund verloren.

Die gleiche Logik gilt für jede Übernahme. Du hast dich für Kompromisse entschieden, die die Gründer verteidigen wollten. Neue Eigentümer bringen neue Kompromisse mit. Manchmal bessere. Selten dieselben.

Der Full-Stack-Pitch und seine Kosten

Die andere Konsolidierungsgeschichte ist vertikal, nicht horizontal. Jeder ernstzunehmende Anbieter beeilt sich, eine "Full-Stack-Plattform" zu werden, die Proxies, Requests, Browser-Rendering, AI-Extraktion, Dashboards und MCP-Integration in einem Vertrag bündelt.

Browserless' State of Web Scraping 2026 prognostiziert, dass dies anhält: "Der Markt wird sich weiter konsolidieren, da Plattformen zu Full-Stack-Lösungen expandieren und Teams weniger fragmentierte Tools zusammenfügen müssen." Diese Darstellung ist großzügig gegenüber den Anbietern. Aus Käufersicht bedeutet ein Vertrag auch ein Preismodell, eine Bug-Queue, einen Point of Failure bei Problemen und einen Verhandlungspartner, der nun genau weiß, wie viel deiner Infrastruktur ihm gehört.

Full-Stack hat echte Vorteile. Einheitliche Abrechnung. Weniger Schnittstellen. Ein einziger Verantwortlicher, wenn etwas schiefgeht. Aber es ändert die Antwort auf eine bestimmte Frage: Wenn ein kleiner Teil des Stacks veraltet, hast du dann noch die Möglichkeit, ihn auszutauschen? Full-Stack-Plattformen sagen dazu meist ja und raten dir dann subtil davon ab.

Wie du Anbieter in der Konsolidierungsära bewertest

Die alte Checkliste zur Bewertung war meist technisch: Erfolgsrate, Latenz, Proxy-Pool-Größe, Unit-Preis. Diese Dinge zählen immer noch, aber sie sind der einfache Teil. Der schwierige Teil ist nun die Absicht.

Stelle dem Anbieter diese fünf Fragen, bevor du etwas unterschreibst:

  • Wem gehört die Roadmap in 18 Monaten? Wenn die Antwort "wir können es nicht sagen" oder "unsere Muttergesellschaft entscheidet" beinhaltet, hast du deine Antwort.
  • Was waren deine letzten drei Preisänderungen und wem haben sie geholfen? Ein Anbieter, der ständig Tier-Namen ändert und leise die billigen Tarife einstellt, sagt dir, welches Kundensegment er wirklich will.
  • Zeig mir einen Bugfix vom letzten Monat für einen Kunden unter 1.000 $/Monat. Das filtert nach der Support-Qualität für Kunden, die nicht die wichtigsten sind.
  • Was ist deine Kapitalquelle und worauf ist sie optimiert? PE-gestützt bedeutet Wachstum bis zum Exit. Gründergeführt bedeutet Wachstum bis zur Unabhängigkeit. Beides ist legitim. Sie sind nicht dasselbe.
  • Wenn wir dir entwachsen oder du übernommen wirst, wie gehen wir? Ein Anbieter, der Vertrauen in die Beziehung hat, wird direkt antworten. Ein Anbieter, dem die Frage unangenehm ist, sagt dir damit etwas.

Nichts davon sind Fangfragen. Sie filtern nur, ob du ein Produkt oder ein Portfolio kaufst.

Zwei verwandte Artikel, die wir veröffentlicht haben, sind neben diesen lesenswert: warum die Größe von Proxy-Pools 2026 keine Rolle mehr spielt behandelt die Anbieter-Marketing-Seite derselben Geschichte und der Stand der Web-Datenerfassung im Jahr 2026 gibt den breiteren Kontext vor, aus dem wir arbeiten.

Was als Nächstes kommt

Der Mittelstand wird sich bis 2026 und in 2027 weiter ausdünnen. Mindestens zwei der aktuellen Tier-2 API-First Anbieter werden übernommen oder abgewickelt. Der Käufer, der 2024 dem "independent, developer-first, no-enterprise-motion" Pitch geglaubt hat, muss diese Entscheidung bis 2027 erneut treffen, aus einem kleineren Menü.

Der Vorteil: Die Anbieter, die in diesem Zyklus unabhängig bleiben, tun dies mit Absicht. Das ist ein Signal, auf das man achten sollte. Frag sie, warum sie nicht verkauft haben. Wenn die Antwort lautet: "Das hatten wir nicht nötig", hast du wahrscheinlich gefunden, wonach du gesucht hast.

Wir bauen Web-Dateninfrastruktur bei FourA. Wir verschwinden nicht und wir brauchten keine 130 Millionen Dollar, um das zu sagen.