Strukturänderung, Blockierungsbewältigung, Berechnung der gesamten PM-Arbeitslast für 3 Jahre TCO-Vergleich
Lesezeit: 7 Minuten | Januar 2026
Schlüsselzusammenfassung
In den Crawling-Outsourcing-Angeboten steht nur "Entwicklungskosten". Aber nach der Erstellung beginnen die Kosten zu steigen. Wenn man Strukturänderungen, IP-Blockierungen, interne Managementressourcen hinzufügt, belaufen sich die zusätzlichen Kosten über 3 Jahre auf das 2- bis 3-fache des ursprünglichen Angebots.
| Projekt-Outsourcing | Credits (klein) | Abonnement (groß) | |
|---|---|---|---|
| Monatliche Kosten | Unregelmäßig (mehrere Millionen Won~) | 30.000~280.000 Won | 3.000.000~12.000.000 Won |
| Initiale Entwicklungskosten | 10.000.000~50.000.000 Won | 0 Won | 0 Won |
| Wartung | Separater Vertrag | Inklusive | Inklusive |
| Geeignete Fälle | Wirklich einmalig | Geringe Menge, unregelmäßige Sammlung | Große Menge, kontinuierliche Sammlung |
Für kleine Mengen ab 30.000 Won pro Monat, für große Mengen mit einem Abonnement. In beiden Fällen sind die Gesamtkosten niedriger als beim Outsourcing.
Die Falle des Outsourcings: Das Angebot ist nur für die erste Phase
Wenn man das Crawling auslagert, erhält man in der Regel ein solches Angebot:
"Crawler-Entwicklung: 20.000.000 Won. Lieferzeit: 4 Wochen."
Sauber. Gut für die Budgetierung, gut für die Genehmigung, beruhigend.
Aber das Crawling beginnt erst nach der Lieferung.
2. Phase: Die Website ändert sich
3 Monate nach der Lieferung des Crawlers. Die Zielseite hat die HTML-Struktur geändert.
Man kontaktiert das Outsourcing-Unternehmen. Die Antwort lautet:
"Es erfordert zusätzliche Entwicklung, die über den bestehenden Vertrag hinausgeht. 5.000.000 Won, 2 Wochen erforderlich."
Das ist keine Ausnahme. Die großen E-Commerce-Websites ändern ihre Frontends dutzende Male im Jahr. Das gilt auch für Nachrichtenwebsites und Immobilienplattformen.
Das Crawlen zu erstellen ist schwieriger als es zu pflegen.
3. Phase: Es wird blockiert
Eines Tages kommen keine Daten mehr herein. Es handelt sich um eine IP-Blockierung.
Man kontaktiert erneut das Outsourcing-Unternehmen. Diesmal ist der Kontakt schwierig. Sie arbeiten derzeit an anderen Projekten.
3 Tage später antworten sie: "Es ist erforderlich, die Blockierung zu umgehen. 3.000.000 Won, 1 Woche."
Während dieser 3 Tage fehlen die Preise der Wettbewerber. Man muss dem Vertriebsteam, das täglich Preise vergleicht, sagen: "Diese Woche haben wir keine Daten."
Strukturelle Gründe für diese wiederholten Vorfälle
Es ist nicht die Schuld des Outsourcing-Unternehmens. Das Geschäftsmodell funktioniert so:
- Der Großteil des Umsatzes des Outsourcing-Unternehmens stammt aus neuen Projekten.
- Die Wartung ist nicht rentabel.
- Neue Projekte haben Vorrang vor den dringenden Anfragen bestehender Kunden.
Im Gegensatz dazu ist ein Abonnement genau das Gegenteil. Da der Umsatz davon abhängt, dass bestehende Kunden gehalten werden, gibt es Anreize für eine schnelle Reaktion. Das Geschäftsmodell ist kundenorientiert.
3-Jahres-TCO-Vergleich: Szenario für den Betrieb von 3 Crawlers
Ein typisches Setup in Unternehmen:
- Betrieb von 3 Crawlers (Preise der Wettbewerber, Nachrichten, Stellenangebote)
- Strukturänderungen 4-mal pro Jahr für jede Website (konservative Schätzung)
- 2 Blockierungen pro Jahr
Projekt-Outsourcing
| Posten | Berechnungsgrundlage | Gesamt über 3 Jahre |
|---|---|---|
| Initiale Entwicklung | 20.000.000 Won pro Crawler × 3 | 60.000.000 Won |
| Strukturänderungen | 300.000 Won pro Vorfall × 12 Vorfälle pro Jahr × 3 Jahre | 180.000.000 Won |
| Blockierungen | 200.000 Won pro Vorfall × 6 Vorfälle pro Jahr × 3 Jahre | 36.000.000 Won |
| Internes Management (PM-Arbeitszeit) | 500.000 Won pro Monat × 36 Monate | 18.000.000 Won |
| Gesamt | 220.200.000 Won |
※ Die Kosten für die Anpassung an Strukturänderungen (300.000 Won pro Vorfall) sind ein Mittelwert zwischen einfachen Änderungen von 100.000 Won und umfangreichen Neuarbeiten von 500.000 Won. Tatsächlich variieren sie je nach Komplexität.
Hashscraper-Abonnement (Standard)
| Posten | Berechnungsgrundlage | Gesamt über 3 Jahre |
|---|---|---|
| Abonnementgebühr | 500.000 Won pro Monat × 36 Monate | 180.000.000 Won |
| Initiale Entwicklung, Änderungsanpassung, Blockierungsreaktion | Alles inklusive | 0 Won |
| Internes Management | Dedizierter Manager zugewiesen | 0 Won |
| Gesamt | 180.000.000 Won |
→ Ersparnis über 3 Jahre: 42.000.000 Won (19%)
"19% ist nicht viel, oder?" Richtig. Wenn man nur die Zahlen betrachtet, mag das stimmen.
Aber in dieser Berechnung fehlen drei Dinge.
Drei Unterschiede, die sich nicht in Zahlen widerspiegeln
1. Vorhersagbarkeit
| Monat | Outsourcing | Abonnement |
|---|---|---|
| Januar | 0 Won (keine Probleme) | 500.000 Won |
| Februar | 800.000 Won (2 Strukturänderungen) | 500.000 Won |
| März | 300.000 Won (1 Blockierung) | 500.000 Won |
| April | 500.000 Won (Änderung + Blockierung) | 500.000 Won |
Beim Outsourcing springt das Budget jedes Mal, wenn ein Problem auftritt. Es ist unmöglich, ein Quartalsbudget festzulegen.
Mit einem Abonnement bleibt der Betrag jeden Monat gleich. Es ist möglich, Budgets im Managementteam zu planen.
2. Reaktionsgeschwindigkeit
Outsourcing: Problem melden (1-2 Tage) → Angebot einholen (2-3 Tage) → Genehmigung (1-2 Tage) → Arbeit (3-7 Tage) = 7-14 Tage
Abonnement: Automatische Erkennung (ein paar Minuten) → Sofortige Reaktion (am selben Tag) → Abschluss (innerhalb von 24 Stunden) = innerhalb von 1 Tag
Der Unterschied in der Reaktionsgeschwindigkeit beträgt 7-13 Tage. Wenn das Monitoring der Wettbewerbspreise 2 Wochen lang ausfällt, verpasst man alle Preisschwankungen der Wettbewerber. Das spiegelt sich nicht im TCO wider, aber im Umsatz.
3. Risiko bei Vertragsende
Crawler, die durch Outsourcing erstellt wurden, verursachen Probleme, wenn der Vertrag endet:
- Code-Eigentum: Oft nicht im Vertrag festgelegt
- Wechsel des Anbieters: Es ist schwierig für einen neuen Anbieter, den Code des vorherigen Anbieters zu übernehmen
- Übergabe: Es entstehen Datenlücken während der Übergangszeit
Mit einem Abonnement endet alles, wenn man es nächsten Monat kündigt. Man kann es bei Bedarf erneut abonnieren. Es gibt keine Streitigkeiten über das Code-Eigentum.
"300.000 Won pro Monat für ein Abonnement sind zu teuer"
Stimmt. Nicht jedes Unternehmen kann sofort 300.000 Won pro Monat ausgeben.
Deshalb gibt es das Credits-Tarifmodell.
| Kategorie | Credits | Abonnement |
|---|---|---|
| Monatliche Kosten | 30.000~280.000 Won | 300.000~1.200.000 Won |
| Methode | Abrechnung je nach Verwendung | Monatlicher All-Inclusive-Preis |
| Geeignete Fälle | Geringe Menge, unregelmäßige Sammlung | Große Menge, kontinuierliche Sammlung |
| Initiale Kosten | 0 Won | 0 Won |
| Wartung | Inklusive | Inklusive |
Credits vs. Outsourcing: 30-facher Unterschied für dieselbe Aufgabe
Wenn man einen kleinen Crawl-Auftrag (einfache Website, monatliche Sammlung) vergleicht:
- Outsourcing: Initiale Entwicklung 300.000~500.000 Won + Separater Wartungsvertrag
- Credits: Ab 30.000~100.000 Won pro Monat, inklusive Wartung
Wenn das günstigste Outsourcing 300.000 Won beträgt, kann man mit demselben Geld Credits für 2,5 Jahre nutzen.
Wenn die Kosten für Credits monatlich über 300.000 Won steigen, kann man zu diesem Zeitpunkt über ein Abonnement nachdenken. Es ist nicht notwendig, sofort eine große Entscheidung zu treffen.
Empfehlungen je nach Situation
| Situation | Empfehlung | Grund |
|---|---|---|
| Einmalige Sammlung (Forschung, Veranstaltung) | Outsourcing | Keine Wartung erforderlich |
| 1-2 Websites, monatlich 1-2 Mal | Credits | Beginnen Sie ohne Belastung ab 30.000 Won pro Monat |
| Möchten es einfach testen | Credits | Sofortiger Start nach der Anmeldung möglich |
| 3+ Websites, tägliche Sammlung | Abonnement | Zusätzliche Crawler kostenlos, dedizierter Manager |
| Datenlücken beeinflussen den Umsatz | Abonnement | Störungen innerhalb von 24 Stunden beheben |
Die meisten B2B-Datensammlungen sind "kontinuierlich". Preisüberwachung, Wettbewerbsanalyse, Nachrichtensammlung. Es ist keine einmalige Angelegenheit.
Geschichten von Unternehmen, die von Outsourcing umgestiegen sind
"Wir haben das Outsourcing-Unternehmen in 2 Jahren 3 Mal gewechselt. Es war jedes Mal dasselbe Muster. Am Anfang waren sie gut, aber in der Wartungsphase wurden sie langsamer, und schließlich haben wir wieder gewechselt. Der Grund, warum wir zu Hashscraper gekommen sind, war nicht, dass es 'besser' ist, sondern dass wir aus diesem Kreislauf ausbrechen wollten."
— Leiter des Daten-Teams eines E-Commerce-Unternehmens C"Als ich die Outsourcing-Kosten auf Jahresbasis zusammengefasst habe, waren sie teurer als ein Abonnement. Wenn man die Angebotsanfrage, Genehmigung und die PM-Zeit für die Überprüfung zusammenrechnet, ist der Vergleich nicht möglich. Jetzt analysiert dieser PM Daten."
— CTO eines Finanzunternehmens F
Abschließende Vergleichstabelle auf einen Blick
| Vergleichspunkt | Projekt-Outsourcing | Credits | Abonnement |
|---|---|---|---|
| Initiale Kosten | 10.000.000~50.000.000 Won | 0 Won | 0 Won |
| Monatliche Kosten | Unregelmäßig | 30.000~280.000 Won | 300.000~1.200.000 Won |
| Zusätzlicher Crawler | Neuer Vertrag | Credits abziehen | Kostenlos |
| Strukturänderungsreaktion | Zusätzliche Angebotsanfrage (ab 300.000 Won) | Inklusive | Inklusive |
| Blockierungsreaktion | Zusätzliche Angebotsanfrage (ab 200.000 Won) | Inklusive | Inklusive |
| Reaktionsgeschwindigkeit | 7-14 Tage | Innerhalb von 24 Stunden | Innerhalb von 24 Stunden |
| Budgetvorhersage | Unmöglich | Möglich | Möglich |
| Code-Eigentum | Erfordert Absprache | Nicht vorhanden | Nicht vorhanden |
| Geeignete Größe | Einmalig | Klein, unregelmäßig | Groß, kontinuierlich |
Loslegen
Wenn Sie Crawling benötigen, aber nicht wissen, wo Sie anfangen sollen, ist es am schnellsten, einen Job mit Credits auszuführen.
- Sofortiger Start nach der Anmeldung
- Ab 30.000 Won pro Monat
- Inklusive Wartung
- Bei zunehmender Größe später auf ein Abonnement umsteigen
Mit Credits starten →
Beratung für Abonnements anfordern →
Hashscraper - Abonnieren Sie Daten anstelle von Crawling-Outsourcing.
