Content Graph
Worum es auf jeder Seite oder in jedem Video geht, nachdem wir den Inhalt gelesen und vektorisiert haben.
Für Publisher
Wir kaufen nur Seiten, die wir gelesen haben. Wenn unser Crawler Ihre Seiten nicht erreichen kann, können wir sie nicht lesen. Ihn zu blockieren, entfernt Ihr Inventar aus unseren Plänen, statt es zu schützen.
01Was der Crawler sieht
02User Agent
User Agent
CWireBot03Crawl-Rate
Standardmässig eine Anfrage pro Sekunde und Host, auf Wunsch weniger. Wir beachten Retry-After und drosseln bei 429 oder 5xx.
04Was der Crawler tut
Er liest und vektorisiert Artikeltext, um zu bestimmen, worum es inhaltlich geht, und erfasst, wo Werbeplätze im Layout sitzen. Er erhebt keine personenbezogenen Daten und folgt weder Formularen noch geschützten Bereichen.
Worum es auf jeder Seite oder in jedem Video geht, nachdem wir den Inhalt gelesen und vektorisiert haben.
Was jedes auditierte Placement geliefert hat, Einheit für Einheit erfasst.
05Anleitungen zur Freigabe
Security · WAF · Custom rules. Create a rule with the Skip action.
(http.user_agent contains "CWireBot")
→ Action: Skip
→ Skip: All remaining custom rules, Bot Fight Mode, Rate limitingFragen
Weil C Wire nur Seiten kauft, die es gelesen hat. Wenn der Crawler Ihre Seiten nicht erreichen kann, können sie nicht gelesen werden. Ihn zu blockieren, entfernt Ihr Inventar aus jedem Plan, statt es zu schützen.
Artikeltext, um den Inhalt zu verstehen, sowie die Position von Ad Units im Layout. Er erfasst niemals personenbezogene Daten und folgt keinen Formularen oder Login-Bereichen.
Standardmässig ein Request pro Sekunde pro Host, auf Anfrage weniger. Er berücksichtigt Retry-After und drosselt bei jeder 429- oder 5xx-Antwort.
Über den veröffentlichten User-Agent und die IP-Bereiche, als Bereich statt als Einzeladresse. Anleitungen für Cloudflare, Akamai, Fastly, AWS WAF und robots.txt finden Sie auf dieser Seite ohne Formular.
06Crawl für Ihre Website anfragen
Senden Sie uns die Domain, wir bestätigen das Crawl-Fenster. Keine der Anleitungen oben steht hinter einem Formular.
Nächster Schritt
Ein Tag, kein Umbau, und eine Durchsicht, wie unsere Formate in Ihr Layout passen. Oder Sie geben zuerst nur den Crawler frei.