Der Crawler des Onpage-Projekts wird in der Regel einmal pro Woche gestartet. Wenn seit dem letzten Durchlauf sieben Tage vergangen sind, startet das System den Crawler automatisch. Es gibt insgesamt vier Optionen für den regelmäßigen Crawl, die du in den Einstellungen deines Projekts findest:
- Crawling immer manuell starten
- Jede Woche automatisch crawlen
- Zweiwöchentlich
- Alle 4 Wochen automatisch crawlen
Im Bereich Onpage deines Projekts ist es außerdem möglich, einen sofortigen Crawl durch einen Klick auf den Button „Crawler neu starten“ auszulösen, so lange das dein Kontingent an zu crawlenden Seiten zulässt. Den laufenden Crawl kannst du über den Button „Crawler stoppen“ anhalten.