Delta Blue - https://delta.blue/docs bewerken

Naam

Start URL

De startpagina waar de crawler begint.

Update Frequentie

Overschrijft de standaard frequentie van de Knowledge Base.

Configureer hoe de crawler de website verwerkt.

Max pagina's

Maximum aantal pagina's dat gecrawld wordt. Leeg = ongelimiteerd.

Max diepte

Maximum aantal klikken diep vanaf de startpagina.

Max gelijktijdige requests

Aantal gelijktijdige requests naar de website.

Timeout (ms)

Timeout per pagina in milliseconden.

Patronen en selectors voor het crawlen.

Ignore patterns (regex)

Eén regex-patroon per regel. URLs die matchen worden overgeslagen.

CSS Selectors (JSON)

JSON-object met selectors voor title, content en exclude.