Kuidas Do4U veebilehti toob

Do4U on tööriistakast veebisaitidele. Mõned tööriistad loevad oma töö tegemiseks veebilehte. See juhtub ainult siis, kui klient sisestab aadressi ise või seadistab oma lehtede regulaarse kontrolli. Me ei skanni veebi omal algatusel ega loo otsinguindeksit.

Meie kasutajaagendid

Do4U-Reader/1.0 (+https://do4u.eu): Loeb üksikut lehte, mille aadressi keegi tööriista sisestas, näiteks veebisaidi kontrolli, ligipääsetavuse kontrolli või pealkirja ja kirjelduse jaoks. Loeb ka sisukaarte sisemiste linkide jaoks.
Do4U-Check/1.0 (+https://do4u.eu/bot): Loeb llms.txt generaatori jaoks robots.txt-faili, sisukaarti ja sama veebisaidi teisi lehti (piirang ülesande kohta: 8 lehte).
Do4U-Webhook/1.0 (+https://do4u.eu/bot): Teatab kliendile, et ülesanne on valmis, kliendi sisestatud aadressil.

Kui sageli

Üks leht ülesande kohta. Mitu lehte loeb ainult llms.txt generaator ja siis kuni ühe päringu sekundis.
Sisukaardid sisemiste linkide jaoks: kuni üks päring sekundis veebisaidi kohta.
Regulaarsed kontrollid (veebisaidi jälgimine) ainult kliendi sisestatud lehtedele, iga 30 päeva järel.
Järgime kuni kolme ümbersuunamist ega too kunagi sisevõrkude aadresse.

robots.txt

llms.txt generaator järgib robots.txt-faili: see ei loe lehti, mis on blokeeritud Do4U-Checkile või kõigile roomajatele. Avalehte, mille aadressi klient sisestas, loeb see alati.

Üksikut lehte, mille aadressi keegi otse sisestab, loetakse nii, nagu brauser seda loeb, robots.txt-ilt küsimata.

llms.txt generaatori blokeerimiseks kogu oma veebisaidil:

User-agent: Do4U-Check
Disallow: /

Kust päringud tulevad

Päringud tulevad meie oma serveritest Poolas, ELis. Kasutame loetut ainult vastava ülesande jaoks ja kustutame selle pärast säilitusaegade möödumist. Need leiad dokumendist Usalduskeskus.

Kontakt

Märkasid Do4U päringut, mis tundub vale? Uurime seda ja vastame. Palun kirjuta oma veebisaidi aadressi ja ligikaudse ajaga aadressile support@do4u.eu.