Crawler tal-web
Content version:
Dwar GrimlaBot
GrimlaBot huwa l-crawler ta’ Grimla, servizz għall-iskoperta ta’ prodotti minn ħwienet online ivverifikati. Iżur ħwienet online biex jiġbor l-informazzjoni kummerċjali pubblika għall-katalgu tal-verifika tagħna — l-istess data li ħanut huwa obbligat juri. Jidentifika ruħu bħala GrimlaBot u jagħti link għal din il-paġna.
Kif tagħraf GrimlaBot
- L-user agent tiegħu huwa
Mozilla/5.0 (compatible; GrimlaBot/1.0; +https://grimla.com/bot). - GrimlaBot requests are identified by the user agent and a cryptographic Web Bot Auth signature. Public keys are published at https://grimla.com/.well-known/
http-message-signatures-directory . - While all nodes use exits, /bot/ips.txt contains comments only. Rotating exit addresses are not published. If direct mode is enabled, the file lists only the direct nodes' request addresses.
X’naraw
- Il-paġna ewlenija u l-paġni kummerċjali pubbliċi tiegħek (dettalji tal-kumpanija, termini, privatezza, ritorni, kuntatt)
- Ftit paġni tal-kategoriji biex naraw x’tbigħ
- Għal ħwienet elenkati, il-feed tal-prodotti tiegħek — biex il-prezzijiet jibqgħu aġġornati, jiġġedded madwar darba kuljum
Kif jaġixxi GrimlaBot
- Jaqra biss għadd żgħir ta’ paġni għal kull ħanut
- Jillimita kemm jagħmel talbiet fl-istess ħin
- L-ewwel jiċċekkja l-
robots.txttiegħek
Agħżel li ma tipparteċipax — waħda minn dawn biżżejjed
- Żid dan mal-
robots.txttiegħek:User-agent: GrimlaBot Disallow: / - Jew żid dan fit-
<head>tal-paġna tiegħek:<meta name="grimlabot" content="noindex"> - Jew ibgħat email lil [email protected] minn indirizz fid-dominju tal-ħanut tiegħek biex nikkonfermaw li t-talba tassew ġejja minnek.