Veebirobot
Content version:
GrimlaBotist
GrimlaBot on kontrollitud veebipoodide toodete avastamise teenuse Grimla veebirobot. See külastab veebipoode, et koguda meie kontrollikataloogi jaoks avalikku äriteavet — samu andmeid, mida pood peab näitama. Robot tutvustab end nimega GrimlaBot ja viitab sellele lehele.
Kuidas GrimlaBoti ära tunda
- Selle user agent on
Mozilla/5.0 (compatible; GrimlaBot/1.0; +https://grimla.com/bot). - GrimlaBot requests are identified by the user agent and a cryptographic Web Bot Auth signature. Public keys are published at https://grimla.com/.well-known/
http-message-signatures-directory . - While all nodes use exits, /bot/ips.txt contains comments only. Rotating exit addresses are not published. If direct mode is enabled, the file lists only the direct nodes' request addresses.
Mida me vaatame
- Teie avalehte ja avalikke ärilehti (ettevõtte andmed, tingimused, privaatsus, tagastused, kontakt)
- Mõnda kategoorialehte, et näha, mida müüte
- Loendis olevate poodide tootevoogu — hindade ajakohasena hoidmiseks uuendatakse seda umbes kord päevas
Kuidas GrimlaBot käitub
- Loeb poe kohta ainult väikese arvu lehti
- Piirab samaaegsete päringute arvu
- Kontrollib esmalt teie faili
robots.txt
Loobumine — piisab ühest võimalusest
- Lisage faili
robots.txt:User-agent: GrimlaBot Disallow: / - Või lisage oma lehe jaotisse
<head>:<meta name="grimlabot" content="noindex"> - Või kirjutage aadressile [email protected] oma poe domeeni aadressilt, et saaksime kinnitada, et taotlus pärineb tõesti teilt.