VendiBot
The web crawler of VendiGroup OÜ, Tallinn, Estonia (registry code 17467908).
Want us to stop visiting your site?
Add this to your
robots.txt — we read it before every site and obey it:
User-agent: VendiBot
Disallow: /
Or e-mail
abuse@vendigroup.eu. No reason needed; we answer within three working days and add the
domain to our stop list.
What we do
We build a European register of companies and of what they offer, so that buyers can find suppliers. VendiBot reads
public pages of company websites:
- the start page, contact page and imprint — to connect a domain to the right company and keep its business contact details current;
- for web shops, the product pages listed in the shop's own sitemap — the structured product data the page publishes
(name, brand, GTIN, price, availability, the address of the product image). We store the image address, not the image.
How we behave
- We read
robots.txt before a site and obey it. Our product and shop readers also honour Crawl-delay.
- At most one request per second per site in the shop reader; most sites get a few pages, once.
- We fetch HTML pages, XML sitemaps and
robots.txt. No forms, no log-ins, no site search.
- We never log in, and never bypass a paywall, a challenge page or any other bot protection. A site that answers us with a
block is left alone.
- We always send our real User-Agent; we never pretend to be a browser.
How to recognise and verify us
VendiBot/1.0 (+https://login.vendigroup.eu/bot; abuse@vendigroup.eu)
Our requests come only from these addresses:
65.21.122.215 (IPv4 — every crawler job)2a01:4f9:3b:4b69::/64 (IPv6 — jobs run directly on the host)
The same list, machine-readable: /.well-known/vendibot.json. A request that carries our
name from any other address is not ours — please tell us at abuse@vendigroup.eu.
Personal data
Business contact details that may be personal data are processed under legitimate interest (GDPR Art. 6(1)(f)) for business
information. Controller: VendiGroup OÜ. To have data about you removed, write to
privacy@vendigroup.eu.
Security
Found a security problem on our side? security.txt or
security@vendigroup.eu.
VendiBot
Webbsökaren (crawler) som drivs av VendiGroup OÜ, Tallinn, Estland (registrikood 17467908).
Vill du att vi slutar besöka din sajt?
Lägg detta i din
robots.txt — vi läser den före varje sajt och följer den:
User-agent: VendiBot
Disallow: /
Eller mejla
abuse@vendigroup.eu. Du behöver inte motivera; vi svarar inom tre arbetsdagar och
lägger domänen i vår stopplista.
Vad vi gör
Vi bygger ett europeiskt register över företag och vad de erbjuder, så att köpare hittar leverantörer. VendiBot läser
publika sidor på företagswebbplatser:
- startsida, kontaktsida och impressum — för att koppla en domän till rätt företag och hålla dess företagskontakter aktuella;
- för webbutiker: de produktsidor som butikens egen sitemap listar — de strukturerade produktuppgifter sidan publicerar
(namn, varumärke, GTIN, pris, tillgänglighet, produktbildens adress). Vi sparar bildens adress, inte bilden.
Hur vi uppför oss
- Vi läser
robots.txt före en sajt och följer den. Våra produkt- och butiksläsare följer också Crawl-delay.
- Högst en förfrågan per sekund och sajt i butiksläsaren; de flesta sajter får några få sidor, en gång.
- Vi hämtar HTML-sidor, XML-sitemaps och
robots.txt. Inga formulär, inga inloggningar, ingen sajtsökning.
- Vi loggar aldrig in och kringgår aldrig en betalvägg, en utmaningssida eller något annat botskydd. En sajt som spärrar oss lämnas ifred.
- Vi skickar alltid vår riktiga User-Agent; vi utger oss aldrig för att vara en webbläsare.
Så känner du igen och kontrollerar oss
VendiBot/1.0 (+https://login.vendigroup.eu/bot; abuse@vendigroup.eu)
Våra förfrågningar kommer bara från 65.21.122.215 (IPv4, alla sökjobb) och 2a01:4f9:3b:4b69::/64 (IPv6, jobb
direkt på servern). Maskinläsbart: /.well-known/vendibot.json. En förfrågan med vårt namn från en
annan adress är inte vår — säg till på abuse@vendigroup.eu.
Personuppgifter
Företagskontakter som kan vara personuppgifter behandlas med stöd av berättigat intresse (GDPR art. 6.1 f) för
företagsinformation. Personuppgiftsansvarig: VendiGroup OÜ. Vill du att vi tar bort uppgifter om dig, mejla
privacy@vendigroup.eu.
Säkerhet
Hittat ett säkerhetsproblem hos oss? security.txt eller
security@vendigroup.eu.