CSPriceWatchBot

Informatie over onze bot, voor beheerders van webshops.

Wanneer wij ons bij naam melden, is dit onze user-agent:

CSPriceWatchBot/0.3 (prijsmonitoring voor webshops; respecteert robots.txt; uitleg en afmelden: https://portal.pricewatch.nu/crawler)

Wat doet deze bot?

Wij volgen openbare productprijzen voor webshops die willen weten hoe hun prijzen zich verhouden tot die van anderen. De bot leest daarvoor uw robots.txt, uw sitemap en een klein aantal productpagina's.

Hoe gedragen we ons?

Wij respecteren robots.txt, inclusief Crawl-delay.
Wij doen hoogstens één verzoek per 10 seconden per domein, en verspreiden verzoeken over de dag.
Wij bezoeken alleen openbaar bereikbare pagina's. Wij loggen nergens in en vullen geen formulieren in.
Wij omzeilen nooit een captcha, botdetectie of andere beveiliging. Komen we die tegen, dan stoppen we bij dat domein.
Wij doen ons nooit voor als een andere, bekende bot.
Wij slaan geen afbeeldingen en geen productbeschrijvingen op. Alleen prijs, verzendkosten, voorraadstatus, titel en productcode.
Wij leggen elk verzoek vast dat wij versturen, en ook elk verzoek dat wij bewust niet hebben verstuurd, met de reden erbij. Daarmee kunnen wij aantonen dat wij ons aan het bovenstaande hielden, in plaats van het alleen te beweren.

Wilt u dat wij stoppen?

Dat kan, zonder opgaaf van reden. Stuur een bericht naar crawler@pricewatch.nu met de domeinnaam erin. Wij zetten uw domein dan op onze blokkeerlijst, verwijderen de verzamelde prijs- en productgegevens van uw winkel, en bevestigen dat binnen één werkdag. In de praktijk stoppen onze lopende processen binnen een minuut.

Ons eigen verzoeklogboek bewaren wij daarna nog ten hoogste vier kalendermaanden. Dat is het bewijs dát wij gestopt zijn, en daarna verdwijnt het.

U kunt ons ook zelf weren via uw robots.txt:

User-agent: CSPriceWatchBot
Disallow: /

Dat respecteren wij vanaf de eerstvolgende keer dat wij uw robots.txt lezen.

In English

What is this bot?

We monitor public product prices on behalf of online shops that want to compare their pricing with the market. The bot reads your robots.txt, your sitemap and a small number of product pages.

How we behave

We respect robots.txt, including Crawl-delay.
At most one request per 10 seconds per domain, spread over the day.
Public pages only. We never log in and never submit forms.
We never bypass a captcha, bot detection or any other protection. If we meet one, we stop for that domain.
We never pretend to be another, known bot.
We do not store images or product descriptions, only price, shipping cost, availability, title and product code.
We log every request we send, and every request we deliberately did not send, with the reason. That way we can demonstrate the above rather than merely claim it.

Want us to stop?

No reason needed. Email crawler@pricewatch.nu with your domain name. We will add it to our block list, delete the price and product data collected from your shop, and confirm within one working day; in practice our running processes stop within a minute. We keep our own request log for at most four more calendar months, as evidence that we did stop. You can also block us yourself with the robots.txt rule above.