PressPlayBot: kako radi i kako ga zaustaviti.

Naš crawler navodi ovu adresu u svakom zahtjevu, da znate ko vam dolazi i šta radi.

Kako ga prepoznati

PressPlayBot/1.0 (+https://pressplay.site/crawler)

Crawler se uvijek predstavlja ovim User-Agent zaglavljem. Ne predstavljamo se kao preglednik i ne rotiramo identitet.

Šta radi

  • Čita robots.txt prije svega ostalog i poštuje ga po RFC 9309. Ako zabranjuje pristup, crawler odustaje, i pri redovnom obilasku i kad operater ručno dodaje izvor.
  • Poštuje Crawl-delay koji navedete. Kad je stroži od našeg, vrijedi vaš.
  • Usporava na 429 i poštuje Retry-After. Zaustavlja se cijeli domen, ne samo ta adresa.
  • Čita naslovnicu, feed i članke. RSS, Atom i sitemap kad postoje, jer je to jeftinije i za vas i za nas nego obilazak stranica.
  • Bilježi TDM-Reservation ako ga objavite.

Šta ne radi

  • Ne zaobilazi prijavu, paywall ni CAPTCHA, nijednu tehničku prepreku.
  • Ne rotira IP adrese i ne krije se iza tuđeg identiteta.
  • Ne objavljuje vaš puni tekst. Klijent vidi naslov, izvor, vrijeme i kratak isječak.
  • Ne kopira vaš sadržaj na naše stranice i ne prikazuje ga umjesto vaših.

Svako spominjanje u proizvodu vodi na vaš original.

Kako ga ograničiti ili zaustaviti

Najbrže i bez ikoga posredi, kroz vaš robots.txt:

Usporiti na jedan zahtjev u deset sekundi

User-agent: PressPlayBot
Crawl-delay: 10

Zabraniti dio sajta

User-agent: PressPlayBot
Disallow: /interno/

Zaustaviti potpuno

User-agent: PressPlayBot
Disallow: /

Promjena vrijedi od sljedećeg obilaska. Ako želite da prestanemo odmah ili da vaš izvor uklonimo iz registra, pišite na crawler@pressplay.site. Uklanjamo bez pitanja i bez odgode.

Zašto dolazimo

PressPlay je alat za praćenje medija, proizvod kompanije Futura Digital LLC. Organizacije ga koriste da saznaju kad se o njima piše i kako se vijest širi. Svako spominjanje vodi na vaš članak.