Přeji hezký začátek roku a prosím o radu zda jste se s tím někdo nesetkal.
Na Savaně mám multihosting a pouze u jednoho eshopu na J 3.9.1. a VM 3.4.2 se snaží googlebot indexovat adresy produktů, které však neexistují (produkty byly smazány).
Dotazy robotů způsobují zátěž serveru. Mám zapnutý plugin pro přesměrování, ale komponenta tyto chybné adresy nezachytává a i když je do komponenty vložím ručně, tak se stejně načte stránka s chybou 504.
Díky za objasnění funkčnosti komponenty, ono to je asi logické. Nenajde stránku nabídne jinou.
Jenže ty stránky by neměly existovat. Když vycházím z tvaru adresy z logů tak se jedná o produkty, které už nejsou ve Virtuemartu a mělo by to hodit 404.
Na server např. požadavek na stránku
www.detskykramek.cz/eshop/sleva-19.html
na požadavek ze savany jsem nastavil dlouhou dobu pro indexaci (Crawl-delay: 1800) po uplynutí doby to vyhodí "504 Gateway Timeout".
Ve VM 3.4.2 je bug který to způsobuje údajně to řeší update na 3.4.3 ale jelikož to není přímo oficální vydání tak jsem to neměl odvahu nějak zkoušet a na testovacím prostředí se mi to vůbec nepodařlo replikovat.
