v současné době se snažím zprovoznit kampaň přes MOZ.com, nicméně jejich crawler botovi se stále nedaří indexovat mé stránky. Postupoval jsem dle jejich troubleshooting návodu: https://moz.com/help/moz-pro/getting-started/troubleshoot-campaign-setup, přičemž HTTP status je 301 a HTTPS 200 (OK), htaccess ani robots.txt neobsahují žádné další restrikce.
Jejich podpora, mne odkázala na vás, zdali nedochází k blokaci na serverové straně. Případně dokázali by jste mi s tímto problémem pomoci?
je to docela dobře možné, že rozsahy AWS blokujeme z důvodu nežádnoucího provozu. Můžete nám zjistit konkrétnější IP rozsah, který bychom měli whitelistovat, aby bot fungoval?
O uživateli:VEDOS Specialista na Znalostní báziWeb:kb.vedos.cz
obávám se, že takto rozsáhlé whitelistování nebude z naší strany možné. Pokud nějakou IP blokujeme, pak se tak děje z důvodu excesivního přetěžování cílových serverů desítkami dotazů za sekundu, neblokujeme (až na výjimky) regulérní provoz či IP adresy bezdůvodně. Pokud bychom alespoň věděli, z jakých IP adres dotazy probíhají, mohli bychom prověřit, zda by se u nich daly navýšit limity.
0
Máte stejný problém?
Tohle vlákno je uzavřené a odpovídat už v něm nejde. Když vám odpověď nestačí nebo se vás týká něco jiného, položte vlastní dotaz — odkaz na tohle vlákno do něj klidně vložte.