2016-06-02 19 views
0

Ich habe einen Server viele Websites enthält, Und wenn einige Websites haben große Updates, Suchmaschinen wie:CPU bei hoher Belastung, weil der Suchmaschinen kriechen Massen

Bing (Speziell), Yandex, Yahoo

kommen sie zu dem Server viele IP-Adressen verwenden und sie nicht die Aufmerksamkeit auf die CPU-Last und MySQL-Abfragen und versuchen, Web-Seiten in der gleichen Zeit zu holen,

So wie kann ich sie für ganze begrenzen den Server

Zur Zeit bin ich b verriegelt diese Suchmaschine IPs Danke

+1

Suchmaschinen ist das Leben Blut von den meisten Websites, blockiert sie ist kontraproduktiv. Wenn das Crawling Performance-Probleme verursacht, müssen Sie untersuchen, warum Ihre Websites diese Last nicht bewältigen können. Verbessern Sie den Code und die SQL-Abfragen, um sie effizienter zu gestalten. Wenn dies nicht ausreicht, erhalten Sie leistungsstärkere Server. – 3urdoch

Antwort