google-crawlers

1Hitze

2Antwort

Ich versuche, meine Ember-Anwendung crawlable zu machen. Wie ich weiß, unterstützt Google jetzt JS, CSS und AJAX (ab Oktober 2015). Aber wenn ich meine Website testen, indem „Abruf wie durch Google“ I

0Hitze

1Antwort

Fordern Sie Google auf, mein Plesk-Anmeldeformular nicht zu crawlen

Ich habe einige Websites auf meinem Virtual Private Server gehostet. URL Plesk ist wie folgt: https://myVPS_IP:8443 Aber es ist auch von meinen Seiten URL: https://mysite1.com:8443, https://mysite2.co

0Hitze

1Antwort

Vaadin 7 machen Anwendung SEO bereit

Google Ajax-Crawling Anweisungen sagen, die !# wird tatsächlich in ?_escaped_fragment_ von der Google Crawler umgewandelt. Ich möchte meine Vaadin 7-Anwendung vorbereiten, um SEO für Google-Suchmaschi

0Hitze

1Antwort

Machen Sie Google crawl eine Seite, wenn es umhüllt ist

Ich hosten diese Website. Und ich bestelle eine Domain dafür. SO ist die Website auf somedomain.be/boring hosten ich eine Domain hinzugefügt www.company.com nun in den Webmastertools von Google, wenn

1Hitze

1Antwort

Google Webtools: Fetch and Render zeigt leere Seite

Website wird mit AngularJS mit Nginx gemacht. Der partielle Status beim Abrufen und Rendern ist auf das Abrufen von Benutzerinformationen ohne Authentifizierung zurückzuführen, was in Ordnung ist. Goo

1Hitze

1Antwort

Wie man den Crawler benachrichtigt, dass die ajax-Seite vollständig geladen und bereit ist, einen Snapshot zu erstellen

Es gibt von Angular/REST betriebene Webseiten, aber ohne Navigationsmodul (keine Hash-basierte (#!) Navigation). Trotz der Vernachlässigung von Googles Ajax-Crawling webmasters-ajax-crawling, scheint

0Hitze

1Antwort

Unbekannte URLs in der Google Search Console als 404 gemeldet

Ich stehe vor einem Problem, dass Google Bot einige unbekannte URLs (as highlighted in the screenshot) von einem Seitentyp meldet. Nach dem Überprüfen der Quellcode-, JS- und CSS-Dateien bin ich auf s

0Hitze

2Antwort

Scrapy beendet unerwartet

Ich folge Buch von O'Reilly veröffentlicht eine Spinne wie unten zu erstellen: articleSpider.py from scrapy.spiders import CrawlSpider, Rule from TestScrapy.items import Article from scrapy.linkextr

-1Hitze

1Antwort

Wie Google Crawler jede Seite über das Internet finden

Heute habe ich eine Frage, wie Google Crawler jede Seite über das Internet beim Crawlen finden Sie bitte teilen Sie mir die Antworten, wenn Sie haben. Überprüfen Sie den folgenden Link, wenn Sie mehr

0Hitze

3Antwort

Kann die Suchmaschine robots.txt lesen, wenn der Lesezugriff eingeschränkt ist?

Ich habe robots.txt-Datei hinzugefügt und einige Zeilen hinzugefügt, um einige Ordner zu beschränken.Auch habe ich alle Einschränkungen hinzugefügt, um auf diese robots.txt-Datei mit .htaccess-Datei z