Wie verwende ich AJAXCRAWL_ENABLED in Scrapy?

Question

Ich lese this aus der Dokumentation

wie funktioniert der AJAXCRAWL in Scrapy und was passiert, wenn es wahr ist?

Answer 1

Die Konfigurations Sie sich beziehen scheint in midleware source erwähnt zu werden:

class AjaxCrawlMiddleware(object): 
    """ 
    Handle 'AJAX crawlable' pages marked as crawlable via meta tag. 
    For more info see https://developers.google.com/webmasters/ajax-crawling/docs/getting-started. 
    """ 

    def __init__(self, settings): 
     if not settings.getbool('AJAXCRAWL_ENABLED'): 
      raise NotConfigured 

So Ihre Frage zu beantworten, was es tut, ist, dass es Unterstützung kriecht für Websites ermöglicht, die AJAX und the google specs implementieren. Sie müssen wahrscheinlich auch die downloader middleware

aktivieren