Question

Ich möchte alle Elemente auf this page extrahieren, aber es extrahiert nur das erste Element. Wie sollte der xpath Ausdruck sein?

def parse(self, response): 
    for sel in response.xpath("//*[@id='liste']"):   
     lianjia = lianjiaItem() 
     lianjia['name_of_community'] = sel.xpath("div[1]/div[1]/h2/a/text()").extract() 
     lianjia['Antragsteller'] = sel.xpath("div[1]/div[2]/div[1]/span[2]/text()").extract() 

     yield lianjia 

Answer 1

Das ist, weil es mit id equals 'liste' nur ein Element ist. Sie müssen sich durch Elemente iterieren, die stattdessen einzelne Zeile von Daten darstellt, und extrahieren alle benötigten Informationen aus jeder Zeile, zum Beispiel:

for sel in response.xpath("//*[@id='liste']/div[contains(@class,'eintrag')]"):   
    lianjia = lianjiaItem() 
    lianjia['name_of_community'] = sel.xpath("div[@class='results']/h2/a/text()").extract() 
    lianjia['Antragsteller'] = sel.xpath(".//div[span='Sprecher']/span[2]/text()").extract() 

    yield lianjia