Ich versuche Divs mit der Klasse zu bekommen: 'Produkt'. Das Problem ist, einige der divs mit der Klasse 'product' haben auch die Klasse 'product-small'. Wenn ich also xpath('//div[@class='product']') verwende, erfasst es nur die divs mit einer Klasse und nicht multiple. Wie kann ich das mit Scrapy machen?Scrapy Grab div mit mehreren Klassen?
Beispiel:
<div class='product'><div class='product product-small'>Sie berücksichtigen sollen, ein CSS-Selektor für diesen Teil der Kriterien.
http://doc.scrapy.org/en/latest/topics/selectors.html#when-querying-by-class-consider-using-css
from scrapy import Selector
sel = Selector(text='<div class="product product-small">I am a product!</div>')
print sel.css('.product').extract()
Wenn es nötig ist, können Sie Kette CSS und XPath-Selektoren, wie im Beispiel auf dieser Seite.
Dies könnte auch mit xpath gelöst werden. Sie braucht nur contains() zu verwenden:
//div[contains(concat(' ', normalize-space(@class), ' '), ' product ')]
Obwohl, ja, die CSS selector Option ist kompakter und lesbar.
Ihr Xpath-Selektor würde auch Elemente mit der 'not-a-product' Klasse aufnehmen. –
@barraponto ja, aber die Eingabe in das aktuelle Problem enthält keine Elemente mit 'not-a-product' Klasse. Vielen Dank. – alecxe
Der Selektor wurde bearbeitet, um eine genaue Übereinstimmung der Klassennamen zu erreichen (siehe http://doc.scrapy.org/en/1.1/topics/selectors.html#when-querying-by-class-consider-using-css). – oschlueter