scraper

Ich erstelle die HTML-Meta-Tags dynamisch mit der unten stehenden Funktion (GWT). Es dauert 1 Sekunde, um dies auf dem DOM zu haben. Es funktioniert gut außer Facebook. Wenn ich einen Link aus meinem Web teile, erhält der Scraper die Meta-Tags,...

Ich habe Spinne, die ich mit dem Scrapy-Framework geschrieben habe. Ich habe Probleme, Pipelines zur Arbeit zu bringen. Ich habe den folgenden Code in meinem pipelines.py: %Vor% und meine CrawlSpider-Unterklasse hat diese Zeile, um die Pipel...