Bots, auch als Web-Robots bekannt, sind Softwareanwendungen, die automatisierte Aufgaben über das Internet ausführen. Typischerweise führen sie Aufgaben aus, die sowohl einfach als auch strukturell wiederholend sind, mit einer viel höheren Rate, als dies für einen Menschen allein möglich wäre. Bemerkenswerte Beispiele sind Spider, Crawler, Scraper, Spam-Bots und Game-Bots.
Ich versuche einige Funktionen in einer Webansicht in Facebook Messenger zu implementieren. Am Telefon öffnet sich das Webview gut, aber im desktop Webbrowser öffnet sich das Webview in einem neuen Tab.
Ich benutze die folgende Funktion:
%Code%...
16.02.2017, 23:52
Ich brauche ein Skript, das eine Website spidern und die Liste aller gecrawlten Seiten im Klartext oder in einem ähnlichen Format zurückgeben kann; was ich den Suchmaschinen als Sitemap übermitteln werde. Kann ich mit WGET eine Sitemap einer Web...
16.10.2010, 12:47
Ich sehe immer wieder merkwürdiges Verhalten in unseren Protokollen, wo URLs, auf die normalerweise nur über eine POST-Anfrage zugegriffen werden soll, über GET aufgerufen werden. Die URLs enthalten solche, die nur über JavaScript erstellt werde...
20.04.2011, 10:43