WWWGrab 1.33
Sie können in 5 Sekunden herunterladen.
Über WWWGrab
WWWGrab ist ein Tool zur Datenextraktion und Datenbankgenerierung von Webseiten oder "web scraper". Es scannt URL-Listen in einer Datenbank, ruft die aufgelisteten Webseiten ab und analysiert sie mit dem DTBuild-Datentransformationsmodul. WWWGrab kann Sequenzen von URL-Scans und SQL-Datenbankoperationen ausführen, sodass mehrere Durchläufe über Daten möglich sind, die "on the fly" (zur Laufzeit) generiert werden. WWWGrab Parser werden mit dem DTBuild Datentransformationsworkshop erstellt. Zur Laufzeit erhält WWWGrab eine Webseite und sendet sie an die DTBuild-Engine, die die Webseite mit dem angegebenen Parser transformiert. WWWGrab wird durch eine Liste von Aufgaben gesteuert, die in einer Datenbank angegeben sind. Es gibt zwei Arten von Aufgaben: 1. Scannen einer URL-Liste, 2. Führen Sie eine SQL-Liste aus. Der Benutzer kann eine beliebige Anzahl von URL-Scans und SQL-Ausführungen in einer Aufgabenliste kombinieren. Eine Aufgabenliste kann z. B.: * Scannen einer ersten Liste von URLs, * eine neue Liste von URLs zu erstellen, * Ändern Sie die generierte URL-Liste mit SQL, * Scannen Sie die generierte+modifizierte URL-Liste, * eine weitere URL-Liste generieren, * etcetera. Die kombinierte Flexibilität von WWWGrab und DTBuild ermöglicht eine Vielzahl von Webdatentransformationsaufgaben. Weitere Informationen finden Sie in der DTBuild-Hilfe. WWWGrab / DTBuild Funktionen: * Rekursive Funktionen (ermöglicht das Analysieren von verschachtelten HTML/XML-Tags, Kommentaren usw.) * Wide-String (Unicode) Eingabe / Ausgabe-Fähigkeit * ODBC-Schnittstelle, die Datenbanklayout-Informationen (Tabellen- und Feldnamen) für den Benutzer anzeigt * ODBC-Schnittstelle ermöglicht die Erstellung von SQL-Anweisungen mit einer Kombination aus benutzerdefinierten Daten und erkannten Daten * Trace-Modus, um die Übereinstimmung zwischen Eingabe und Knoten anzuzeigen (zum Debuggen) * Benutzerdefinierte Funktionsschnittstelle ermöglicht die Ausführung von benutzerdefiniertem DLL-Code ... Konfigurationsunterstützung ist verfügbar.