WWWGrab ist ein Tool zur Datenextraktion und Datenbankgenerierung von Webseiten oder "web scraper". Es scannt URL-Listen in einer Datenbank, ruft die aufgelisteten Webseiten ab und analysiert sie mit dem DTBuild-Datentransformationsmodul. WWWGrab kann Sequenzen von URL-Scans und SQL-Datenbankoperationen ausführen, sodass mehrere Durchläufe über Daten möglich sind, die "on the fly" (zur Laufzeit) generiert werden.
WWWGrab Parser werden mit dem DTBuild Datentransformationsworkshop erstellt. Zur Laufzeit erhält WWWGrab eine Webseite und sendet sie an die DTBuild-Engine, die die Webseite mit dem angegebenen Parser transformiert.
WWWGrab wird durch eine Liste von Aufgaben gesteuert, die in einer Datenbank angegeben sind. Es gibt zwei Arten von Aufgaben:
1. Scannen einer URL-Liste,
2. Führen Sie eine SQL-Liste aus.
Der Benutzer kann eine beliebige Anzahl von URL-Scans und SQL-Ausführungen in einer Aufgabenliste kombinieren. Eine Aufgabenliste kann z. B.:
* Scannen einer ersten Liste von URLs,
* eine neue Liste von URLs zu erstellen,
* Ändern Sie die generierte URL-Liste mit SQL,
* Scannen Sie die generierte+modifizierte URL-Liste,
* eine weitere URL-Liste generieren,
* etcetera.
Die kombinierte Flexibilität von WWWGrab und DTBuild ermöglicht eine Vielzahl von Webdatentransformationsaufgaben. Weitere Informationen finden Sie in der DTBuild-Hilfe.
WWWGrab / DTBuild Funktionen:
* Rekursive Funktionen (ermöglicht das Analysieren von verschachtelten HTML/XML-Tags, Kommentaren usw.)
* Wide-String (Unicode) Eingabe / Ausgabe-Fähigkeit
* ODBC-Schnittstelle, die Datenbanklayout-Informationen (Tabellen- und Feldnamen) für den Benutzer anzeigt
* ODBC-Schnittstelle ermöglicht die Erstellung von SQL-Anweisungen mit einer Kombination aus benutzerdefinierten Daten und erkannten Daten
* Trace-Modus, um die Übereinstimmung zwischen Eingabe und Knoten anzuzeigen (zum Debuggen)
* Benutzerdefinierte Funktionsschnittstelle ermöglicht die Ausführung von benutzerdefiniertem DLL-Code ...
Konfigurationsunterstützung ist verfügbar.
VERSIONSVERLAUF
- Version 1.33 veröffentlicht auf 2009-04-07
Indizierungsfix für die Kontrolltabelle. Erweiterung des Angebotsbeispiels.
- Version 1.31 veröffentlicht auf 2008-12-05
Neue Optionen, Fehlerbehebungen
Programmdetails
Eula
EULA - Endbenutzer-Lizenzvertrag
Endbenutzer-Lizenzvertrag
LESEN SIE DEN FOLGENDEN LIZENZVERTRAG SORGFÄLTIG DURCH. SIE AKZEPTIEREN UND ZU SICH DURCH DIESE LIZENZVEREINBARUNG DURCH ANKLICKEN VON THE "YES" BUTTON DISPLAYED BELOW. WENN SIE NICHT EINVERSTANDEN SIND, DIESE LIZENZ, KLICKEN SIE AUF THE "NO" BUTTON AND THE INSTALLATION WERDEN ABGEBROCHEN WERDEN.
Lizenzerteilung
"Sie" bezeichnet die Person oder das Unternehmen, die für die Nutzung der Software oder Dokumentation lizenziert ist. "Wir,""us" und "our" bedeutet DTUtilities.com.
Wir gewähren Ihnen hiermit eine nicht ausschließliche Lizenz zur Verwendung einer Kopie der Software auf einem einzelnen Computer, sofern die Software jederzeit nur auf einem Computer verwendet wird. Die Software ist "in Use" auf einem Computer, wenn sie in temporären Speicher (RAM) geladen oder in den permanenten Speicher eines Computers installiert wird, z. B. einer Festplatte, CD-ROM oder einem anderen Speichergerät.
Wenn die Software dauerhaft auf der Festplatte oder einem anderen Speichergerät eines Computers (außer einem Netzwerkserver) installiert ist und eine Person diesen Computer mehr als 80 % der Zeit verwendet, kann diese Person die Software auch auf einem tragbaren oder Heimcomputer verwenden.
Titel
Wir bleiben Eigentümer aller Rechte, Titel und Interessen an der Software und den dazugehörigen erläuternden schriftlichen Materialien ("Dokumentation").
Archiv- oder Backup-Kopien
Sie dürfen die Software zu Re-up- und Archivierungszwecken kopieren, vorausgesetzt, dass das Original und jede Kopie in Ihrem Besitz aufbewahrt werden und ihre Installation und Nutzung der Software nicht über die im Abschnitt "Lizenzerteilung"oben zulässigen hinausgeht.
Dinge, die Sie nicht tun können
Die Software und Dokumentation sind durch US-Urheberrechtsgesetze und internationale Verträge geschützt. Sie müssen die Software und Dokumentation wie jedes andere urheberrechtlich geschützte Material behandeln, z. B. ein Buch. Sie dürfen nicht:
kopieren Sie die Dokumentation,
kopieren Sie die Software, außer um Archiv- oder Sicherungskopien wie oben angegeben zu erstellen,
die Software zu modifizieren oder anzupassen oder in ein anderes Programm zu verschmelzen,
Reverse Engineering, Disassemblieren, Dekompilieren oder versuchen, den Quellcode der Software zu entdecken,
die Software auf einen Server zu stellen, so dass sie über ein öffentliches Netzwerk wie das Internet zugänglich ist, oder
einen Teil der Software oder Dokumentation zu unterlizenzieren, zu vermieten, zu vermieten oder zu verleihen.
Transfers
Sie können alle Ihre Rechte zur Nutzung der Software und Dokumentation auf eine andere Person oder juristische Person übertragen, sofern Sie diese Vereinbarung, die Software und Dokumentation, einschließlich aller Kopien, Updates und früheren Versionen, an diese Person oder Organisation übertragen und dass Sie keine Kopien, einschließlich auf dem Computer gespeicherter Kopien, aufbewahren.
Begrenzte Garantie
Wir garantieren, dass für einen Zeitraum von 90 Tagen nach Lieferung dieser Kopie der Software an Sie:
die Medien, auf denen Ihnen diese Kopie der Software zur Verfügung gestellt wird, bei normalem Gebrauch frei von Material- und Verarbeitungsfehlern sind und
die Software wird in wesentlichen Übereinstimmung mit der Dokumentation durchgeführt.
Soweit gesetzlich zulässig, IST DIE FOREGOING LIMITED WARRANTY IN LIEU OF ALL OTHER WARRANTIES OR CONDITIONS, EXPRESS OR IMPLIED, AND WE DISCLAIM ANY AND ALL IMPLIED WARRANTIES OR CONDITIONS, INCLUDING ANY IMPLIED WARRANTY OF TITLE, NONINFRINGEMENT, MERCHANTABILITY OR FITNESS FOR A PARTICULAR PURPOSE, unabhängig davon, ob wir Über ihre speziellen Bedürfnisse wissen oder Grund hatten, davon zu wissen. Kein Mitarbeiter, Agent, Händler oder Distributor von uns ist berechtigt, diese eingeschränkte Garantie zu ändern oder zusätzliche Garantien zu machen.
EINIGE STAATEN ERLAUBEN NICHT DIE BESCHRÄNKUNG ODER DEN AUSSCHLUSS DER HAFTUNG FÜR NEBEN- ODER FOLGESCHÄDEN, SO DASS DIE OBEN GENANNTE EINSCHRÄNKUNG MÖGLICHERWEISE NICHT FÜR SIE GILT.
Begrenzte Abhilfe
Unsere gesamte Haftung und Ihr ausschließlicher Rechtsbehelf bei Verletzung der vorstehenden Garantie sind nach unserer Wahl entweder:
den von Ihnen bezahlten Preis zurückzugeben, oder
Reparatur oder Austausch der Software oder des Mediums, die die vorgenannte Garantie nicht erfüllt, wenn sie uns mit einer Kopie Ihrer Quittung zurückgesandt wird.
IN KEINEM FALL HAFTEN WIR IHNEN GEGENÜBER FÜR SCHÄDEN, EINSCHLIEßLICH ENTGANGENER GEWINNE, ENTGANGENER ERSPARNISSE ODER SONSTIGER NEBEN- ODER FOLGESCHÄDEN, DIE SICH AUS DER NUTZUNG ODER DER UNMÖGLICHKEIT DER NUTZUNG DER SOFTWARE ERGEBEN (AUCH WENN WIR ODER EIN AUTORISIERTER HÄNDLER ODER DISTRIBUTOR ÜBER DIE MÖGLICHKEIT DIESER SCHÄDEN INFORMIERT WURDEN), ODER FÜR JEGLICHE ANSPRÜCHE EINER ANDEREN PARTEI.
EINIGE STAATEN ERLAUBEN NICHT DIE BESCHRÄNKUNG ODER DEN AUSSCHLUSS DER HAFTUNG FÜR NEBEN- ODER FOLGESCHÄDEN, SO DASS DIE OBEN GENANNTE EINSCHRÄNKUNG MÖGLICHERWEISE NICHT FÜR SIE GILT.
Laufzeit und Kündigung
Dieser Lizenzvertrag tritt mit Ihrer Nutzung der Software in Kraft und bleibt bis zur Kündigung wirksam. Sie können sie jederzeit beenden, indem Sie alle Kopien der Software und Dokumentation in Ihrem Besitz vernichten. Es wird auch automatisch beendet, wenn Sie eine Bedingung oder Bedingung dieses Lizenzvertrags nicht einhalten. Sie erklären sich mit der Beendigung dieser Lizenz einverstanden, um alle Kopien der Software und Dokumentation in Ihrem Besitz zu vernichten.
Vertraulichkeit
Die Software enthält Geschäftsgeheimnisse und proprietäres Know-how, die uns gehören und es wird Ihnen in strikter Zuversicht zur Verfügung gestellt. JEDE VERWENDUNG ODER DISCLOSURE DER SOFTWARE, ODER VON ITS ALGORITHMS, PROTOKOLLE ODER INTERFACES, ANDERE ALS IN STRICT ACCORDANCE MIT DIESER LIZENZVEREINBARUNG, KANN ALS EINE VERLETZUNG UNSERER TRADE SECRET RECHTE AKTIONIERBAR SEIN.
Allgemeine Bestimmungen
1. Dieser schriftliche Lizenzvertrag ist die ausschließliche Vereinbarung zwischen Ihnen und uns in Bezug auf die Software und Dokumentation und ersetzt alle vorherigen Bestellungen, Mitteilungen, Werbung oder Zusicherungen in Bezug auf die Software.
2. Dieser Lizenzvertrag kann nur durch ein von Ihnen und uns unterzeichnetes Schreiben geändert werden.
3. Im Falle eines Rechtsstreits zwischen Ihnen und uns in Bezug auf die Software oder Dokumentation ist die vorherrschende Partei in dem Rechtsstreit berechtigt, Anwaltskosten und -aufwendungen von der anderen Partei zurückzufordern.
4. Dieser Lizenzvertrag unterliegt den Gesetzen des US-Bundesstaates Kalifornien.
5. Sie erklären sich damit einverstanden, dass die Software nicht in ein Land versendet, übertragen oder exportiert oder in irgendeiner Weise verwendet wird, die durch den United States Export Administration Act oder andere Exportgesetze, -beschränkungen oder -vorschriften verboten ist.
