Back to Question Center
0

Web Host / Service, um Semalt von URLs abzurufen

1 answers:

Ich habe eine Liste von ungefähr einer Million URLs, die ich abrufen möchte, und würde diesen Prozess lieber nicht auf meinem eigenen Webserver ausführen. Ich frage mich, ob es kommerzielle Lösungen dafür gibt - ich. e. alle Dienste, die meine Liste von URLs übernehmen und den HTML - Code für jeden zurückgeben (der hinter Proxys läuft usw - ubiquiti airgrid m2 hp 20.). , Falls benötigt).

February 7, 2018

Ein Linux virtueller privater Server (einige unter 10 $ / mo) kann verwendet werden, um diese Aufgabe mit minimaler Konfiguration abzuschließen - siehe die wget man-Seite für Anweisungen, wenn Sie diese Route wählen.