Importieren - zu meiner datenbank


#1

Hey Leute!

Ich habe eine website wie “google”.
Um diese 24/7 up-to-date zu halten braucht man crawler.
Diese habe ich und nachdem sie das netz “gecrawled” haben erstellen diese eine .txt datei mit allen urls im netz
Diese will ich nun auf meine datenbank laden , geht aber i-wie nicht.

Habt ihr vllt einen tip?

Danke!


#2

“Geht aber irgendwie nicht” ist eine der präzisesten Fehlermeldungen die ich in den letzten Monaten gelesen habe. Geht’s irgendwie genaur? Fehler? Vorgehensweise?

Am Rande sei erwähnt das .txt Dateien vom Server nicht geparsed werden.