PDA

Archiv verlassen und diese Seite im Standarddesign anzeigen : [TEST] Alle URLs von b2h gecrawled



kalachnikov
03.05.2010, 22:21
Abend,
ich hoffe ihr nehmt es mir nicht übel, wollt einfach mal meinen Crawler loslassen und schauen wie viele URLs er imstande ist zu crawlen.

Vielleicht brauch es ja jemand für Statistikzwecken etc.

Hier mal das Ergebnis:


http://pastebin.com/tU9UR1CN

novaca!ne
03.05.2010, 22:26
und mit welchem crawler hast du das angestellt?

kalachnikov
03.05.2010, 22:29
selfmade. Mit PHP, (cURL) realisiert. Ist aber noch nicht fertig und noch etwas bugyy..

kazuya
03.05.2010, 22:40
Zum Glück haben wir jetz alle URLs :)

0x30
03.05.2010, 22:44
Du bist echt ein Held. Dieser Thread ist genau so dumm wie den du auf B2H gemacht hast...
Liegt wohl daran das es der genau gleiche ist. Copy/Paste!

krypt0n
03.05.2010, 23:48
Öhm auch wenn der Crawler alleine schon etwas sinnlos wäre, bitte stell doch wenigstens den Crawler rein, mit den URLs können wir einfach nichts anfangen... Der Crawler kann vielleicht sogar einigen Copy/Paste Kids helfen was mit libcurl zu basteln ;)

kalachnikov
04.05.2010, 17:33
das ist nur eine Funktion, die mein Crawler kann. Daher nicht sinnlos.
Ich sehe leider keinen Grund warum ich meinen Crawler hier reinstellen sollte, damit die Kids es benutzen und es dann als sein eigenes ausgeben? Danke brauch ich nicht.
Schließlich steckt ja dahinter einiges an Arbeit, das ich investiert habe.

S1024
04.05.2010, 17:45
Verkauf ihn doch gegen Steam Acc. -.-

Wozu ist dann bitte der Therd hier wenn du uns nur URLs lieferst?

roccihrs
04.05.2010, 17:47
Hab ich auch gedacht. Warum postet man sowas?