FTP Search

trv · Post by **trv** » Sat Jul 14, 2007 4:20 pm

Μετα απο αρκετη προσπάθεια, και αλλαγή του timeout απο 30sec στα 120sec, ο crawler ΚΑΤΑΦΕΡΕ να παρει το listing του panoulisx με ls -lR στον gene6 του!

Τo listing ειναι αρχειο 50mb !

Ο crawler αρχισε να περνει το listing: Sat Jul 14 15:06:52 2007
Ο crawler πηρε το listing και αρχισε να περναει στη βαση: Sat Jul 14 15:25:45 2007
O crawler περασε το listing στη βαση: Sat Jul 14 16:09:48 2007

Και μετα απο ολα αυτά.....

PanoulisX -> 3625 GB

Total Size: 11 TB

ποιος αλλος θελει να μπει?

O panoulix αντιμετωπιζει το ιδιο bug που βρηκε ο firegate, με την αποστροφο σε path.

Για την ακριβεια οταν υπαρχει αποστροφος σε καποιο φακελο του ftp, το indexing γινεται κανονικα και το search και ολα, αλλα στο interface του ffsearch οταν παταμε πανω στον ftp, περνει σαν root directory αυτο με την αποστροφο για καποιο λογο...

PanoulisX, εδώ:
ftp://10.140.12.28/Software_2/_Diafora/ ... b]Tattoo's[/b] βγαλε την αποστροφο για να δουλεψει σωστα..

[ αυτη τη φορα το εφτιαξα με το χερι στη βαση, στο επομενο crawl θα χαλαει παλι ]

panoulix · Post by **panoulix** » Sat Jul 14, 2007 11:18 pm

Problem Fixed. Rixte mia matia gia to crawler file pali. Thx

TheKeyMaster · Post by **TheKeyMaster** » Sun Jul 15, 2007 12:03 am

Το λοιπόν...

Μετά από συνεργασία με τον trv και λύνοντας διάφορα προβλήματα που παρουσιάστηκαν κατα την πρόοδο των εργασιών, προσπαθώντας να βρεθεί η κατάλληλη φόρμουλα σύμφωνα με την οποία ο crawler θα είναι σε θέση να λαμβάνει από τους FTP Servers που τρέχουν σε Windows το συμπιεσμένο listing, έφτιαξα ένα προγραμματάκι. Κάνει τα παραπάνω που ανέφερε ο trv, και όλα μαζεμένα σ'ένα exe. Η μόνη ρυθμίση του προγράμματος, και αφού αυτό αποσυμπιεστεί σ'έναν οποιοδήποτε φάκελο της αρεσκείας σας, είναι το folder στο οποίο θα μπαίνει το συμπιεσμένο listing. Αυτό μπορεί να είναι το root folder, ή κάποιο άλλο που θα είναι προσβάσιμο από τον FTP Server. Τα υπόλοιπα τα αναλαμβάνει το πρόγραμμα. Το όνομα του listing είναι by default 'list.gz' και δεν αλλάζει.

===> Download <===

trv · Post by **trv** » Sun Jul 15, 2007 12:27 am

USE IT !!!!!

Hwoarang · Post by **Hwoarang** » Sun Jul 15, 2007 12:51 pm

Δυστυχώς εμένα το προγραμματακι δεν μπορει να δει τους φακέλους οι οποίοι προέρχονται απο map drives μέσα στο FTP με αποτέλεσμα να κάνει το gz μονο 1ΚΒ .. .

Κανενας αλλος δεν έχει map drives σαν share στα FTP?

tweety · Post by **tweety** » Sun Jul 15, 2007 3:17 pm

Βάλε Gene6 και αντί για map drives τράβηξε ftp connections. Listing σε map drives δεν μου έχει δουλέψει ούτε σε Win ούτε σε Linux.

trv · Post by **trv** » Sun Jul 15, 2007 3:20 pm

Μια χαρα παιζει, και του hwoarang μια χαρα ειναι, απλα αυτος ειναι αμπαλος

Οσοι εχετε προβλημα με το gene6 και τα network drives, δειτε εδω:

http://www.g6ftpserver.com/forum/index. ... topic=1091

Hwoarang · Post by **Hwoarang** » Sun Jul 15, 2007 3:30 pm

Ναι καλά παιζει

.My bad.

Hwoarang · Post by **Hwoarang** » Thu Jul 19, 2007 1:22 am

Statistics
Last change FTPs Directories Files Total size Queries
19. 07. 2007 00:00 19 ( 14) 71653 816755 83 TB 3329

Κάποιος , ονοματα δεν λέμε (tweety

) , μοιράζει τρελα fake TB