Thema: NNTPdefrag.R32

[bigobelix]

Hi R32,

irgendwas kommt mir spanisch vor:

Deine neue Version 1.03 braucht ca. 1s für ein MB.

Sehe ich es richtig, wenn ich mal davon ausgehe, bei 20MB/S liest das Progi das File von der HDD und schreibt sagen wir mal 80MB zurück. Das wären dann 180MB/20MB = 9s+1s CPU, also ca. 10s. Aber das Progi braucht ca. 10mal mehr Zeit. Warum?

Sorry, falls das eine Milchmädchenrechnung ist 

Habe das Progi auf "Priorität hoch" gestellt. Arbeitet nun konstant mit 48-50%. Dabei komme ich aber eben erst auf die 1MB/s.

bigobelix

[Plastic]

Hallo R32 und bigobelix,

habe jetzt auch einen Vergleichstest gemacht:

Ausgangsdaten:
10,8 GB (11.640.942.430 Bytes) 3.963 Dateien

mit nntp_c.pl
10,5 GB (11.377.111.100 Bytes) 32.509 Dateien

mit NNTPdefrag.R32_1.03 (s=20000)
10,7 GB (11.581.290.933 Bytes) 34.033 Dateien

mit NNTPdefrag.R32_1.03 (s=500)
10,8 GB (11.583.097.712 Bytes) 34.290 Dateien

R32 Danke für Dein Tool es funktioniert sehr Gut.

Die Rechenzeit hatte ich nicht beachtet!

R32: ist es möglich die "noname-Dateien" in ein eigenes Verzeichnis zu speichern?
Dann könnte man mit einem VPS-Script die Daten umbenennen.

Danke und Gruss,
plastic

[bigobelix]

wie wäre es mit dem Befehl "move Pfad\noname*.* Pfad"? am Ende der bat?

bigobelix

[R32]

Deine neue Version 1.03 braucht ca. 1s für ein MB.

Sehe ich es richtig, wenn ich mal davon ausgehe, bei 20MB/S liest das Progi das File von der HDD und schreibt sagen wir mal 80MB zurück. Das wären dann 180MB/20MB = 9s+1s CPU, also ca. 10s. Aber das Progi braucht ca. 10mal mehr Zeit. Warum?

Sorry, falls das eine Milchmädchenrechnung ist 

Wie kommst Du auf 1MB/s?
Ich gebe zu, so ganz komme ich hinter Deinem Beispiel nicht hinterher. Vielleicht ist es wirklich schon zu spät ...

Ich habe hier gerade folgenden Test laufen lassen:

 7 beliebige NNTP files mit untersch. Größen (500kB - 433MB) durch NNTPDefrag konvertiert.
 Die gesamte Größe der Eingangsdateien ist 808MB.
 Gedauert hat es 43 Sekunden.
 Ergebnis: 18.8 MB/s Verarbeitungsgeschwindigkeit.
 
Kannst Du Deine Berechnung nochmal kurz erläutern (gern auch als PM)? Vielleicht reden wir ja noch aneinander vorbei.


Achso, fast hätte ich es jetzt verpennt. Ich habe zum Testen mal die Version 1.04 gebastelt.
h**p://rapidshare.de/files/36023878/NNTPdefrag.R32_1.04_Windows.rar

Gute Nacht,
R32


Changes

1.04 - 2006/10/09
-----------------

- neuer Parameter: -c <0,1,2,...>
  Bevorzugten Prozessor setzen.
 
- neuer Parameter: -p <0,1,2,3>
  Prozesspriorität setzen.
  0..Idle  1..Normal  2..High  3..Realtime
 
- Statistische Ausgabe während der Konvertierung.
  Speed in MB/s
 
- Statistische Ausgaben nach der Konvertierung.
  Dauer, Größe der Eingangsdaten, Total Speed

[Plastic]

hallo bigobelix

wie wäre es mit dem Befehl "move Pfad\noname*.* Pfad"? am Ende der bat?

blackout .... wollte etwas anderes damit erreichen, werde es nochmals später schreiben, wenn ich mehr Zeit habe.

plastic

[woodie]

Hi R32,

hab ein Problem mit dem NNTPdefrag, bei bestimmten NNTP-Datein stürtzt dein Programm ab. Ich hab mal eine hochgeladen:
http://rapidshare.de/files/36088165/d05c216629_0921_69.28.186.120.nntp.html

Hoffentlich kannste was damit anfangen, viel Spa? ^^

Gruß
woodie

[R32]

Hi woodie,

danke für die Meldung und die Testdatei.

Bist Du Dir sicher, daß Du die neueste Version (1.04) verwendest?
Bei mir läuft's damit nämlich ... 

[woodie]

Das ist ja komisch jetzt gehts bei mir auch :-) . Hab das gestern bestimmt 10 mal probiert... Ich mach dir nächstmal ein Screenshot, vielleicht kannste ja daraus klug werden.

[woodie]

Hi R32,

so hab nntpdefrag weiterlaufen lassen und nun kommt wieder diese Fehlermeldung. Kann den Rechner zuzeit nicht neustarten, werde es später mal probieren ob es vielleicht nach einen Neustart wieder weiter geht. Falls man den Fehler durch einen Neustart wegbekommt, was könnte das Problem sein?

Hab mal hier ein screenshot gemacht:http://rapidshare.de/files/36203556/Unbenannt.JPG.html


Noch eine Frage zu skynet: Wie kann ich wma-Files downloaden lassen?

[Plastic]

Hallo woodie, hallo R32,

hab ein Problem mit dem NNTPdefrag, bei bestimmten NNTP-Datein stürtzt dein Programm ab. Ich hab mal eine hochgeladen:
http://rapidshare.de/files/36088165/d05c216629_0921_69.28.186.120.nntp.html

habe deine Datei mit NNTPdefrag.R32_1.04 auf 4 verschiedenen Rechnern (AMD, Intel, Laptop) durchlaufen lassen --> ohne Absturz.
Vorschlag: schließe alle nicht benötigten Programme, (auf deinem screenshot laufen skynet!)

Bei allen meinen test hat NNTPdefrag.R32_1.04 superrrrrr funktioniert, danke R32

Geschwindigkeit:

Time elapsed : 0:47:05          0:14:13          0:44:42           1:03:19
Processed MB: 5.175,80 MB    4.038,55 MB    8.275,64 MB     6.150,65 MB
                     1,83 MB/s       4,73 MB/s       3,09 MB/s        1,62 MB/s

bei den letzten beiden test hatte ich "-p 3" eingestellt.


R32:
einige Dateien werden ohne "yend" ausgegeben --> ist kein Programmfehler von Dir.
Auf Grund der schlechten Verbindung fordern die Rechner nochmals die Dateien an.
Ich habe bei einigen bis zu 4 Dateien bei denen nur eine komplett ist!

Ist es möglich die Dateien ohne "yend" mit deinem Tool zu löschen, bzw. mit z.B.: "[Dateiname].uud_Fehler" zu kennzeichnen?
Diese Fehlerhaften Dateien braucht keiner, oder?

Gruß
plastic

[woodie]

hi Plastic,

Kannst du mir dann sagen warum das Tool vorher über 200 Dateien bearbeitet hat mit skynet im hintergrund?

Übrigens habe ich es jetzt auch schon probiert wenn ich alles geschlossen habe, funktioniert nicht.

grüße
woodie

[Plastic]

hallo woodie,
keine Ahnung warum es bei Dir nicht fuktioniert!
Wenn Du nach dem Absturz wieder NNTPdefrag... startest, was geschied dann?
R32 setzt ein "_" bei den Dateien die es abgearbeitet hat!
Bei einem neuen Start sollte er bei der Datei weiter arbeiten bei dem der Fehler augetretten ist.
Mit welchem Programm wurden die nntp-Daten erzeugt?
Im Forum gibt es Fachleute die vieleicht eine Antwort auf Dein Problem habe, ich versuche nur mit tests zu Helfen.
Gruß, plastic

[R32]

R32:
Ist es möglich die Dateien ohne "yend" mit deinem Tool zu löschen, bzw. mit z.B.: "[Dateiname].uud_Fehler" zu kennzeichnen?
Diese Fehlerhaften Dateien braucht keiner, oder?

Das sollte kein Problem sein. Allerdings macht es das Tool nicht unbedingt schneller.
Ich würde sagen, wenn bis morgen Abend keine Einsprüche von anderer Seite kommen, mach ich es rein.

Danke für Deine Messwerte. Wirklich keinen einzigen Absturz?
Es scheint mit den Astra-Daten wirklich 5 mal schneller zu gehen, weil mehr NULLen drin sind. Ich habe hier eigentlich nie unter 15 MB/s.
Mit welcher skynet Version grabbst Du die Ausgangsdaten?

Danke und Gruß,
R32

[R32]

@woodie

Ich kann mich plastic nur anschließen. Solange wir bei Dir keine Systematik in den Abstürzen finden können, wird eine Ferndiagnose recht kompliziert.

Es könnte das übliche Windows-Problem sein, nämlich dass auf Deinen System durch Installationen und Deinstallationen diverse veraltete DLLs hängen geblieben sind.
Durchforste mal Deine Ereignisanzeige (unter Systemsteuerung -> Verwaltung -> Ereignisanzeige), vielleicht sind den Abstürzen ja bereits andere Fehler vorausgegangen. Stürzen andere Programme auch gelegentlich ab?
Ich kann ja mal statisch Linken, dann bekommst Du ein xMB großes Binary, das nicht auf DLLs angewiesen ist.

Es könnte natürlich auch einfach eine Überlastung/Überhitzung der Hardware oder ein zu schwaches Netzteil sein.

Oder defekter RAM, oder ... oder ...

[Plastic]

Hallo R32,

Danke für Deine Messwerte. Wirklich keinen einzigen Absturz?

keinen Absturz, ca. 60 GB Daten umgewandelt. Das Tool funktioniert sehr Gut, leider etwas langsam.

Version: "SkynetiX0.11 Test" (Erstellungsdatum ca. Feb 2005). Bin leider 800 km von zu Hause entfernt.