Optimierung von Majestic-12...

Projekte zum Check von Webseiten wie PeerReview, CapCal, Grub.
Nachricht
Autor
Benutzeravatar
Michael H.W. Weber
Vereinsvorstand
Vereinsvorstand
Beiträge: 22419
Registriert: 07.01.2002 01:00
Wohnort: Marpurk
Kontaktdaten:

Optimierung von Majestic-12...

#1 Ungelesener Beitrag von Michael H.W. Weber » 04.08.2009 09:11

...wie geht man da am Besten vor? Ich habe inzwischen einen 20 Mbit-Kabelmodemanschluß.

Michael.
Fördern, kooperieren und konstruieren statt fordern, konkurrieren und konsumieren.

http://signature.statseb.fr I: Kaputte Seite A
http://signature.statseb.fr II: Kaputte Seite B

Bild Bild Bild

Benutzeravatar
Velociraptor
Stromkosten-Ignorierer
Stromkosten-Ignorierer
Beiträge: 1029
Registriert: 13.11.2001 01:00
Wohnort: nähe Wien
Kontaktdaten:

Re: Optimierung von Majestic-12...

#2 Ungelesener Beitrag von Velociraptor » 04.08.2009 09:56

Buckets(WU's) rauf, Crawler rauf, Leitung rauf, Wenns nicht mehr weiter geht sprich wenn die Leitung nicht mehr weiter ausgelastet wird warum auch immer^^
dann den Folder kopieren und einen 2ten Client öffnen diese arbeiten aus dem Ordner heraus sprich man muss ihn nur kopieren und hat dann eben das doppelte an Bandbreitenauslastung weitere Infos sind im MJ12 forum zu finden oder einfach dort mal nachfragen
There is no place like 127.0.0.1
--------------------

Benutzeravatar
Jkcapi
Partikel-Strecker
Partikel-Strecker
Beiträge: 991
Registriert: 29.12.2001 01:00
Wohnort: Braunschweig
Kontaktdaten:

Re: Optimierung von Majestic-12...

#3 Ungelesener Beitrag von Jkcapi » 04.08.2009 15:12

20mbit Leitung ist ja echt was feines,hihi.
Also Open Buckets 50, Crawler 200 Downstream volle Pulle und Upstream 256!
Kommt natürlich auf den Rechner an, zb. ein 1,6ghz würde mit dem Archivieren nicht mehr hinterherkommen Dual oder Quad ist kein Problem, die sollten auch mit ner 32mbit Leitung von Kabel Deutschland keine probs haben.
Wenn Deine Leitung richtig gut geht dann solltest Du pro Tag auf ca 5,5Millonen URLs kommen, vieleicht sogar 6 millionen.
Viel Spass!
Gruß Jürgen :D
Gruß Jürgen

Bild

Benutzeravatar
Michael H.W. Weber
Vereinsvorstand
Vereinsvorstand
Beiträge: 22419
Registriert: 07.01.2002 01:00
Wohnort: Marpurk
Kontaktdaten:

Re: Optimierung von Majestic-12...

#4 Ungelesener Beitrag von Michael H.W. Weber » 04.08.2009 17:06

...um dann das UnityMedia Kündigungschreiben (trotz Flatrate) einzusacken... :evil2: Wat soll's - ich reiße mal die Leitung auf... 8)

Michael.
Fördern, kooperieren und konstruieren statt fordern, konkurrieren und konsumieren.

http://signature.statseb.fr I: Kaputte Seite A
http://signature.statseb.fr II: Kaputte Seite B

Bild Bild Bild

Benutzeravatar
Jkcapi
Partikel-Strecker
Partikel-Strecker
Beiträge: 991
Registriert: 29.12.2001 01:00
Wohnort: Braunschweig
Kontaktdaten:

Re: Optimierung von Majestic-12...

#5 Ungelesener Beitrag von Jkcapi » 04.08.2009 17:40

Also mit Arcor hatte ich bisher keine Probs!
3 Terrabyte pro Monat sollten ja wohl drin sein :evil2:
Ich glaube das das Datenvolumen heutzutage kaum noch Thema ist, vor 2-3 Jahren sah das noch etwas anders aus :angel2:
Gruß Jürgen

Bild

Benutzeravatar
Michael H.W. Weber
Vereinsvorstand
Vereinsvorstand
Beiträge: 22419
Registriert: 07.01.2002 01:00
Wohnort: Marpurk
Kontaktdaten:

Re: Optimierung von Majestic-12...

#6 Ungelesener Beitrag von Michael H.W. Weber » 04.08.2009 21:47

...wollen es mal hoffen. Ich fahre nämlich gerade meinen Traffic-Rekord ein. Und schätze, spätestens am Wochenende könnte es nochmal das Doppelte, wenn nicht gar Dreifache hageln. :evil2:

Michael.
Fördern, kooperieren und konstruieren statt fordern, konkurrieren und konsumieren.

http://signature.statseb.fr I: Kaputte Seite A
http://signature.statseb.fr II: Kaputte Seite B

Bild Bild Bild

Benutzeravatar
Michael H.W. Weber
Vereinsvorstand
Vereinsvorstand
Beiträge: 22419
Registriert: 07.01.2002 01:00
Wohnort: Marpurk
Kontaktdaten:

Re: Optimierung von Majestic-12...

#7 Ungelesener Beitrag von Michael H.W. Weber » 07.08.2009 10:29

So Leude - heute werde ich euch bei Majestic-12 mal zeigen, was 'ne Harke ist. :evil2:

Michael.
Fördern, kooperieren und konstruieren statt fordern, konkurrieren und konsumieren.

http://signature.statseb.fr I: Kaputte Seite A
http://signature.statseb.fr II: Kaputte Seite B

Bild Bild Bild

Benutzeravatar
Patrick Keller
Vereinsmitglied
Vereinsmitglied
Beiträge: 1202
Registriert: 25.03.2003 15:06
Wohnort: Mainz
Kontaktdaten:

Re: Optimierung von Majestic-12...

#8 Ungelesener Beitrag von Patrick Keller » 07.08.2009 10:53

Ich kriege meine 16MBit leitung leider nie ausgereizt. Im Schnitt komme ich auf ca. 10MBit/s mehr ist wohl leider nicht drin :(
An Crawlern habe ich schon rumgebastelt, das beste Ergebnis konnte ich mit 200 Crawlern erzielen.
Gestern schien der Server allerdings auch ein paar Probleme gehabt zu haben, denn da hat sich bei mir ne ganze Menge Upload zurückgestaut, und ich kam nicht ansatzweise an meine verfügbare Uploadbandbreite ...

Gruß,
Patrick

Benutzeravatar
Michael H.W. Weber
Vereinsvorstand
Vereinsvorstand
Beiträge: 22419
Registriert: 07.01.2002 01:00
Wohnort: Marpurk
Kontaktdaten:

Re: Optimierung von Majestic-12...

#9 Ungelesener Beitrag von Michael H.W. Weber » 07.08.2009 11:06

Ich habe herausgefunden, daß für mich in der Tat 200 "crawlers" bei 50 "open buckets" das Optimale zu sein scheint. Das Programm meldete gestern eine "URL starvation" und verwies auf eine Erhöhung der "open buckets" oder Reduktion der "crawlers". Fakt ist, daß diese Diagnose des Programms falsch war und die Meldung als eigentliche Ursache einen zu niedrigen freien HD Speicherplatz hatte. Man kann nämlich ruhig den Aufforderungen des Programs nachkommen, es tritt keine Besserung ein. Erst wenn man Speicherplatz feiräumt, geht es wieder ab. Das also mal im Auge behalten. Meine 20 MBit-Leitung kann ich auch nicht ausreizen. Egal wie hoch ich die Transferraten einstelle. Trotzdem wird mit den aktuellen Einstellungen ganz schön was abgegrast... :evil2:

Michael
Fördern, kooperieren und konstruieren statt fordern, konkurrieren und konsumieren.

http://signature.statseb.fr I: Kaputte Seite A
http://signature.statseb.fr II: Kaputte Seite B

Bild Bild Bild

Benutzeravatar
Jkcapi
Partikel-Strecker
Partikel-Strecker
Beiträge: 991
Registriert: 29.12.2001 01:00
Wohnort: Braunschweig
Kontaktdaten:

Re: Optimierung von Majestic-12...

#10 Ungelesener Beitrag von Jkcapi » 07.08.2009 13:07

Na es geht doch :D Mal schaun wie lange Ihr zwei das durchhaltet :wink:
In der Teamwertung liegen wir gesamt auf Platz 6, aber wir werden bald auf Platz 7 abrutschen. Team "Psimerion ry" liegt zwar noch ne schlappe Milliarde hinter uns aber refic mit seiner Tagesproduktion von rund 50 Millionen urls wird uns da wohl in ca.30 Tagen überholt haben :o
Gruß Jürgen :roll2:
Gruß Jürgen

Bild

Benutzeravatar
Patrick Keller
Vereinsmitglied
Vereinsmitglied
Beiträge: 1202
Registriert: 25.03.2003 15:06
Wohnort: Mainz
Kontaktdaten:

Re: Optimierung von Majestic-12...

#11 Ungelesener Beitrag von Patrick Keller » 07.08.2009 14:06

Michael H.W. Weber hat geschrieben:So Leude - heute werde ich euch bei Majestic-12 mal zeigen, was 'ne Harke ist. :evil2:

Michael.
Bisher kommt da aber nicht viel mehr als heiße Luft von dir ... :D :evil2: :smoking:

Benutzeravatar
Velociraptor
Stromkosten-Ignorierer
Stromkosten-Ignorierer
Beiträge: 1029
Registriert: 13.11.2001 01:00
Wohnort: nähe Wien
Kontaktdaten:

Re: Optimierung von Majestic-12...

#12 Ungelesener Beitrag von Velociraptor » 07.08.2009 16:32

lauter poser hier :roll: da kann ich mich mit meinen 3 in ne ecke verstecken gehen ^^
There is no place like 127.0.0.1
--------------------

Antworten

Zurück zu „Leistungstests von Webservern“