[Sammelthread] ZFS Stammtisch

[hotzen]

Ich will nichts sagen aber die IBM M1015 hättest du für 100 plus Porto bekommen
Das sind dann immerhin SAS2008-based LSIs mit PCI 2.0 x8 und 6Gbit aber die 1068er sind natürlich nicht verkehrt...

Mal kurz OT: Weiß jemand wo ich an gebrauchte Supermicro/Intel Boards für LGA775, DDR2 komme? Jede Kontaktnennung wird feierlich gedankt.

 

[Gr3yh0und]

So hat mich aber das Stück 56€ gekostet und ich wollte absichtlich 1068er. Ich geh jetzt den 100% Approved Way, in der Hoffnung, dass ich mit nem Intel Q67 auch VT-D nutzen kann und ich nichtmehr diese RDM&Degraded Probleme habe...

 

[barnacle2k]

Mit einem IBM M1015 kann man die platten nachts nicht in den Standby schicken.
Das kann mit vielen platten mal gut und gerne 300euro Strom zusätzlich im jahr kosten.

 

[layerbreak]

Mit einem IBM M1015 kann man die platten nachts nicht in den Standby schicken.

Ich hab eine LSI9211-8i verbaut und da stellt sich mir die Frage,
wie funktioniert das mit dem nachts in Standby schicken.

 

[Gelöschtes Mitglied 117520]

Tolle Bilders - aber warum ist die Blende ab?

 

[barnacle2k]

Ich hab eine LSI9211-8i verbaut und da stellt sich mir die Frage,
wie funktioniert das mit dem nachts in Standby schicken.

Mit SAS2008 Basierten controllern wie deinem LSI9211-8i
angeblich unmöglich, da LSI das nicht möchte.

Aber währe cool wenn du es mal ausprobieren könntest.
Vlt haben die das in den Letzten versionen von firmware / treiber inzwischen geändert.

Under Solaris musst du die /etc/power.conf editieren.

1. autopm default auf autopm enable ändern
2. einen spezifischen eintrag für jede einzelne platte erzeugen.
nach diesem muster:
device-thresholds /pci@0,0/pci1002,5a16@2/pci1014,3b1@0/sd@e,1 10m

3. svcadm disable fmd (nur vorerst nach dem testen wieder einschalten)

Unter Napp-It ist die power.conf unter System -> power mgmt zu finden.

 

[Gr3yh0und]

Interessant ist, dass Sie 25 Tage nacheinander gefertigt wurden, aber beide auch einen anderen Speicherchip auf der Rückseite haben... die SN ist auch komplett anders.

Meine Idee war mit dem 1068er auch das Nutzen des Spindows und der IT Firmware. Hat einer auf die Schnelle einen Link zur IT Firmware parat?

 

[Snuskhammer]

Was sagt ihr zu den Bonnie werten?

 

[layerbreak]

Mit SAS2008 Basierten controllern wie deinem LSI9211-8i
angeblich unmöglich, da LSI das nicht möchte.

Aber währe cool wenn du es mal ausprobieren könntest.
Vlt haben die das in den Letzten versionen von firmware / treiber inzwischen geändert.

Under Solaris musst du die /etc/power.conf editieren.

1. autopm default auf autopm enable ändern
2. einen spezifischen eintrag für jede einzelne platte erzeugen.
nach diesem muster:
device-thresholds /pci@0,0/pci1002,5a16@2/pci1014,3b1@0/sd@e,1 10m

3. svcadm disable fmd (nur vorerst nach dem testen wieder einschalten)

Unter Napp-It ist die power.conf unter System -> power mgmt zu finden.

Test ich doch mal gleich, wenn du online eventl. bleibst - wäre super.

Muss System erst hochfahren.

 

[gea]

Unter Napp-It ist die power.conf unter System -> power mgmt zu finden.

siehe auch
OpenSolaris Home Server Scripting 2: Setting Up Power Management

Gea

 

[layerbreak]

wenn ich format auf der Console eingebe, kommt u.a.
clt500224E9003CF7685D0 <ATA-Samsung HD203wi - 0003-1.82TB>
/scsi_vhci/disk@g50024e9003cf7685
wie muss ich das jetzt in

device-thresholds /pci@0,0/pci1002,5a16@2/pci1014,3b1@0/sd@e,1 10m

übersetzen?

 

[gea]

Was sagt ihr zu den Bonnie werten?

2,4 MB/s sequentielles Schreiben ist grenzwertig.
Entweder die Hardware ist grottenschlecht/ defekt oder etwas stimmt nicht.
Wie sind denn die Werte mit dd (Untermenü pool-benchmark-dd)

Gea

---------- Beitrag hinzugefügt um 22:35 ---------- Vorheriger Beitrag war um 22:28 ----------

wenn ich format auf der Console eingebe, kommt u.a.
clt500224E9003CF7685D0 <ATA-Samsung HD203wi - 0003-1.82TB>
/scsi_vhci/disk@g50024e9003cf7685
wie muss ich das jetzt in

übersetzen?

ich mach damit zwar nichts (brauche Leistung), aber die manpage
power.conf(4) (man pages section 4: File Formats)

sowie die Seite
BigAdmin Feature Article: Managing the Power Used by Idle Disks in Servers Running the Solaris 8 OS or Above

sollten weiterhelfen



Gea

 

[Snuskhammer]

2,4 MB/s sequentielles Schreiben ist grenzwertig.
Entweder die Hardware ist grottenschlecht/ defekt oder etwas stimmt nicht.
Wie sind denn die Werte mit dd (Untermenü pool-benchmark-dd)

Das war dern Benchmark unter dem Menü pools.
Was kann denn da defekt sein?
Die HDDs sind laut Check und Smart ok.

Memory size: 7935 MegabytesSystem
==== Processor Sockets ====================================

Version Location Tag
-------------------------------- --------------------------
AMD Phenom(tm) II X4 955 Processor AM3

 

[layerbreak]

wenn ich format auf der Console eingebe, kommt u.a.
clt500224E9003CF7685D0 <ATA-Samsung HD203wi - 0003-1.82TB>
/scsi_vhci/disk@g50024e9003cf7685

habe ich es richtig verstanden?

device-thresholds /pci@0,0/pci1002,5a16@2/pci1014,3b1@0/sd@e,1 10m

müsste dann in meinem Fall so aussehen:

device-thresholds /scsi_vhci/disk@g50024e9003cf7685 10m

Sorry wenn ich so dumm frage, bin einfach kein Profi auf dem Gebiet.

 

[barnacle2k]

wenn ich format auf der Console eingebe, kommt u.a.
clt500224E9003CF7685D0 <ATA-Samsung HD203wi - 0003-1.82TB>
/scsi_vhci/disk@g50024e9003cf7685
wie muss ich das jetzt in

übersetzen?

So soll das dann aussehen:
device-thresholds /scsi_vhci/disk@g50024e9003cf7685 10m
(10min idle -> Platte aus)

 

[gea]

Das war dern Benchmark unter dem Menü pools.
Was kann denn da defekt sein?
Die HDDs sind laut Check und Smart ok.

Memory size: 7935 MegabytesSystem
==== Processor Sockets ====================================

Version Location Tag
-------------------------------- --------------------------
AMD Phenom(tm) II X4 955 Processor AM3

wie sind denn die Werte mit dd und 20 GB Testfiles?
und was für Platten, welches Raid-Level und welcher Controller?

Auh mal unter system-statistic (ram/cpu/pools) schauen, ob irgendwo
ein Engpass erkennbar ist.




Gea

 

[layerbreak]

Danke barnacle2k, mit solch einer Antwort kann ich was anfangen.

Dann setz ich jetzt mal autopm auf enable und diese eine Platte auf 1m.

Wie kann ich dann testen, ob diese eine Platte in standby ist?

 

[barnacle2k]

DAS ist das problem!
Die einzige chance die ich bisher kenne ist das es dann den Spin up delay gibt wenn man darauf zugreift.

Oder man geht zum server und "befühlt" die platte nach vibrationen / Temperatur.

Aber man kann da sicher irgent etwa DTRACEN oder SMARTCTL etwas entlocken.

Ein weiteres sicheres zeichen ist die Stromaufname, das fällt dann aber erst auf wenn mehrere Platten Abgeschaltet werden.
(Mein ZFS-Rechner hängt momentan an nem Strommessgerät von daher weiss ich immer wiviel er gerade verbraucht.)

 

[layerbreak]

bei mir war jetzt in dem Beispiel es die Platte #5 bei der format Ausgabe.

Eventl. habe ich einen delay, wenn ich mit format/selection auf #5 zugreife.

---------- Beitrag hinzugefügt um 22:59 ---------- Vorheriger Beitrag war um 22:57 ----------

sollte die power.conf nicht mit einem Befehl neu eingelesen werden?

 

[gea]

DAS ist das problem!
Die einzige chance die ich bisher kenne ist das es dann den Spin up delay gibt wenn man darauf zugreift.

Oder man geht zum server und "befühlt" die platte nach vibrationen / Temperatur.

Aber man kann da sicher irgent etwa DTRACEN oder SMARTCTL etwas entlocken.

Ein weiteres sicheres zeichen ist die Stromaufname, das fällt dann aber erst auf wenn mehrere Platten Abgeschaltet werden.
(Mein ZFS-Rechner hängt momentan an nem Strommessgerät von daher weiss ich immer wiviel er gerade verbraucht.)

Ist schon so die einzig richtige Variante.
Ein Leistungsmessgerät davor schalten und schauen, ob und was es bringt.
Alles andere ist "wer misst misst Misst"

Gea

---------- Beitrag hinzugefügt um 23:05 ---------- Vorheriger Beitrag war um 22:59 ----------

bei mir war jetzt in dem Beispiel es die Platte #5 bei der format Ausgabe.

Eventl. habe ich einen delay, wenn ich mit format/selection auf #5 zugreife.

---------- Beitrag hinzugefügt um 22:59 ---------- Vorheriger Beitrag war um 22:57 ----------

sollte die power.conf nicht mit einem Befehl neu eingelesen werden?

vermute mal

svcadm -v enable -r svc:/system/powerefault
oder refresh statt enable ist notwendig.

Gea

 

[layerbreak]

Ist schon so die einzig richtige Variante.
Ein Leistungsmessgerät davor schalten und schauen, ob und was es bringt.
Alles andere ist "wer misst misst Misst"

Gea

Ok, das schaff ich aber heute nicht mehr auf die Schnelle.

Wenn ich morgen früher nach Hause komme, werde ich das mal testen. Müsste bei 6 Platten doch am Leistungsmessgerät zu messen sein.

Nochmals meine Frage:
Wenn ich die power.conf abgeändert habe, schalte ich vorläufig mal
svcadm disable fmd
aus. Was auch immer das ist.
Muss ich die power.conf neu einlesen lassen bei Oi oder holt OI sich den Inhalt regelmäßig von selbst?

Nach dem Test dann
svcadm enable fmd?

Danke bis hier mal an barnacle2k und gea.
Werde berichten.

 

[Snuskhammer]

wie sind denn die Werte mit dd und 20 GB Testfiles?
und was für Platten, welches Raid-Level und welcher Controller?

Auh mal unter system-statistic (ram/cpu/pools) schauen, ob irgendwo
ein Engpass erkennbar ist.

Gea

Grad schiebe ich ein 9GB großes File mit 6MB/s drauf.

Sind 3x WD EARS 1,5GB
RAIDZ1
Onboard Controller vom Asus 785TD-EVO
AMD785 Chipsatz

 

[gea]

fmd=Solaris Fault Management Service

prüft regelmäßig, ob Platten ok sind;
damit geht natürlich kein sleep

siehe auch:
Nexenta Project - Power Mgmt not working - The Nexenta Project

Gea

 

[barnacle2k]

das fmd ist das Solaris Fault management.
Das hält sonst angeblich die Platten wach.
Man kann ihm aber in einer anderen config datei einen Scan intervall vorgeben.

gist is disk-transport module of FMD wakes up the disks at some interval. You can change the interval by adding something like "setprop interval 24h" to /usr/lib/fm/fmd/plugins/disk-transport.conf file.

By the way: Vermutlich wird es ja eh nicht funktionieren.
Da du la leider einen SAS2008 basierten controller.
Aber ich würde mich gerne eines besseren belehren lassen.

Achja greyhound:
Das Update Skript von LSI wird die Chip Revision wissen wollen.
Und wählt je nach dem ein anderes File.
Also mach mal bei einem der beiden den Kühler ab und check welche das ist.
(Ist wohl der einzigste absolut sichere weg die Rauszubekommen.)

 

[gea]

Grad schiebe ich ein 9GB großes File mit 6MB/s drauf.

Sind 3x WD EARS 1,5GB
RAIDZ1
Onboard Controller vom Asus 785TD-EVO
AMD785 Chipsatz

Wert ist schlecht!
steht der Controller auf AHCI?

Gea

 

[Gr3yh0und]

Achja greyhound:
Das Update Skript von LSI wird die Chip Revision wissen wollen.
Und wählt je nach dem ein anderes File.
Also mach mal bei einem der beiden den Kühler ab und check welche das ist.
(Ist wohl der einzigste absolut sichere weg die Rauszubekommen.)

Hab leider keinen blassen Dunst wie ich den Kühler abkrieg ohne die DIE vom Chip zu splitten... Gibts da nich ne Möglichkeit das im BIOS auszulesen bzw. per Software? Werds morgen mal probieren und das Teil in nen alten Athlon X2 reinstecken.

 

[Snuskhammer]

Jetzt schauts besser aus, oder?

 

[barnacle2k]

Also Bärle!
Bei den ganzen Bildern vermute ich du bist ein visueller mensch.
Deswegen hier Exklusiv eine WIE KRIEG ICH DEN VER****** KÜHLER AB anleitung:
Demonstriert an meinem armen HP SC08Ge.
Es Gibt 4 Haken die sich an dem Chip Festkrallen:

In den Schlitz steckt man einen Schraubendreher.
Mit leichtem druck und Viel gefühl den Haken lösen und den Plastikramen von der Platine Weg Festhalten.
Dann den Nächsten Clip auf der gleichen Seite angehen.
Daraufhin sollte sich der schwarze plastikramen lösen.
Alles was den Kühler dann noch hält ist nun WÄRMELEITPASTE.



Zum Zusammenbau einfach wieder Paste auftragen, kühler Aufsetzen und den Plastikramen wieder Reindrücken bis er einrastet.

 

[Gr3yh0und]

Also Bärle!

Ich danke dir vielmals

Also 49te Woche 2009 und B3

 

[Gelöschtes Mitglied 117520]

*GELÖSCHT* weil wegen hat sich erledigt. Controller bleibt doch hier