Unterirdische Geschwindigkeit
Hallo zusammen
ich habe ein Problem mit meiner Napp-it/Esxi Anbindung.
Ich nutze einen extra Storage-Server mit 4x Gigabit LAN auf dem nur omnios mit napp-it läuft und mehrere esxis die über iscsi angebunden werden sollen.
Davor hatte ich proxmox mit iscsi Multipath im Einsatz, möchte jetzt aber wieder auf Esxi umsteigen.
Pool und iscsi Target wurden neu angelegt und im esxi taucht auch alles auf. Aber die Geschwindigkeit ist extrem langsam, obwohl der Storage-Server genügend Leistung hat.
Auszug aus der vmkernel.log
Code:
2014-06-20T13:11:26.091Z cpu5:32954)LVM: 13089: One or more LVM devices have been discovered.
2014-06-20T13:11:30.395Z cpu1:32790)NMP: nmp_ThrottleLogForDevice:2321: Cmd 0x1a (0x412e807f6bc0, 0) to dev "mpx.vmhba33:C0:T0:L0" on path "vmhba33:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0
2014-06-20T13:11:30.395Z cpu1:32790)ScsiDeviceIO: 2337: Cmd(0x412e807f6bc0) 0x1a, CmdSN 0xe9a from world 0 to dev "mpx.vmhba33:C0:T0:L0" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0.
2014-06-20T13:13:45.011Z cpu5:33981)World: 14296: VC opID 5D80F1A3-000000EB maps to vmkernel opID 6604335a
2014-06-20T13:13:46.104Z cpu5:33981)World: 14296: VC opID 5D80F1A3-000000EB maps to vmkernel opID 6604335a
2014-06-20T13:15:01.786Z cpu5:33974)World: 14296: VC opID hostd-a097 maps to vmkernel opID 3181d726
2014-06-20T13:16:30.399Z cpu6:32795)NMP: nmp_ThrottleLogForDevice:2321: Cmd 0x1a (0x412e8084d300, 0) to dev "mpx.vmhba33:C0:T0:L0" on path "vmhba33:C0:T0:L0" Failed: H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0
2014-06-20T13:16:30.399Z cpu6:32795)ScsiDeviceIO: 2337: Cmd(0x412e8084d300) 0x1a, CmdSN 0xead from world 0 to dev "mpx.vmhba33:C0:T0:L0" failed H:0x0 D:0x2 P:0x0 Valid sense data: 0x5 0x24 0x0.
2014-06-20T13:17:37.325Z cpu3:33975)World: 14296: VC opID 5D80F1A3-000000ED maps to vmkernel opID 8e197490
2014-06-20T13:18:37.328Z cpu0:33979)World: 14296: VC opID 5D80F1A3-000000EF maps to vmkernel opID 93f329a2
2014-06-20T13:19:31.805Z cpu6:33973 opID=b2fc4414)FS3: 226: <START fbb>
2014-06-20T13:19:31.805Z cpu6:33973 opID=b2fc4414)511744 resources, each of size 0
2014-06-20T13:19:31.805Z cpu6:33973 opID=b2fc4414)Organized as 40 CGs, 64 C/CG and 200 R/C
2014-06-20T13:19:31.805Z cpu6:33973 opID=b2fc4414)CGsize 65536. 0th CG at 65536
2014-06-20T13:19:31.805Z cpu6:33973 opID=b2fc4414)FS3: 228: <END fbb>
2014-06-20T13:19:31.873Z cpu6:33973 opID=b2fc4414)FS3: 226: <START fdc>
2014-06-20T13:19:31.873Z cpu6:33973 opID=b2fc4414)130000 resources, each of size 2048
2014-06-20T13:19:31.873Z cpu6:33973 opID=b2fc4414)Organized as 11 CGs, 64 C/CG and 200 R/C
2014-06-20T13:19:31.873Z cpu6:33973 opID=b2fc4414)CGsize 26279936. 0th CG at 65536
2014-06-20T13:19:31.873Z cpu6:33973 opID=b2fc4414)FS3: 228: <END fdc>
2014-06-20T13:19:31.919Z cpu6:33973 opID=b2fc4414)FS3: 226: <START pbc>
2014-06-20T13:19:31.919Z cpu6:33973 opID=b2fc4414)64512 resources, each of size 4096
2014-06-20T13:19:31.919Z cpu6:33973 opID=b2fc4414)Organized as 63 CGs, 64 C/CG and 16 R/C
2014-06-20T13:19:31.919Z cpu6:33973 opID=b2fc4414)CGsize 4259840. 0th CG at 65536
2014-06-20T13:19:31.919Z cpu6:33973 opID=b2fc4414)FS3: 228: <END pbc>
2014-06-20T13:19:33.292Z cpu6:33973 opID=b2fc4414)FS3: 226: <START sbc>
2014-06-20T13:19:33.292Z cpu6:33973 opID=b2fc4414)32000 resources, each of size 8192
2014-06-20T13:19:33.292Z cpu6:33973 opID=b2fc4414)Organized as 8 CGs, 64 C/CG and 64 R/C
2014-06-20T13:19:33.292Z cpu6:33973 opID=b2fc4414)CGsize 33619968. 0th CG at 65536
2014-06-20T13:19:33.292Z cpu6:33973 opID=b2fc4414)FS3: 228: <END sbc>
2014-06-20T13:19:33.446Z cpu6:33973 opID=b2fc4414)FS3: 226: <START pb2>
2014-06-20T13:19:33.446Z cpu6:33973 opID=b2fc4414)256 resources, each of size 4096
2014-06-20T13:19:33.446Z cpu6:33973 opID=b2fc4414)Organized as 1 CGs, 64 C/CG and 16 R/C
2014-06-20T13:19:33.446Z cpu6:33973 opID=b2fc4414)CGsize 4259840. 0th CG at 65536
2014-06-20T13:19:33.446Z cpu6:33973 opID=b2fc4414)FS3: 228: <END pb2>
2014-06-20T13:19:33.588Z cpu6:33973 opID=b2fc4414)Res3: 5793: SDDir: type: 0x5, fileLength: 0x118, numBlocks: 1
2014-06-20T13:19:33.591Z cpu6:33973 opID=b2fc4414)Vol3: 3456: Created VMFS-5.60 with config 0x6 on vol 'asdf'
2014-06-20T13:19:35.386Z cpu6:33973 opID=b2fc4414)FSS: 5092: No FS driver claimed device 'mpx.vmhba33:C0:T0:L0': Not supported
2014-06-20T13:19:35.386Z cpu6:33973 opID=b2fc4414)Vol3: 714: Couldn't read volume header from control: Not supported
2014-06-20T13:19:35.386Z cpu6:33973 opID=b2fc4414)Vol3: 714: Couldn't read volume header from control: Not supported
2014-06-20T13:19:35.386Z cpu6:33973 opID=b2fc4414)FSS: 5092: No FS driver claimed device 'control': Not supported
2014-06-20T13:19:35.411Z cpu6:33973 opID=b2fc4414)VC: 2059: Device rescan time 1715 msec (total number of devices 5)
2014-06-20T13:19:35.411Z cpu6:33973 opID=b2fc4414)VC: 2062: Filesystem probe time 103 msec (devices probed 5 of 5)
2014-06-20T13:19:35.411Z cpu6:33973 opID=b2fc4414)VC: 2064: Refresh open volume time 0 msec
2014-06-20T13:19:35.475Z cpu6:33973 opID=b2fc4414)Vol3: 661: Unable to register file system asdf for APD timeout notifications: Already exists
2014-06-20T13:19:35.475Z cpu6:33973 opID=b2fc4414)LVM: 13069: File system '[asdf, 53a434e3-837cc82c-bb3d-0015177f414e]' (LV 53a432f4-d9689953-6199-0015177f414e) mounted in 'rw' mode.
2014-06-20T13:19:35.625Z cpu7:35178)World: 14296: VC opID 5D80F1A3-000000DD maps to vmkernel opID 53af03e
2014-06-20T13:19:40.007Z cpu4:33973)World: 14296: VC opID 5D80F1A3-000000F5 maps to vmkernel opID e6268acc
2014-06-20T13:19:42.385Z cpu2:32876)FS3Misc: 1742: Long VMFS rsv time on 'asdf' (held for 1070 msecs). # R: 1, # W: 1 bytesXfer: 3 sectors
2014-06-20T13:19:43.208Z cpu2:32876)FS3Misc: 1742: Long VMFS rsv time on 'asdf' (held for 712 msecs). # R: 1, # W: 1 bytesXfer: 2 sectors
2014-06-20T13:20:00.007Z cpu7:35178)World: 14296: VC opID 5D80F1A3-000000F9 maps to vmkernel opID 53efdddd
2014-06-20T13:20:01.809Z cpu0:33973)World: 14296: VC opID hostd-8667 maps to vmkernel opID 2dbeef7e
2014-06-20T13:20:07.228Z cpu0:35178)FS3Misc: 1742: Long VMFS rsv time on 'asdf' (held for 1573 msecs). # R: 1, # W: 1 bytesXfer: 9 sectors
vmbha33 ist USB-Stick auf dem esxi läuft.
Der Eintrag "long vmfs rsv time" macht mir sorgen, kann aber nicht am Storage liegen, da er im Leerlauf ist.
Problem tritt unter Proxmox nicht auf. Auch Neuinstallation beider Server brachte keinen Erfolg.
Aufbau LAN
Storage-Server: 10.0.200.1, 10.0.200.2, 10.0.200.3, 10.0.200.4
Esxi1: 10.0.200.50, 10.0.200.51
Multipath wurde auch erstmal abgeschaltet.
Weiß von euch jemand weiter? Bin mit meinem Latein am Ende.
EDIT:
Hat sich erledigt.
Ich besitzte ein X9SCL-F mit einer 82579LM NIC, die Standardmäßig nicht unterstützt wird (wird aber nicht für den iscsi verwendet).
Das Einbinden des benötigten Treiber hat funktioniert, wodurch aber irgendwie die Performance vom iscsi der beiden anderen NICs beeinträchtigt wurde.
Durchs Installieren eines neuen Treiber wurde das Problem behoben.
Nagg-it war also doch nicht schuld