[HaBo]

easteregg · 04.11.09, 23:42

heyho

ich mach das mal hier jetzt in threadform, da ich irgendwie nicht weiterkomme! paar jungs aus dem irc werden das ganze vielleicht schon kennen.

früher lief unter windows x64 2003 alles sauber und performant.
jetzt unter debian ....

erstmal config des rechners:

amd x2 2,3ghz
asus m2n-vm
8gb ram (4x2gb)
perc 5/i mit 3x 1TB samsung @raid5 und 2x 320gb @raid1 fürs os

das raid 5 ist als gpt eingerichtet und mit ext3 (wie auch das raid1 fürs os) als FS befeuert.
nun hab ich das problem, wenn ich vom raid 5 lese, passiert nichts, performance bei ~250mb/s wie zu erwarten hoch und keine nennenswerte IO last am prozessor.

bsp:

Code:

x2:/# dd if=/mnt/raid5/daten/test.iso  of=/dev/null bs=1M count=5k
5120+0 Datensätze ein
5120+0 Datensätze aus
5368709120 Bytes (5,4 GB) kopiert, 23,461 s, 229 MB/s

wenn ich jetzt was rauf schreib.... dann wirds brutal. schreibraten im keller, iowait am anschlag, server antwortet nichtmehr sinvoll, alle vms schlafen ein (wenn ich aufs raid1 schreiben sollte)

hier mal nen auszug aus iotop:

Code:

16993 root           0 B/s       0 B/s  0.00 % 99.35 % [pdflush]
18116 root           0 B/s       0 B/s  0.00 % 98.93 % [pdflush]
18115 root           0 B/s       0 B/s  0.00 % 98.92 % [pdflush]
21107 root           0 B/s       0 B/s  0.00 % 98.70 % [pdflush]
18109 root           0 B/s       0 B/s  0.00 % 98.68 % [pdflush]
18107 root           0 B/s       0 B/s  0.00 % 98.57 % [pdflush]
18108 root           0 B/s       0 B/s  0.00 % 98.57 % [pdflush]
18102 root           0 B/s       0 B/s  0.00 % 98.55 % [pdflush]
18114 root           0 B/s       0 B/s  0.00 % 98.54 % [pdflush]
18097 root           0 B/s       0 B/s  0.00 % 98.45 % [pdflush]
 1923 root           0 B/s       0 B/s  0.00 % 88.92 % [kjournald]
18090 root           0 B/s   45.37 M/s  0.00 % 69.33 % dd if /dev/zero of /mnt/raid5/test bs 1M count 5k
  945 root           0 B/s   11.58 K/s  0.00 %  2.22 % [kjournald]

diese dinger füllen sich immer mehr auf, bis alles sonstewas macht.
performance schlecht -> bsp. raid5 :

Code:

x2:/# dd if=/dev/zero of=/mnt/raid5/test bs=1M count=5k
5120+0 Datensätze ein
5120+0 Datensätze aus
5368709120 Bytes (5,4 GB) kopiert, 96,401 s, 55,7 MB/s

nun war mein gedanke, okay, ext3 dumm, kernel hat nen problem damit. geht scharf....

also was auf ne festplatte kopiert, die einzeln im system hängt und nicht am perc 5i
keine probleme, normale performance wie für ne einzelplatte und im iotop:

Code:

18296 root        3.88 K/s   59.00 M/s  0.00 %  4.61 % dd if /dev/zero of /mnt/backups/testfile

nix auffälliges.

noch fürs protokoll:

Code:

x2:/# lspci
00:00.0 RAM memory: nVidia Corporation MCP67 Memory Controller (rev a2)
00:01.0 ISA bridge: nVidia Corporation MCP67 ISA Bridge (rev a2)
00:01.1 SMBus: nVidia Corporation MCP67 SMBus (rev a2)
00:02.0 USB Controller: nVidia Corporation MCP67 OHCI USB 1.1 Controller (rev a2)
00:02.1 USB Controller: nVidia Corporation MCP67 EHCI USB 2.0 Controller (rev a2)
00:04.0 USB Controller: nVidia Corporation MCP67 OHCI USB 1.1 Controller (rev a2)
00:04.1 USB Controller: nVidia Corporation MCP67 EHCI USB 2.0 Controller (rev a2)
00:06.0 IDE interface: nVidia Corporation MCP67 IDE Controller (rev a1)
00:08.0 PCI bridge: nVidia Corporation MCP67 PCI Bridge (rev a2)
00:09.0 SATA controller: nVidia Corporation MCP67 AHCI Controller (rev a2)
00:0b.0 PCI bridge: nVidia Corporation MCP67 PCI Express Bridge (rev a2)
00:0c.0 PCI bridge: nVidia Corporation MCP67 PCI Express Bridge (rev a2)
00:0d.0 PCI bridge: nVidia Corporation MCP67 PCI Express Bridge (rev a2)
00:0e.0 PCI bridge: nVidia Corporation MCP67 PCI Express Bridge (rev a2)
00:0f.0 PCI bridge: nVidia Corporation MCP67 PCI Express Bridge (rev a2)
00:10.0 PCI bridge: nVidia Corporation MCP67 PCI Express Bridge (rev a2)
00:11.0 PCI bridge: nVidia Corporation MCP67 PCI Express Bridge (rev a2)
00:12.0 VGA compatible controller: nVidia Corporation GeForce 7050 PV / nForce 630a (rev a2)
00:18.0 Host bridge: Advanced Micro Devices [AMD] K8 [Athlon64/Opteron] HyperTransport Technology Configuration
00:18.1 Host bridge: Advanced Micro Devices [AMD] K8 [Athlon64/Opteron] Address Map
00:18.2 Host bridge: Advanced Micro Devices [AMD] K8 [Athlon64/Opteron] DRAM Controller
00:18.3 Host bridge: Advanced Micro Devices [AMD] K8 [Athlon64/Opteron] Miscellaneous Control
02:00.0 PCI bridge: Intel Corporation 80333 Segment-A PCI Express-to-PCI Express Bridge
02:00.2 PCI bridge: Intel Corporation 80333 Segment-B PCI Express-to-PCI Express Bridge
03:0e.0 RAID bus controller: Dell PowerEdge Expandable RAID controller 5
05:00.0 Ethernet controller: Intel Corporation 82572EI Gigabit Ethernet Controller (Copper) (rev 06)

Code:

x2:/# lsmod
Module                  Size  Used by
mptctl                 28808  0
mptbase                62052  1 mptctl
nls_utf8                6272  0
ntfs                  188672  0
nls_base               12932  2 nls_utf8,ntfs
vmnet                  43460  23
parport_pc             31016  0
parport                41776  1 parport_pc
vmci                   52904  5
vmmon                  72144  35
ipv6                  288456  41
loop                   19468  0
ide_cd_mod             36360  0
cdrom                  37928  1 ide_cd_mod
ata_generic            10116  0
amd74xx                13448  0 [permanent]
usbhid                 45792  0
hid                    41792  1 usbhid
ff_memless              9224  1 usbhid
snd_pcm                81800  0
snd_timer              25744  1 snd_pcm
snd                    63688  2 snd_pcm,snd_timer
soundcore              12064  1 snd
snd_page_alloc         13072  1 snd_pcm
psmouse                42268  0
pcspkr                  7040  0
serio_raw               9988  0
k8temp                  9216  0
ide_pci_generic         9220  0 [permanent]
e1000e                104872  0
ahci                   33036  2
libata                165600  2 ata_generic,ahci
ide_core              128284  3 ide_cd_mod,amd74xx,ide_pci_generic
dock                   14112  1 libata
ehci_hcd               36108  0
ohci_hcd               25092  0
wmi                    11712  0
button                 11680  0
evdev                  14208  0
ext3                  125072  5
jbd                    51240  1 ext3
mbcache                12804  1 ext3
sd_mod                 29376  10
thermal                22688  0
processor              42304  1 thermal
fan                     9352  0
thermal_sys            17728  3 thermal,processor,fan
shpchp                 34208  0
pci_hotplug            32056  1 shpchp
megaraid_sas           38204  4
scsi_mod              161016  4 mptctl,libata,sd_mod,megaraid_sas

ich dachte ja, es könnt vielleicht mit dem recht alten debian kernel zusammenhängen, daher hat ich mal die kerneleinstellung kopiert und den neusten übersetzt. brachte keine besserung.

ich bin jetzt am überlegen ob ich die firmware von dem perc mal downgraden sollte, aber ich kann mir nicht vorstellen, dass denen so ein brutaler schnitzer unterlaufen ist.

also dann, ihr seid meine letzte hoffnung, sonst bin ich gezwungen wieder zu windows zu wechseln, die die performance von meinen vms geht brutal in die knie. der server hat ansonsten noch paar kleine tasks nebenher laufen, die unabhännig von vmware sind, wie zb samba,ftp,tftp und co

easteregg · 11.02.10, 10:25

ENDLICH!

ich habs gelöst... nach nem kompletten systemwechsel auf nen tyan s3992 motherboard hat ich gedacht das wäre gelöst, aber war nicht so. daher habsch angefangen hier nochmal alles auseiannder zu nehmen und zu gucken worans liegen könnte. hab mir sogar nen zweiten perc organisiert, falls meine vielleicht kaputt ist.

nachdem ich alles mögliche getauscht hab (hardware) und probiert hab (software) hab ich angefangen die platten zu testen und dabei ist mir schlussendlich aufgeflalen, dass es an den 2 systemplatten liegt.

sobald ich diese abgeklemmt habe (vom perc) konnte ich wieder mit voller geschwindigkeit schreiben. das habsch über ne testinstallation mit nem anderen 64bit lenny debian gemacht, ich bin grad dabei die systemplatten zu backuppen und an den onboard raidcontroller als raid1 zu hängen. sobald das ganze abgeschlossen ist werde ichs nochmal testen um auch ausschliessen zu können, dass es doch mit dem installierten system zusammen hängt. aber ich nehme es stark an, da mit der testinstallation und angestecktem raid1 die probleme auch auftraten.

also falls jemand mal nach dem ganzen hier googlen sollte:

finger weg vom perc in kombination mit seagate 320GB Momentus 7200.4 2,5" Platten!!!

Empfehlung

11.02.10, 10:25	#2 (permalink)
easteregg Member of Honour Themenstarter Registriert seit: 14.09.07 Likes: 60	ENDLICH! ich habs gelöst... nach nem kompletten systemwechsel auf nen tyan s3992 motherboard hat ich gedacht das wäre gelöst, aber war nicht so. daher habsch angefangen hier nochmal alles auseiannder zu nehmen und zu gucken worans liegen könnte. hab mir sogar nen zweiten perc organisiert, falls meine vielleicht kaputt ist. nachdem ich alles mögliche getauscht hab (hardware) und probiert hab (software) hab ich angefangen die platten zu testen und dabei ist mir schlussendlich aufgeflalen, dass es an den 2 systemplatten liegt. sobald ich diese abgeklemmt habe (vom perc) konnte ich wieder mit voller geschwindigkeit schreiben. das habsch über ne testinstallation mit nem anderen 64bit lenny debian gemacht, ich bin grad dabei die systemplatten zu backuppen und an den onboard raidcontroller als raid1 zu hängen. sobald das ganze abgeschlossen ist werde ichs nochmal testen um auch ausschliessen zu können, dass es doch mit dem installierten system zusammen hängt. aber ich nehme es stark an, da mit der testinstallation und angestecktem raid1 die probleme auch auftraten. also falls jemand mal nach dem ganzen hier googlen sollte: finger weg vom perc in kombination mit seagate 320GB Momentus 7200.4 2,5" Platten!!! __________________ » Flattr mich! - Wenn dir mein Beitrag geholfen hat! « <\| 2 AMD Opterons 2384@ 8x3,2ghz \| Tyan S2915 \| 10GB \| 2x 8800GT \| 8400GS \| Dell 3008WFP + 2x2007FP \|>

Themen-Optionen
Druckbare Version zeigen Jemanden per E-Mail auf dieses Thema hinweisen
Ansicht
Linear-Darstellung Zur Hybrid-Darstellung wechseln Zur Baum-Darstellung wechseln

Ähnliche Themen
Thema	Autor	Forum	Antworten	Letzter Beitrag
Proxy Konfiguration Debian 5.2.0a Lenny	gelöscht	Linux/UNIX	2	07.09.09 15:01
Debian 5.0 Lenny, kein netzwerkmanager	CrAc	Linux/UNIX	11	29.03.09 01:20
Partitionieren unter Debian (Lenny)	Qeyos	Linux/UNIX	1	11.03.09 19:51
X61 Tablet unter Debian Lenny	Serow	Linux/UNIX	3	18.02.09 16:38
seltsamkeit bei debian lenny	matheguru	Linux/UNIX	6	16.01.09 14:49

[HaBo]

Perc 5/i (MegaRaid SAS) + Debian lenny x86_64 = iowait > 100%