Linux krasj - hva skjer?

[xenoxz]

Har sutra litt i "Hva er fordelen med linux over win" tråden. Her er et av problemene jeg har pr idag om noen hadde giddi å hjulpet meg:

 

Copy/paste fra /var/log/syslog:

 

 

May 25 07:20:01 ubuntu /USR/SBIN/CRON[7275]: (root) CMD ([ -x /usr/sbin/update-motd ] && /usr/sbin/update-motd 2>/dev/null)

May 25 07:30:03 ubuntu /USR/SBIN/CRON[7599]: (root) CMD ([ -x /usr/sbin/update-motd ] && /usr/sbin/update-motd 2>/dev/null)

May 25 07:30:03 ubuntu /USR/SBIN/CRON[7600]: (root) CMD (test -x /etc/init.d/anacron && /usr/sbin/invoke-rc.d anacron start >/dev/null)

May 25 07:30:04 ubuntu anacron[7768]: Anacron 2.3 started on 2009-05-25

May 25 07:30:04 ubuntu anacron[7768]: Will run job `cron.daily' in 5 min.

May 25 07:30:04 ubuntu anacron[7768]: Jobs will be executed sequentially

May 25 07:35:04 ubuntu anacron[7768]: Job `cron.daily' started

May 25 07:35:04 ubuntu anacron[8159]: Updated timestamp for job `cron.daily' to 2009-05-25

May 25 07:40:01 ubuntu /USR/SBIN/CRON[8188]: (root) CMD ([ -x /usr/sbin/update-motd ] && /usr/sbin/update-motd 2>/dev/null)

May 25 07:50:01 ubuntu /USR/SBIN/CRON[8412]: (root) CMD ([ -x /usr/sbin/update-motd ] && /usr/sbin/update-motd 2>/dev/null)

May 25 07:55:22 ubuntu kernel: [297425.937954] BUG: unable to handle kernel paging request at 0000000000008029

May 25 07:55:22 ubuntu kernel: [297425.937959] IP: [<ffffffff8038d62c>] journal_commit_transaction+0x73c/0xd60

May 25 07:55:22 ubuntu kernel: [297425.937965] PGD c1ce0067 PUD 1d8fb067 PMD 0

May 25 07:55:22 ubuntu kernel: [297425.937968] Oops: 0002 [#1] SMP

May 25 07:55:22 ubuntu kernel: [297425.937970] last sysfs file: /sys/devices/pci0000:00/0000:00:1e.0/0000:06:07.0/class

May 25 07:55:22 ubuntu kernel: [297425.937973] Dumping ftrace buffer:

May 25 07:55:22 ubuntu kernel: [297425.937975] (ftrace buffer empty)

May 25 07:55:22 ubuntu kernel: [297425.937976] CPU 1

May 25 07:55:22 ubuntu kernel: [297425.937977] Modules linked in: isofs udf crc_itu_t binfmt_misc radeon drm bridge stp bnep video output input_polldev lp snd_hda_intel snd_pcm_oss snd_mixer_oss snd_pcm snd_seq_dummy snd_seq_oss snd_seq_midi snd_rawmidi snd_seq_midi_event snd_seq snd_timer snd_seq_device snd soundcore iTCO_wdt iTCO_vendor_support intel_agp snd_page_alloc ppdev pcspkr parport_pc parport usbhid ohci1394 ieee1394 r8169 mii floppy raid10 raid456 async_xor async_memcpy async_tx xor raid1 raid0 multipath linear fbcon tileblit font bitblit softcursor

May 25 07:55:22 ubuntu kernel: [297425.938003] Pid: 2264, comm: kjournald Not tainted 2.6.28-11-generic #42-Ubuntu

May 25 07:55:22 ubuntu kernel: [297425.938004] RIP: 0010:[<ffffffff8038d62c>] [<ffffffff8038d62c>] journal_commit_transaction+0x73c/0xd60

May 25 07:55:22 ubuntu kernel: [297425.938007] RSP: 0018:ffff88012dc67df0 EFLAGS: 00010246

May 25 07:55:22 ubuntu kernel: [297425.938008] RAX: 0000000000008029 RBX: ffff88012cdf2400 RCX: ffffffff8039001b

May 25 07:55:22 ubuntu kernel: [297425.938010] RDX: ffff8801243472a0 RSI: ffffe20003feb788 RDI: ffff88012cdf2554

May 25 07:55:22 ubuntu kernel: [297425.938011] RBP: ffff88012dc67ea0 R08: 0000000000000000 R09: ffff880028102000

May 25 07:55:22 ubuntu kernel: [297425.938012] R10: 0000000000000002 R11: 0000000000000000 R12: ffff880060bd0c40

May 25 07:55:22 ubuntu kernel: [297425.938014] R13: ffff880060bd0ca0 R14: ffff88003e072240 R15: ffff88012cdf2554

May 25 07:55:22 ubuntu kernel: [297425.938015] FS: 0000000000000000(0000) GS:ffff88012f802b80(0000) knlGS:0000000000000000

May 25 07:55:22 ubuntu kernel: [297425.938017] CS: 0010 DS: 0018 ES: 0018 CR0: 000000008005003b

May 25 07:55:22 ubuntu kernel: [297425.938018] CR2: 0000000000008029 CR3: 00000000330a6000 CR4: 00000000000406a0

May 25 07:55:22 ubuntu kernel: [297425.938020] DR0: 0000000000000000 DR1: 0000000000000000 DR2: 0000000000000000

May 25 07:55:22 ubuntu kernel: [297425.938021] DR3: 0000000000000000 DR6: 00000000ffff0ff0 DR7: 0000000000000400

May 25 07:55:22 ubuntu kernel: [297425.938023] Process kjournald (pid: 2264, threadinfo ffff88012dc66000, task ffff88012cdec320)

May 25 07:55:22 ubuntu kernel: [297425.938024] Stack:

May 25 07:55:22 ubuntu kernel: [297425.938025] ffff88012cdf2424 ffff88012cdf2400 ffff88012dc67e20 ffff8801243471e0

May 25 07:55:22 ubuntu kernel: [297425.938027] ffff88012c4bc000 000000002f288000 ffff88012dc67e50 ffffffff8025c676

May 25 07:55:22 ubuntu kernel: [297425.938030] ffff88012cdf2598 ffff88012dc67e50 0000000000000282 ffff88012cdf2598

May 25 07:55:22 ubuntu kernel: [297425.938033] Call Trace:

May 25 07:55:22 ubuntu kernel: [297425.938034] [<ffffffff8025c676>] ? lock_timer_base+0x36/0x70

May 25 07:55:22 ubuntu kernel: [297425.938038] [<ffffffff8025c70a>] ? try_to_del_timer_sync+0x5a/0x70

May 25 07:55:22 ubuntu kernel: [297425.938040] [<ffffffff803912e4>] kjournald+0xe4/0x240

May 25 07:55:22 ubuntu kernel: [297425.938043] [<ffffffff80268930>] ? autoremove_wake_function+0x0/0x40

May 25 07:55:22 ubuntu kernel: [297425.938046] [<ffffffff80391200>] ? kjournald+0x0/0x240

May 25 07:55:22 ubuntu kernel: [297425.938048] [<ffffffff802684c9>] kthread+0x49/0x90

May 25 07:55:22 ubuntu kernel: [297425.938050] [<ffffffff80213979>] child_rip+0xa/0x11

May 25 07:55:22 ubuntu kernel: [297425.938053] [<ffffffff80268480>] ? kthread+0x0/0x90

May 25 07:55:22 ubuntu kernel: [297425.938055] [<ffffffff8021396f>] ? child_rip+0x0/0x11

May 25 07:55:22 ubuntu kernel: [297425.938057] Code: 09 41 8b 44 24 60 85 c0 75 08 4c 89 e7 e8 9d ef f7 ff 4c 89 ff e8 45 0f 31 00 49 8b 04 24 a8 01 0f 85 71 fb ff ff 49 8b 44 24 10 <f0> 0f ba 28 00 19 d2 85 d2 0f 85 98 04 00 00 49 8b 7c 24 10 48

May 25 07:55:22 ubuntu kernel: [297425.938079] RIP [<ffffffff8038d62c>] journal_commit_transaction+0x73c/0xd60

May 25 07:55:22 ubuntu kernel: [297425.938081] RSP <ffff88012dc67df0>

May 25 07:55:22 ubuntu kernel: [297425.938082] CR2: 0000000000008029

May 25 07:55:22 ubuntu kernel: [297425.938084] ---[ end trace 112e20ef27f88ba6 ]---

May 25 14:53:56 ubuntu syslogd 1.5.0#5ubuntu3: restart.

May 25 14:53:57 ubuntu kernel: Inspecting /boot/System.map-2.6.28-11-generic

May 25 14:53:57 ubuntu kernel: Cannot find map file.

May 25 14:53:57 ubuntu kernel: Loaded 55233 symbols from 48 modules.

 

 

Som dere ser er det ingen aktivitet fra 07:55 til jeg restartet den 14:53. Da svarte ikke maskinen på noenting, hverken over nettverk eller når jeg fysisk skrur på skjermen og trykker på tastaturet.

 

Kjører ubuntu 9.04, eneste tjenester jeg bruker er samba (som følger med ubuntu 9.04) og har installert sabNZBd selv (ubuntu klient).

[jonnor]

Kernel panics kan bare være en av to ting, maskinvarefeil eller bug.

Vet du at maskinvaren din fungerer bra? Testet minne osv?

Har OS'et fungert uten problemer tidligere? Når startet problemet? Hva må til for at problemet oppstår? Er det noe system?

Endret 25. mai 2009 av jonnor

[xenoxz]

Kernel panics kan bare være en av to ting, maskinvarefeil eller bug.

Vet du at maskinvaren din fungerer bra? Testet minne osv?

Har OS'et fungert uten problemer tidligere? Når startet problemet? Hva må til for at problemet oppstår? Er det noe system?

 

Helt ny maskin:

 

 

ASUS VGA-Card Radeon HD3450 256MB PCI-E 2xDVI TV-Out Retail (EAH3450/HTP/256M)

GIGABYTE MB GA-EP45-DS3L C2D DDR2 LAN DIMM PCIE SATA2 FSB1600 (GA-EP45-DS3L)

INTEL Q9400 2.66G 6MB 1333MHZ C2 QUAD PROCESSOR (BX80580Q9400)

OCZ TECH DDR2 PC2-8500 Blade Heatspreader 1066MHz 4G (2x2gb) Kit 5-5-5-18 2.1V (OCZ2B10664GK)

SAMSUNG F1 1TB 3.5" SATA2 7200RPM 32MB (HD103UJ) x4

 

og en Western Digital (tror jeg) 400gb disk som jeg vet fungerer bra.

 

OS ligger på 400GB disken, 1TB diskene er satt opp i RAID0 (software raid)

 

 

 

Installerte og satte opp maskinen for fire-fem uker siden, så det er mulig problemet alltid har vært her.. Er 2 uker på / 2 uker av, i forsvaret, så var ikke hjemme når problemene startet.

 

Som du ser av loggen var dette klokken 07:55, da ingen var hjemme eller brukte maskinen. Aner ikke hva som kan ha forårsaket det.

 

Minnesjekk? Nei? Hvordan gjør jeg det?

[jonnor]

Har det skjedd mer enn en gang?

I oppstartsmenyen til Ubuntu (GRUB) har du en oppføring som heter memtest86+ som kan teste minnet. Sett det på over natta eller noe slikt, for det bør helst kjøre noen timer.

 

Og legg ved hele syslog fila di er du grei.

 

OT men: 1TB disker i RAID0? Håper du er flink med backup, for det er ganske så sårbare saker!

[xenoxz]

Hmm.. noe rart skjedde, posten ble blank.. Mulig det ble for mye med hele syslog fila?

 

Lasta den opp hit:

http://s3.filesdump.com/file/fd5ed92bb751/syslog.html

 

Kan kjøre memtest i natt. Men kan det være minnet da? Det er jo helt nytt...

 

Det har skjedd 4-5 ganger nå. En gang fikk jeg kernel panic eller noe slikt under oppstart. Søkte opp feilmeldingen, men fant ikke relevant info. Etter sånn 3-4 reboots så fikk jeg logga inn...

 

 

Innholdet er ikke viktig. Har uansett ikke mulighet til å ta backup av 4TB.. Vurderte RAID5, men mister for mye kapasitet.

Endret 25. mai 2009 av xenoxz

[jonnor]

Bruk vedlegg/attachement funksjonaliteten her på forumet neste gang

Helt klart at det kan være minne eller noe relatert til det. Dersom det viser seg at det ikke er noe problem, så må du rapportere dette problemet på bugtrackeren til Ubuntu. Pass forresten på at du kjører et oppdatert system.

 

Har du noen voldsomme krav til ytelse siden du valgte RAID0? For du har omtrent 4 ganger så høy krasjsannsynlighet som hvis du bruker enkeltdisker, og da vil du miste alt om en disk krasjer i motsetning til bare innholdet på en disk...

[xenoxz]

Hmm.. Okey. Får vel bare teste i natt da. Utrolig irriterende..

 

Kjører oppdatert system.

 

Nja.. Har alltid irritert meg over lav ytelse på filserverne jeg har satt opp. Investerte i Gbit switch, har 5e kablet skultanlegg i huset, og nå 4TB i RAID0. Dette BURDE jo gi grei ytelse? Har mellom 5-7 PCer som kan finne på å streame HD tvserier/filmer samtidig (2xTV stue, to brødre, to foreldre, pluss meg).

 

Har testet litt, men føler ikke jeg får utnyttet det så godt som jeg burde. Av og til er hastighetene nede i 1MB/s, og av og til oppe i 50-60. Men Gbit nettverk har jo kapasitet for 125MB/s.. Har ikke regna noe på hva jeg burde få ut av diskene nå, men de bør da være mer enn 50MB/s?

 

 

Edit: når du sier krasjsannsynlighet så mener du at diskene skal krasje og data skal gå tapt ja? Ikke OS-krasjsannsynlighet?

Endret 25. mai 2009 av xenoxz

[Crowly]

Edit: når du sier krasjsannsynlighet så mener du at diskene skal krasje og data skal gå tapt ja? Ikke OS-krasjsannsynlighet?

Bakdelen med Raid 0 er at hvis en disk tar kvelden, så mister du all data fra alle diskene (det er null feiltoleranse). Fordi når du lagrer en fil så blir 25% av filen lagret på hver disk (gitt 4 disker, og kanskje noe forenklet). Det er grunnen til mye høyere lese og skrive hastigheter, siden hver disk må skrive/lese mindre.

Med Raid 5 så får du en noe redusert skrive hastighet, og mister lagringsplass tilsvarende en disk. Krever minimum tre disker. Lesehastigheten er bra.

Denne oversikten er ganske grei for å sammenligne de forskjellige raid løsningene: http://www.pcguide.com/ref/hdd/perf/raid/levels/comp.htm (i følge den så er lese hastigheten bedre på raid 5 enn raid 0).

Endret 25. mai 2009 av Crowly

[xenoxz]

Jada, dette er jeg klar over Lurte bare på om han mente at oset hadde større sannsynlighet for å krasje. Hva vet vel jeg?

[Sokkalf™]

OSet i seg selv skal strengt tatt ikke kræsje uansett. Gjør det det, skyldes det som regel en av følgende :

 

1. Dårlig driver

2. Dårlig hardware

3. En software-bug i kjernen

 

Kjør memtest, har sett helt nytt minne som har vært dårlig før. Det er også åpenbart noe galt med oppsettet ditt hvis du får så elendig hastighet på RAID0-arrayet.

[Code#]

Har det skjedd mer enn en gang?

I oppstartsmenyen til Ubuntu (GRUB) har du en oppføring som heter memtest86+ som kan teste minnet. Sett det på over natta eller noe slikt, for det bør helst kjøre noen timer.

 

Og legg ved hele syslog fila di er du grei.

 

OT men: 1TB disker i RAID0? Håper du er flink med backup, for det er ganske så sårbare saker!

 

Mens vi venter på memtest har jeg et hardware-spørsmål. Du sier at dette er en ny maskin, hvilke deler har du beholdt fra den gamle (og da tenker jeg spesifikt på om du har beholdt powersupply)? Dersom du kjører en ny maskin med quad-core cpu, 4 GB minne og 4 disker samt at du har en gammel 300w PSU kan det hende du sliter litt. For lite PSU i forhold til antall enheter = ustabil maskin. Det medfører som regel masse spikes, ripple og annet tull som gjør PC ustabil.

 

Dessuten: Hadde jeg vært deg hadde jeg etablert et RAID-5 i steden for RAID-0.

 

Mvh,

Code#

[jevel]

Kernel panics + dårlig ytelse på RAID?

 

Lukter kjip raidkontroller lang vei spør du meg. Har hatt tilsvarende problemer tidligere.

 

May 25 07:55:22 ubuntu kernel: [297425.937954] BUG: unable to handle kernel paging request at 0000000000008029

May 25 07:55:22 ubuntu kernel: [297425.937959] IP: [<ffffffff8038d62c>] journal_commit_transaction+0x73c/0xd60

 

Høres ut som den sliter med å skrive til disk.

 

-KJ

[jonnor]

I dette tilfellet er det langt ifra sikkert at han har dårlig RAID ytelse da han, slik jeg har forstått, har testet overføringer over nettverket. Her er det mange andre flaskehalser, som nettverket i seg selv og spesielt protokollen som blir brukt.

 

Uansett, så ville det vært gull med flere logger av krasj også. Dersom hvert krasj skyldes det samme (feil under paging) tyder det på en bug, mens mer random feil kan peke mot hardware problematikk.

[xenoxz]

Glemte helt å sette på memtest i går.. var så sliten av jobb osv. Skal huske på å få satt det på før jeg legger meg i kveld, kommer rapport på det i morgen

 

 

 

Ang. hastigheten på raidoppsettet så var det snakk om over nettverk ja. Det skal være 1000 mbit nettverk, står 1000mbit på både ubuntu maskina og vista maskina jeg prøver å kopiere til. Det siste døgnet har jeg bare fått 8-10 MB/s. Det er vel litt under 100mbit hastighet det.. =/

 

Dette er da med samba. Vet ikke om samba har innebygd begrensning eller noe sånt jeg?

 

Når jeg lager kopier av filer på disken (altså skriver og leser til og fra raid arrayet) får jeg 90MB/s. Skal jeg ikke få opp til 300MB/s da?

[xenoxz]

Hadde memtest kjørende i litt over 10 timer.

 

Ser bra ut. Pass 13, errors 0. "Pass complete, no errors, press Esc to exit".

[xenoxz]

Der frøys den igjen gitt. Merka det rundt midnatt. Maskina svarer ikke over nettverk, og bildet er fryst når jeg skrur på skjermen som er koblet til.

 

Svenskeknappen - reboot - får CRC error - system halt.

 

Rebooter igjen. Alt (tilsynelatende) ok.

syslog.txt

Endret 27. mai 2009 av xenoxz

[jonnor]

https://launchpad.net/ubuntu/+bugs

Ideelt sett skal man bare rapportere bugs som man kan reprodusere, men det er muligens litt knotete i dette tilfellet. Kanskje noen her, eller på bugtrackeren har en idè om hvordan du kan fremprovosere problemet.

Legg ihvertfall ved syslog for vært eneste krasj, sjekk også dmesg. Se også infoen her:

https://wiki.ubuntu.com/DebuggingProcedures (under Kernel)

Endret 28. mai 2009 av jonnor

[haades]

Glemte helt å sette på memtest i går.. var så sliten av jobb osv. Skal huske på å få satt det på før jeg legger meg i kveld, kommer rapport på det i morgen

 

 

 

Ang. hastigheten på raidoppsettet så var det snakk om over nettverk ja. Det skal være 1000 mbit nettverk, står 1000mbit på både ubuntu maskina og vista maskina jeg prøver å kopiere til. Det siste døgnet har jeg bare fått 8-10 MB/s. Det er vel litt under 100mbit hastighet det.. =/

 

Dette er da med samba. Vet ikke om samba har innebygd begrensning eller noe sånt jeg?

 

Når jeg lager kopier av filer på disken (altså skriver og leser til og fra raid arrayet) får jeg 90MB/s. Skal jeg ikke få opp til 300MB/s da?

samba er treigt, har du prøvd ftp f.eks?

[jonnor]

Det var en diskusjon om samba her for en god stund tilbake, og da var det flere som klarte oppimot gigabit hastigheter (90-120MB/s) såvidt jeg husker. Så det skal være mulig ihvertfall.

FTP er særdeles dårlig egnet til streaming. Da er SFTP/SSHFS bedre, men integrasjonen på Windows ser litt dårlig ut. Dokan er en mulighet, men har ikke fått testet det enda. http://dokan-dev.net/en/

[Sokkalf™]

Jeg får ganske dårlige hastigheter på Samba mellom Linux->Linux eller Solaris->Linux (40-50MB/s). Med Windows7 som klient og Solaris som server får jeg ~100MB/s, så ser nesten ut som sambaklienten er relativt dårlig, mens serverdelen funker bra.