systemabsturz - wer kann mir was zu dieser Fehlermeldung sagen?

[siryasokuhl]

Mir ist der Server abgestürtzt. In der Sys.log konnte ich den Vorgang einigermassen nachvollziehen.

Der Auslöser für einen sich über 2 Stunden hinziehenden Absturz ist diese Fehlermeldung.

kernel: file: table is full

Doch leider kann ich damit nichts anfangen.

Ich würde mich freuen, wenn ihr mir weiterhelfen könntet.

Hier nochmal ein kleiner Auszug aus dem Sys.log (also halt der Anfang vom Absturz)

Im Voraus schon mal Vielen Dank für Eure Hife.

Feb 23 17:52:00 bigmac CRON[14468]: (admin) CMD (/Applications/CreAktiv-Skripte/pageEPSer.sh)

Feb 23 17:52:00 bigmac CRON[14469]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_werbespiegel.sh)

Feb 23 17:52:00 bigmac CRON[14470]: (admin) CMD (/Applications/CreAktiv-Skripte/move_to_in_screen.sh)

Feb 23 17:52:00 bigmac CRON[14471]: (admin) CMD (/Applications/CreAktiv-Skripte/move_to_in.sh)

Feb 23 17:52:00 bigmac CRON[14472]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_gautinger.sh)

Feb 23 17:52:00 bigmac CRON[14473]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_sendlinger.sh)

Feb 23 17:52:00 bigmac CRON[14474]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_samstag_sz.sh)

Feb 23 17:52:00 bigmac CRON[14475]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_samstag_dah.sh)

Feb 23 17:53:00 bigmac CRON[14493]: (admin) CMD (/Applications/CreAktiv-Skripte/pageEPSer.sh)

Feb 23 17:53:00 bigmac CRON[14494]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_werbespiegel.sh)

Feb 23 17:53:00 bigmac CRON[14495]: (admin) CMD (/Applications/CreAktiv-Skripte/move_to_in.sh)

Feb 23 17:53:00 bigmac CRON[14496]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_sendlinger.sh)

Feb 23 17:53:00 bigmac CRON[14497]: (admin) CMD (/Applications/CreAktiv-Skripte/move_to_in_screen.sh)

Feb 23 17:53:00 bigmac CRON[14498]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_samstag_sz.sh)

Feb 23 17:53:00 bigmac CRON[14499]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_samstag_dah.sh)

Feb 23 17:53:00 bigmac CRON[14500]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_gautinger.sh)

Feb 23 17:53:50 bigmac kernel: file: table is full

Feb 23 17:54:00 bigmac last message repeated 154 times

Feb 23 17:54:00 bigmac CRON[14517]: (admin) CMD (/Applications/CreAktiv-Skripte/move_to_in_screen.sh)

Feb 23 17:54:00 bigmac CRON[14518]: (admin) CMD (/Applications/CreAktiv-Skripte/pageEPSer.sh)

Feb 23 17:54:00 bigmac CRON[14519]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_werbespiegel.sh)

Feb 23 17:54:00 bigmac CRON[14520]: (admin) CMD (/Applications/CreAktiv-Skripte/move_to_in.sh)

Feb 23 17:54:00 bigmac CRON[14521]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_sendlinger.sh)

Feb 23 17:54:00 bigmac CRON[14522]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_samstag_sz.sh)

Feb 23 17:54:00 bigmac CRON[14523]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_samstag_dah.sh)

Feb 23 17:54:00 bigmac kernel: file: table is full

Feb 23 17:54:00 bigmac kernel: file: table is full

[SystemError]

Mir ist der Server abgestürtzt.

Ach der Server? Ja, klar! Der Server eben!

Nein mal im Ernst:

Ich würde darauf tippen dass Deine Maschine an Begrenzungen wie die Maximalzahl der offenen Filedeskriptoren oder ähnliches stösst.

Für eine weitere Diagnose und Diskussion der ganzen Sache wäre es aber wirklich nützlich zu wissen welches BetriebsSystem du verwendest.

Nur so ein Gedanke.

Sollte es sich um FreeBSD handeln so hilft Dir vielleicht das hier weiter:

http://groups.google.de/groups?hl=de&lr=&threadm=20030725221154.GA4398%40users.munk.nu.lucky.freebsd.questions&rnum=4&prev=/groups%3Fq%3D%2522kernel:%2Bfile:%2Btable%2Bis%2Bfull%2522%26hl%3Dde%26lr%3D%26scoring%3Dd%26selm%3D20030725221154.GA4398%2540users.munk.nu.lucky.freebsd.questions%26rnum%3D4

Bye

SystemError

[s7n]

Mir ist der Server abgestürtzt. In der Sys.log konnte ich den Vorgang einigermassen nachvollziehen.

Der Auslöser für einen sich über 2 Stunden hinziehenden Absturz ist diese Fehlermeldung.

kernel: file: table is full

*BSD oder Linux ? Kernel-Version ?

Was sagt

sysctl fs/file-max

?

[Schlaubi]

Hallo,

Feb 23 17:54:00 bigmac CRON[14517]: (admin) CMD (/Applications/CreAktiv-Skripte/move_to_in_screen.sh)

Feb 23 17:54:00 bigmac CRON[14518]: (admin) CMD (/Applications/CreAktiv-Skripte/pageEPSer.sh)

Feb 23 17:54:00 bigmac CRON[14519]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_werbespiegel.sh)

Feb 23 17:54:00 bigmac CRON[14520]: (admin) CMD (/Applications/CreAktiv-Skripte/move_to_in.sh)

Feb 23 17:54:00 bigmac CRON[14521]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_sendlinger.sh)

Feb 23 17:54:00 bigmac CRON[14522]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_samstag_sz.sh)

Feb 23 17:54:00 bigmac CRON[14523]: (admin) CMD (/Applications/CreAktiv-Skripte/rip_samstag_dah.sh)

Feb 23 17:54:00 bigmac kernel: file: table is full

Feb 23 17:54:00 bigmac kernel: file: table is full

es wäre interessant zu wissen, was in den Skripten steht - aber ich glaube das ist Firmengeheimnis...

Ich sehe ihr versucht einen gewissen Workflow digital abzubilden (RIP = steht hierfür nicht für Rest in Peace, sondern für Raster Image Processor).

PrePress/Druckvorstufe, sieht nach Zeitungsproduktion aus?

Ist es denn schon des öfteren der Fall gewesen, dass der Server abgestürzt ist?

Wie siehts mit Betriebssystem, Speicher, Plattenplatz aus?

Übernimmt die Firma Creaktiv keinen Support f. derartige Ausfälle?

[siryasokuhl]

Für eine weitere Diagnose und Diskussion der ganzen Sache wäre es aber wirklich nützlich zu wissen welches BetriebsSystem du verwendest.

Darwin Kernel Version 7.7.0

OS X (10.3) Server

Ist es denn schon des öfteren der Fall gewesen, dass der Server abgestürzt ist?

Wie siehts mit Betriebssystem, Speicher, Plattenplatz aus?

Übernimmt die Firma Creaktiv keinen Support f. derartige Ausfälle?

Nein, das war der erste Absturz. Das System läuft bereits schon seit einem halben Jahr, und es hat bis jetzt eigentlich noch nie etwas daran gefehlt.

Was sagt: sysctl fs/file-max

kern.maxfiles = 12288

kern.maxfilesperproc = 10240

kern.symfile = \mach.sym

Seit dem neustart, hält sich der Pegel der offenen Dateien immer bei ca. 800

obwohl keine änderung am System vorgenommen wurden. Und alle Dienste arbeiten.

bigmac:~ admin$ pstat -T

824/12288 files

[SystemError]

....

kern.maxfiles = 12288

kern.maxfilesperproc = 10240

kern.symfile = \mach.sym

Seit dem neustart, hält sich der Pegel der offenen Dateien immer bei ca. 800

obwohl keine änderung am System vorgenommen wurden. Und alle Dienste arbeiten.

bigmac:~ admin$ pstat -T

824/12288 files

Heya,

also 824 von 12288 geöffneten Dateien hört sich ja "eigentlich" harmlos an.

2 Gedanken dazu:

1.)

Da scheinen jede Menge Cronjobs minütlich zu laufen...

Was fassen denn die Cronjobs so an Dateien an?

Du schreibst, dass dein System schon längere Zeit einwandfrei laufen würde; evtl. bearbeiten die Cronjobs ja mittlerweile erheblich mehr Dateien als zu Anfangszeiten. Könnte mir Vorstellen dass es da zu kurzzeitigen Lastspitzen kommen könnte. Aber das ist reichlich spekulativ. Geb 's ja zu!

2.)

Was ich in solchen Fällen des öfteren tue:

Einen "Erbsenzähler" basteln. Ein simples ShellSkript, das die Anzahl der geöffneten Dateien in eine Datei mitschreibt. Das ganze dann so im 5 bis Sekundenbereich wiederholen und natürlich mit entsprechenden Zeitstempeln versehen. Spätestens beim nächsten Absturz wäre es dann interessant zu sehen ob die Anzahl der geöffneten Dateien sprunghaft ansteigt.

Bye

SystemError

[siryasokuhl]

Heya,

Einen "Erbsenzähler" basteln.

SystemError

Klingt gut - ich schätze, daß ist vorerst die einzige vernünftige Lösung.

Ich werde es mal damit versuchen - wobei ich aber hoffe daß es nicht wieder vorkommt (also halt so ein absturz)

Immerhin läuft das System schon seit einem halben Jahr ohne ein Problen.

Also dann, vorerst mal vielen DANK für Eure Hilfe

[siryasokuhl]

tja der Erbenszähler läuft ja jetzt doch schon ein weilchen, und die anzahl der geöffneten Files ist nie über 1000 Stück.

Ich hoffe mal, dass es wirklich nur einmalig war.