LinuxServer bootet nicht mehr nach voller HDD



F

frannek

Registered User
Hallo zusammen,

leider hab ich keine Informationen zu meinem Problem gefunden und nach 6 Stunden SuFu weis ich nicht mehr weiter.

Problem: Mein Server hat mit der Zeit es geschafft, 1,3 TB an Log zu schreiben. Aufgrund dessen, funktionierten einige Dinge nicht mehr (klar, bei 100% Use). Nun habe ich diese Dateien ausfindig gemacht, aber Linux bootet dennoch nicht mehr. Muss ich da noch etwas spezielles machen? Habe ich was übersehen?

Gruß

Frannek
 
Also, das ist leider ne Kiste, wo ich nicht davor sitzen und mal eben ne CD einschieben kan. Das problem war, dass zwei Logs mehr als voll waren, ich die über WinSCP gelöscht hatte und dann ist leider der PC abgeraucht.. Nachdem ich wiederin den Recovery Modus gegangen bin (weil ich vermeintlich dachte, es wäre gelöscht) war erstmal das hier angesagt:

[ 148.529914] EXT3 FS on md0, internal journal
[ 148.548209] ext3_orphan_cleanup: deleting unreferenced inode 328695830
[ 616.730111] ext3_orphan_cleanup: deleting unreferenced inode 317489327
[ 1844.561626] EXT3-fs: md0: 2 orphan inodes deleted
[ 1844.561633] EXT3-fs: recovery complete.
[ 1845.498484] EXT3-fs: mounted filesystem with ordered data mode.
root@zulu659:~# ext3_orphan_cleanup: deleting unreferenced inode 328695830
[ 1844.561626] EXT3-fs: md0: 2 orphan inodes deleted
[ 1844.561633] EXT3-fs: recovery complete.
[ 1845.498484] EXT3-fs: mounted filesystem with ordered data mode.
Click to expand...

Logisch, denn die Files waren ja noch da und wurden erst jetzt wirklich gelöscht. Jetzt habe ich gerademal 16% belegt. Nur Warte ich schon seit 10 Minuten auf nen Ping (musste ja rebootet, weil die recovery noch aktiv war).
Macht der jetzt vllt noch nen fsck der vorher durchläuft? Sind ja 1,4TB im Raid.. das würde dann ja ne weile dauern. Ich kann leider nicht sehen, was im Bootvorgang passiert. Alles gerade spekulationen von mir.. Ist übrigens Centos
 
Einfach abwarten, da wird wohl fsck laufen. Du könntest auch deinen ISP nach einem KVM/IPMI Screenshot fragen, oder einfach so um eine kurze Info, was gerade passiert.
 
Das hab ich vor zwei stunden gemacht.. Gerade war ein Ping da und scheinbar sind die selbst im recovery drin gewesen den mein zugang ssh ging jedenfalls nicht.

Eine Info hab ich leider auch noch nicht erhalten, was da gerade vorsich geht. Mensch.. so ein mist. KVM wäre jetzt wichtig
 
Eventuell mal beim ISP anrufen und direkt nachfragen. Viele bieten auch "IPKVM On Demand", also KVM-Zugriff auf Anfrage gegen eine Gebühr. Solange du nicht weißt, was auf dem Server beim Bootvorgang passiert, ist es natürlich schwierig irgendetwas zu unternehmen. Du könntest beispielsweise auch im Recovery Mode booten und die Logs durchsehen.
 
Ich wollte erst abwarten und sehen was passiertb evor ich wiederzu früh in den recovery schalte und der beim fsck nicht durch war. Nur gerade scheint der Provider selbst nachzusehen weil ich ein Ticket geschrieben habe. Seit 9 Uhr sitz ich an dem Mist und nur rätselraten... logs gaben nichts her und wurden seit 11 Uhr auch keine mehr geschrieben. Ich hab um info gebeten, was da momentan beim Boot passiert... keine Rückmeldung. Es lag ja definitiv an der vollen platte (warum apache error 1,4TB ansammeln konnte, ist jetzt erstmal zweitrangig ;-) ) Provider ist S4U.. ob die ein KVM anbieten??
 
Zu den Apache Logs: Eventuell hast du Debug-Logging aktiviert.

Dass S4U KVM auf Anfrage anbietet, wage ich fast zu bezweifeln, das ist ja ein ziemlicher Budget-Provider. Ich würde wie gesagt einfach mal bei der Hotline anrufen, damit du direkt eine Antwort bekommst, was besseres fällt mir da momentan auch nicht ein.
 
Werd ich gleich mal machen.
Ich mein, wenn es läuft, dann läuft alles gut und hatte da auch nie so meine Bedenken. Nur wenn sowas ist, dann bekomm ich die Galle. Naja, wird shcon klappen. Ansonsten.... oh man, das wird viel arbeit ;-)
 
In Zukunft wäre es sinnvoll, wenn du den Server anständig monitoren und Alerts erstellen würdest, sodass du beispielsweise ab 80 oder 90% HDD Auslastung eine Mail/SMS bekommst. Ohne gutes Monitoring kann so etwas sehr leicht auch dem besten Admin passieren (habe ich selbst erst vor wenigen Wochen erlebt, allerdings waren noch um die 2% frei - trotzdem zu knapp).

PS: Cacti wäre beispielsweise recht einfach aufzusetzen und effektiv genug für ~50 Server.
 
Recht hast du.... Cacti hatte ich mal aber das ist auch schon wieder etwas her. Das mit der vollen platte ist mir jetzt das zweite mal passiert.. ein drittes mal wird es nicht geben. Jetzt bin ich auf mich selbst sauer. Antwort vom Providersteht noch aus.
 
You must log in or register to reply here.
Back
Top