Serveur inaccessible après reboot

Ce site est optimisé pour être consulté depuis un navigateur moderne dans lequel JavaScript est activé.

Serveur inaccessible après reboot

geffroyma

Bonjour,
J'ai un serveur Kimsuffi depuis 1 an. J'ai utilisé les scripts d'installations présents sur le site afin d'y installer une seedbox / plex / owncloud dessus. Je fais régulièrement les updates de paquets afin d'être à jour.
Depuis 1 an aucun soucis dessus, j'avais quelques lenteurs et du mal à y accéder mardi 04/10 au matin, je lance un petit reboot dessus et là c'est le drame

Plus moyen d'y accéder, le serveur ne répond pas au ping.

Redémarrage en mode Rescue, j'arrive à prendre la main, monter ma partition en Chroot.
Je tente une réinstallation de Grub avec les conseils trouvé sur le forum ici
J'ai tenté de supprimer portsentry en me disant que le problème provient de là.
Supprimé les interfaces ipv6.
Mais rien n'y fait ...

Voici les infos remontées par OVH (pas très utiles)

Voici le detail de l'intervention realisee:
Le serveur est demarre (demande du 'login' a l'ecran) mais inaccessible
par le reseau (pas de 'ping').

Le disque est detecte
Aucune erreur detecte sur le disque

Actions entreprises:
Redemarrage du serveur sur mode 'rescue' (Linux)

Resultat:
Boot OK. Systeme 'rescue' accessible.

Recommandations:
Configuration logicielle a corriger par le client

root@rescue:/# cat /etc/debian_version
8.6

Si jamais vous avez des conseils avant de devoir tout réinstaller, je suis preneur

Mathieu

aktarus69

Regarde dans le syslog à quelle moment t'a une premiere erreur.

NOnoS

En effet, regarde le log du fichier syslog. (var/log/syslog) Tu pourras identifier ce qui va pas au démarrage.

geffroyma

Je viens de redémarrer le serveur et récupérer les syslogs du reboot. Je ne vois rien qui me parraissent anormal à part ceci :

Oct  7 10:08:53 geffroy2 smartd[3955]: Device: /dev/sda, type changed from 'scsi' to 'sat'
Oct  7 10:08:53 geffroy2 kernel: md: ... autorun DONE.
Oct  7 10:08:53 geffroy2 kernel: EXT3-fs (sda2): error: couldn't mount because of unsupported optional features (240)
Oct  7 10:08:53 geffroy2 kernel: EXT2-fs (sda2): error: couldn't mount because of unsupported optional features (244)
Oct  7 10:08:53 geffroy2 kernel: EXT4-fs (sda2): INFO: recovery required on readonly filesystem
Oct  7 10:08:53 geffroy2 kernel: EXT4-fs (sda2): write access will be enabled during recovery
Oct  7 10:08:53 geffroy2 smartd[3955]: Device: /dev/sda [SAT], opened
Oct  7 10:08:53 geffroy2 kernel: EXT4-fs (sda2): recovery complete
Oct  7 10:08:53 geffroy2 kernel: EXT4-fs (sda2): mounted filesystem with ordered data mode. Opts: (null)
Oct  7 10:08:53 geffroy2 named[3951]: managed-keys-zone: journal file is out of date: removing journal file

Le process se poursuit et ensuite j'ai des erreurs de network unreachable

Oct  7 10:08:53 geffroy2 kernel: VFS: Mounted root (ext4 filesystem) readonly on device 8:2.
Oct  7 10:08:53 geffroy2 kernel: devtmpfs: mounted
Oct  7 10:08:53 geffroy2 kernel: Freeing unused kernel memory: 1052K (ffffffff82572000 - ffffffff82679000)
Oct  7 10:08:53 geffroy2 kernel: grsec: time set by /lib/systemd/systemd[systemd:1] uid/euid:0/0 gid/egid:0/0, parent /[swapper/0:0] uid/euid:0/0 gid/egid:0/0
Oct  7 10:08:53 geffroy2 kernel: random: systemd urandom read with 66 bits of entropy available
Oct  7 10:08:53 geffroy2 named[3951]: managed-keys-zone: loaded serial 562
Oct  7 10:08:53 geffroy2 acpid: cannot open input layer
Oct  7 10:08:53 geffroy2 acpid: starting up with netlink and the input layer
Oct  7 10:08:53 geffroy2 systemd[1]: Starting User Manager for UID 1000...
Oct  7 10:08:53 geffroy2 systemd[1]: Starting Session c1 of user XXX.
Oct  7 10:08:53 geffroy2 kernel: random: nonblocking pool is initialized
Oct  7 10:08:53 geffroy2 kernel: EXT4-fs (sda2): re-mounted. Opts: errors=remount-ro
Oct  7 10:08:53 geffroy2 kernel: Adding 523260k swap on /dev/sda4.  Priority:-1 extents:1 across:523260k
Oct  7 10:08:53 geffroy2 kernel: EXT4-fs (sda3): mounted filesystem with ordered data mode. Opts: (null)
Oct  7 10:08:53 geffroy2 systemd[1]: Started Session c1 of user XXX.
Oct  7 10:08:53 geffroy2 systemd[1]: Starting user-111.slice.
Oct  7 10:08:53 geffroy2 systemd[1]: Created slice user-111.slice.
Oct  7 10:08:53 geffroy2 systemd[1]: Starting User Manager for UID 111...
Oct  7 10:08:53 geffroy2 systemd[1]: Starting Session c2 of user plex.
Oct  7 10:08:53 geffroy2 systemd[1]: Started Session c2 of user plex.
Oct  7 10:08:53 geffroy2 smartd[3955]: Device: /dev/sda [SAT], HGST HUS724020ALA640, S/N:PN2134P6K15T9X, WWN:5-000cca-22dead098, FW:MF6OAA70, 2.00 TB
Oct  7 10:08:53 geffroy2 smartd[3955]: Device: /dev/sda [SAT], not found in smartd database.
Oct  7 10:08:53 geffroy2 named[3951]: zone 0.in-addr.arpa/IN: loaded serial 1
Oct  7 10:08:53 geffroy2 acpid: 1 rule loaded
Oct  7 10:08:53 geffroy2 acpid: waiting for events: event logging is off
Oct  7 10:08:53 geffroy2 named[3951]: zone 255.in-addr.arpa/IN: loaded serial 1
Oct  7 10:08:53 geffroy2 named[3951]: zone 127.in-addr.arpa/IN: loaded serial 1
Oct  7 10:08:53 geffroy2 named[3951]: zone localhost/IN: loaded serial 2
Oct  7 10:08:53 geffroy2 named[3951]: all zones loaded
Oct  7 10:08:53 geffroy2 named[3951]: running
Oct  7 10:08:53 geffroy2 named[3951]: error (network unreachable) resolving './DNSKEY/IN': 192.33.4.12#53
Oct  7 10:08:53 geffroy2 named[3951]: error (network unreachable) resolving './NS/IN': 192.33.4.12#53

Les deux dernières lignes se répètent (avec des IP différentes)

Mathieu

NOnoS

Les dernières lignes me font penser à un problème de ce style : https://memo-linux.com/debian-7named-error-network-unreachable/

shyne

Je te renvoie vers ce lien, ton disque dur à l'air de s'être mis en lecture seule.

Ce n'est pas les mêmes symptomes, mais au vue de tes logs, ca ressemble beaucoup à ca.

https://mondedie.fr/d/8637

geffroyma

Merci NOnoS et Shyne pour les réponses,

J'ai tenté le coup de supprimer l'IPV6 du bind mais sans succès, le serveur ne rédémarre toujours pas

Concernant le smartctl, voici le résultats:

root@rescue:/# smartctl -a /dev/sda
smartctl 6.4 2014-10-07 r4002 [x86_64-linux-3.14.77-mod-std-ipv6-64-rescue] (local build)
Copyright (C) 2002-14, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Device Model:     HGST HUS724020ALA640
Serial Number:    PN2134P6K15T9X
LU WWN Device Id: 5 000cca 22dead098
Firmware Version: MF6OAA70
User Capacity:    2,000,398,934,016 bytes [2.00 TB]
Sector Size:      512 bytes logical/physical
Rotation Rate:    7200 rpm
Form Factor:      3.5 inches
Device is:        Not in smartctl database [for details use: -P showall]
ATA Version is:   ATA8-ACS T13/1699-D revision 4
SATA Version is:  SATA 3.0, 6.0 Gb/s (current: 3.0 Gb/s)
Local Time is:    Fri Oct  7 11:41:37 2016 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART overall-health self-assessment test result: PASSED

General SMART Values:
Offline data collection status:  (0x80) Offline data collection activity
                                        was never started.
                                        Auto Offline Data Collection: Enabled.
Self-test execution status:      (   0) The previous self-test routine completed
                                        without error or no self-test has ever
                                        been run.
Total time to complete Offline
data collection:                (   24) seconds.
Offline data collection
capabilities:                    (0x5b) SMART execute Offline immediate.
                                        Auto Offline data collection on/off support.
                                        Suspend Offline collection upon new
                                        command.
                                        Offline surface scan supported.
                                        Self-test supported.
                                        No Conveyance Self-test supported.
                                        Selective Self-test supported.
SMART capabilities:            (0x0003) Saves SMART data before entering
                                        power-saving mode.
                                        Supports SMART auto save timer.
Error logging capability:        (0x01) Error logging supported.
                                        General Purpose Logging supported.
Short self-test routine
recommended polling time:        (   1) minutes.
Extended self-test routine
recommended polling time:        ( 321) minutes.
SCT capabilities:              (0x003d) SCT Status supported.
                                        SCT Error Recovery Control supported.
                                        SCT Feature Control supported.
                                        SCT Data Table supported.

SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x000b   100   100   016    Pre-fail  Always       -       0
  2 Throughput_Performance  0x0005   137   137   054    Pre-fail  Offline      -       79
  3 Spin_Up_Time            0x0007   132   132   024    Pre-fail  Always       -       470 (Average 470)
  4 Start_Stop_Count        0x0012   100   100   000    Old_age   Always       -       66
  5 Reallocated_Sector_Ct   0x0033   100   100   005    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x000b   100   100   067    Pre-fail  Always       -       0
  8 Seek_Time_Performance   0x0005   142   142   020    Pre-fail  Offline      -       25
  9 Power_On_Hours          0x0012   098   098   000    Old_age   Always       -       14749
 10 Spin_Retry_Count        0x0013   100   100   060    Pre-fail  Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       66
192 Power-Off_Retract_Count 0x0032   100   100   000    Old_age   Always       -       322
193 Load_Cycle_Count        0x0012   100   100   000    Old_age   Always       -       322
194 Temperature_Celsius     0x0002   166   166   000    Old_age   Always       -       36 (Min/Max 16/43)
196 Reallocated_Event_Count 0x0032   100   100   000    Old_age   Always       -       0
197 Current_Pending_Sector  0x0022   100   100   000    Old_age   Always       -       1
198 Offline_Uncorrectable   0x0008   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x000a   200   200   000    Old_age   Always       -       0

SMART Error Log Version: 1
No Errors Logged

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Short offline       Completed without error       00%      1277         -
# 2  Short offline       Completed without error       00%      1269         -
# 3  Short offline       Completed without error       00%       991         -
# 4  Short offline       Completed without error       00%       989         -
# 5  Short offline       Completed without error       00%       989         -
# 6  Short offline       Completed without error       00%        24         -
# 7  Short offline       Completed without error       00%        23         -
# 8  Short offline       Completed without error       00%        23         -
# 9  Short offline       Completed without error       00%         5         -
#10  Short offline       Completed without error       00%         4         -
#11  Short offline       Completed without error       00%         4         -

SMART Selective self-test log data structure revision number 1
 SPAN  MIN_LBA  MAX_LBA  CURRENT_TEST_STATUS
    1        0        0  Not_testing
    2        0        0  Not_testing
    3        0        0  Not_testing
    4        0        0  Not_testing
    5        0        0  Not_testing
Selective self-test flags (0x0):
  After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.

root@rescue:/#

A première vue rien ne semble être en erreur pour moi.

Je continue de chercher;
Mathieu

geffroyma

En faisant un fsck sur la partition de boot, voici le résultat :

root@rescue:~# fsck.ext4 -v /dev/sda2
e2fsck 1.42.12 (29-Aug-2014)
/dev/sda2: recovering journal
Setting free inodes count to 811570 (was 811572)
Setting free blocks count to 1476020 (was 1476022)
/dev/sda2: clean, 469550/1281120 files, 3643724/5119744 blocks

geffroyma

La configuration de mes interfaces si cela peut aider :

#iface eth0 inet static
#       address W.X.Y.Z
#       netmask 255.255.255.0
#       network W.X.Y.Z
#       broadcast W.X.Y.Z
#       gateway W.X.Y.Z

auto lo br0

iface lo inet loopback

iface br0 inet static
#bridge_ports eth0
       address W.X.Y.Z
       netmask W.X.Y.Z
       network W.X.Y.Z
       broadcast W.X.Y.Z
       gateway W.X.Y.Z

iface eth0 inet manual
  up ip link set $IFACE up promisc on
  down ip link set $IFACE down promisc off

J'ai essayé de supprimer le bridge et repasser sur une interface toute simple, mais aucun changement majeur sur la connectivité.

Mathieu

geffroyma

Bonjour,

J'ai réussi à corriger mon problème, je n'ai pas encore l'explication mais voici ce que j'ai effectué :
- désinstallation de portesentry
- désinstallation de openvpn
- remise à plat de la configuration des interfaces réseau
- tout refonctionne

Merci de vos conseils.
Mathieu