Opublikowano:

Błąd wejścia/wyjścia(input/output error)

Mam problem na serwerze Kimsufi I7-2T. Serwer po np. paru godzinach podczas wykonania jakiejkolwiek komendy (np. htop, ls itp.) lub programu wyświetla komunikat (np. dla komendy reboot – bo padł mysql):

-bash: /sbin/reboot: Błąd wejścia/wyjścia

Po tym komunikacie na serwerze wszystko pada totalnie (chyba, że padło już szybciej to wtedy nawet ssh nie łączy się prawidłowo – nie ładuje konsoli). Co prawda coś tam na serwerze działa ale np. mysql nie ma bazy, komendy się nie wykonują bo występuje błąd wejścia/wyjścia

System: Debian 5 Lenny
Zainstalowany jest DirectAdmin

Zgłaszałem (tickety 560222 <– ostatni, 560221, 559851) to już do OVH ale ich interwencja sprowadziła się jedynie do wymiany kabelka od dysku twardego (niby to miało pomóc) oraz porad, że mam zrobić hardware testy. Przeprowadziłem testy dysków, RAM, procesora i błędów w trybie rescue-pro nie pokazało (rescue-pro i testy dysków to jakieś nieporozumienie było bo nic się nie chciało wykonać). Zlikwidowałem software RAID 1 (z racji, że nie jest mi potrzebny aż tak i wskazywało na to, że jest uszkodzony RAID). Przez parę dni po reinstalacji działało wszystko dobrze ale teraz znowu jest ten sam kłopot.
Prosiłem OVH o wymianę dysków twardych bo nie mam za bardzo pomysłu o co chodzi.

Ktoś się spotkał z takim problemem?

Interesuje mnie wpis w SMART:
SMART Self-test log structure revision number 1
Num Test_Description Status Remaining LifeTime(hours) LBA_of_first_error
# 1 Extended offline Completed without error 00% 3685 –
# 2 Extended offline Interrupted (host reset) 90% 3632 –
# 3 Extended offline Interrupted (host reset) 90% 3632 –
# 4 Extended offline Interrupted (host reset) 80% 3629 –
# 5 Short offline Completed without error 00% 16 –

Offline 90%? Poniżej całe wyniki dla obu dysków.
Bujam się z tym problemem już jakiś czas i rozwiązaniem nie jest restart serwera co jakiś czas. OVH rękami i nogami się broni przed wymianą dysków i mówią, że z serwerem jest wszystko OK. 🙁

Wynik smartctl -a /dev/sda1

Kod:

smartctl version 5.38 [i686-pc-linux-gnu] Copyright (C) 2002-8 Bruce Allen
Home page is http://smartmontools.sourceforge.net/

=== START OF INFORMATION SECTION ===
Device Model:    ST31000528AS
Serial Number:    9VP585FA
Firmware Version: CC38
User Capacity:    1,000,204,886,016 bytes
Device is:        Not in smartctl database [for details use: -P showall]
ATA Version is:  8
ATA Standard is:  ATA-8-ACS revision 4
Local Time is:    Thu Oct 21 08:49:36 2010 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART overall-health self-assessment test result: PASSED
See vendor-specific Attribute list for marginal Attributes.

General SMART Values:
Offline data collection status:  (0x82)    Offline data collection activity
                    was completed without error.
                    Auto Offline Data Collection: Enabled.
Self-test execution status:      (  0)    The previous self-test routine completed
                    without error or no self-test has ever
                    been run.
Total time to complete Offline
data collection:          ( 600) seconds.
Offline data collection
capabilities:              (0x7b) SMART execute Offline immediate.
                    Auto Offline data collection on/off support.
                    Suspend Offline collection upon new
                    command.
                    Offline surface scan supported.
                    Self-test supported.
                    Conveyance Self-test supported.
                    Selective Self-test supported.
SMART capabilities:            (0x0003)    Saves SMART data before entering
                    power-saving mode.
                    Supports SMART auto save timer.
Error logging capability:        (0x01)    Error logging supported.
                    General Purpose Logging supported.
Short self-test routine
recommended polling time:      (  1) minutes.
Extended self-test routine
recommended polling time:      ( 182) minutes.
Conveyance self-test routine
recommended polling time:      (  2) minutes.
SCT capabilities:            (0x103f)    SCT Status supported.
                    SCT Feature Control supported.
                    SCT Data Table supported.

SMART Attributes Data Structure revision number: 10
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG    VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate    0x000f  116  099  006    Pre-fail  Always      -      100973608
  3 Spin_Up_Time            0x0003  095  095  000    Pre-fail  Always      -      0
  4 Start_Stop_Count        0x0032  100  100  020    Old_age  Always      -      94
  5 Reallocated_Sector_Ct  0x0033  038  038  036    Pre-fail  Always      -      2549
  7 Seek_Error_Rate        0x000f  077  060  030    Pre-fail  Always      -      55192749
  9 Power_On_Hours          0x0032  096  096  000    Old_age  Always      -      4035
 10 Spin_Retry_Count        0x0013  100  100  097    Pre-fail  Always      -      0
 12 Power_Cycle_Count      0x0032  100  100  020    Old_age  Always      -      47
183 Unknown_Attribute      0x0032  001  001  000    Old_age  Always      -      264
184 Unknown_Attribute      0x0032  100  100  099    Old_age  Always      -      0
187 Reported_Uncorrect      0x0032  100  100  000    Old_age  Always      -      0
188 Unknown_Attribute      0x0032  100  094  000    Old_age  Always      -      1383000834376
189 High_Fly_Writes        0x003a  100  100  000    Old_age  Always      -      0
190 Airflow_Temperature_Cel 0x0022  055  043  045    Old_age  Always  In_the_past 45 (0 68 46 45)
194 Temperature_Celsius    0x0022  045  057  000    Old_age  Always      -      45 (0 15 0 0)
195 Hardware_ECC_Recovered  0x001a  032  020  000    Old_age  Always      -      100973608
197 Current_Pending_Sector  0x0012  100  100  000    Old_age  Always      -      0
198 Offline_Uncorrectable  0x0010  100  100  000    Old_age  Offline      -      0
199 UDMA_CRC_Error_Count    0x003e  200  200  000    Old_age  Always      -      0
240 Head_Flying_Hours      0x0000  100  253  000    Old_age  Offline      -      11759620460600
241 Unknown_Attribute      0x0000  100  253  000    Old_age  Offline      -      2739316860
242 Unknown_Attribute      0x0000  100  253  000    Old_age  Offline      -      792442946

SMART Error Log Version: 1
No Errors Logged

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Extended offline    Completed without error      00%      3685        -
# 2  Extended offline    Interrupted (host reset)      90%      3632        -
# 3  Extended offline    Interrupted (host reset)      90%      3632        -
# 4  Extended offline    Interrupted (host reset)      80%      3629        -
# 5  Short offline      Completed without error      00%        16        -

SMART Selective self-test log data structure revision number 1
 SPAN  MIN_LBA  MAX_LBA  CURRENT_TEST_STATUS
    1        0        0  Not_testing
    2        0        0  Not_testing
    3        0        0  Not_testing
    4        0        0  Not_testing
    5        0        0  Not_testing
Selective self-test flags (0x0):
  After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.


Wynik smartctl -a /dev/sdb1

Kod:

smartctl version 5.38 [i686-pc-linux-gnu] Copyright (C) 2002-8 Bruce Allen
Home page is http://smartmontools.sourceforge.net/

=== START OF INFORMATION SECTION ===
Device Model:    ST31000528AS
Serial Number:    9VP572HB
Firmware Version: CC38
User Capacity:    1,000,204,886,016 bytes
Device is:        Not in smartctl database [for details use: -P showall]
ATA Version is:  8
ATA Standard is:  ATA-8-ACS revision 4
Local Time is:    Thu Oct 21 08:49:42 2010 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART overall-health self-assessment test result: PASSED
See vendor-specific Attribute list for marginal Attributes.

General SMART Values:
Offline data collection status:  (0x82)    Offline data collection activity
                    was completed without error.
                    Auto Offline Data Collection: Enabled.
Self-test execution status:      (  0)    The previous self-test routine completed
                    without error or no self-test has ever
                    been run.
Total time to complete Offline
data collection:          ( 600) seconds.
Offline data collection
capabilities:              (0x7b) SMART execute Offline immediate.
                    Auto Offline data collection on/off support.
                    Suspend Offline collection upon new
                    command.
                    Offline surface scan supported.
                    Self-test supported.
                    Conveyance Self-test supported.
                    Selective Self-test supported.
SMART capabilities:            (0x0003)    Saves SMART data before entering
                    power-saving mode.
                    Supports SMART auto save timer.
Error logging capability:        (0x01)    Error logging supported.
                    General Purpose Logging supported.
Short self-test routine
recommended polling time:      (  1) minutes.
Extended self-test routine
recommended polling time:      ( 181) minutes.
Conveyance self-test routine
recommended polling time:      (  2) minutes.
SCT capabilities:            (0x103f)    SCT Status supported.
                    SCT Feature Control supported.
                    SCT Data Table supported.

SMART Attributes Data Structure revision number: 10
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG    VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate    0x000f  114  095  006    Pre-fail  Always      -      131769192
  3 Spin_Up_Time            0x0003  094  094  000    Pre-fail  Always      -      0
  4 Start_Stop_Count        0x0032  100  100  020    Old_age  Always      -      94
  5 Reallocated_Sector_Ct  0x0033  086  086  036    Pre-fail  Always      -      604
  7 Seek_Error_Rate        0x000f  072  060  030    Pre-fail  Always      -      16694039
  9 Power_On_Hours          0x0032  096  096  000    Old_age  Always      -      4036
 10 Spin_Retry_Count        0x0013  100  100  097    Pre-fail  Always      -      0
 12 Power_Cycle_Count      0x0032  100  100  020    Old_age  Always      -      47
183 Unknown_Attribute      0x0032  090  090  000    Old_age  Always      -      10
184 Unknown_Attribute      0x0032  100  100  099    Old_age  Always      -      0
187 Reported_Uncorrect      0x0032  100  100  000    Old_age  Always      -      0
188 Unknown_Attribute      0x0032  100  095  000    Old_age  Always      -      38655819793
189 High_Fly_Writes        0x003a  100  100  000    Old_age  Always      -      0
190 Airflow_Temperature_Cel 0x0022  054  044  045    Old_age  Always  In_the_past 46 (0 24 46 46)
194 Temperature_Celsius    0x0022  046  056  000    Old_age  Always      -      46 (0 18 0 0)
195 Hardware_ECC_Recovered  0x001a  029  022  000    Old_age  Always      -      131769192
197 Current_Pending_Sector  0x0012  100  100  000    Old_age  Always      -      0
198 Offline_Uncorrectable  0x0010  100  100  000    Old_age  Offline      -      0
199 UDMA_CRC_Error_Count    0x003e  200  200  000    Old_age  Always      -      0
240 Head_Flying_Hours      0x0000  100  253  000    Old_age  Offline      -      23162758631465
241 Unknown_Attribute      0x0000  100  253  000    Old_age  Offline      -      588918242
242 Unknown_Attribute      0x0000  100  253  000    Old_age  Offline      -      3974223174

SMART Error Log Version: 1
No Errors Logged

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Extended offline    Interrupted (host reset)      00%      3633        -
# 2  Short offline      Completed without error      00%        16        -

SMART Selective self-test log data structure revision number 1
 SPAN  MIN_LBA  MAX_LBA  CURRENT_TEST_STATUS
    1        0        0  Not_testing
    2        0        0  Not_testing
    3        0        0  Not_testing
    4        0        0  Not_testing
    5        0        0  Not_testing
Selective self-test flags (0x0):
  After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.