System LOAD über 500

FreeBSD, Gentoo, openSUSE, CentOS, Ubuntu, Debian
Post Reply
moppi
Posts: 368
Joined: 2003-02-15 11:16
 

System LOAD über 500

Post by moppi »

Hallo,

leider habe ich wohl ein kleines Problem, meine Platte im Server bei 1&1 streikt seit ein paar Tagen. Kann es sein das dabei ein LOAD von über 500 zu stande kommt?

Es sind keine Prozesse soweit erkennbar die diesen Effekt herbeiführen könnten? Vielleicht kennt jemand solchen Effekt?

Leider hilft ein Neustart nur wenig, denn diese Zahlen sind nach ca. 30 Minuten wieder erreicht.

Vielen Dank
Daniel
captaincrunch
Userprojekt
Userprojekt
Posts: 7066
Joined: 2002-10-09 14:30
Location: Dorsten
Contact:
 

Re: System LOAD über 500

Post by captaincrunch »

Ja, das kann diesen Effekt hervorrufen. Schau mal in deine Logfiles, die müssten in dem Fall voll von Fehlermeldungen sein :

Code: Select all

grep hda /var/log/messages
DebianHowTo
echo "[q]sa[ln0=aln256%Pln256/snlbx]sb729901041524823122snlbxq"|dc
moppi
Posts: 368
Joined: 2003-02-15 11:16
 

Re: System LOAD über 500

Post by moppi »

Das sieht so aus:

Code: Select all

Jun  3 01:15:46 p15119052 kernel: hda: timeout waiting for DMA
Jun  3 01:15:46 p15119052 kernel: hda: status timeout: status=0xd0 { Busy }
Jun  3 01:15:46 p15119052 kernel: hda: drive not ready for command
Jun  3 06:00:00 p15119052 /USR/SBIN/CRON[17061]: (root) CMD (grep hda /var/log/warn)
Jun  4 06:00:00 p15119052 /USR/SBIN/CRON[3859]: (root) CMD (grep hda /var/log/warn)
Jun  5 05:59:59 p15119052 /USR/SBIN/CRON[5821]: (root) CMD (grep hda /var/log/warn)
Jun  6 06:00:00 p15119052 /USR/SBIN/CRON[11045]: (root) CMD (grep hda /var/log/warn)
ich habe auch unter netstat etwas merkwürdiges gefunden, da der TRAFFIC ansteigt wenn auch langsam aber kontinuierlich und das ist besorgniserregend. Was bitte ist denn

Code: Select all

bmcpatrolagent
?

Daniel
captaincrunch
Userprojekt
Userprojekt
Posts: 7066
Joined: 2002-10-09 14:30
Location: Dorsten
Contact:
 

Re: System LOAD über 500

Post by captaincrunch »

Sagt mir gar nichts. Kill mal den Prozess, und schau mal, was passiert, u.U. hast du dir da was ziemlich unangenehmes eingefangen.
DebianHowTo
echo "[q]sa[ln0=aln256%Pln256/snlbx]sb729901041524823122snlbxq"|dc
moppi
Posts: 368
Joined: 2003-02-15 11:16
 

Re: System LOAD über 500

Post by moppi »

Hier mal etwas das NETSTAT -A ausgibt:

Code: Select all

Active Internet connections (servers and established)
Proto Recv-Q Send-Q Local Address           Foreign Address         State
tcp        0      0 *:dnp                   *:*                     LISTEN
tcp        0      0 *:mysql                 *:*                     LISTEN
tcp        0      0 *:pop3                  *:*                     LISTEN
tcp        0      0 *:www-http              *:*                     LISTEN
tcp        0      0 *:ndmp                  *:*                     LISTEN
tcp        0      0 *:smtps                 *:*                     LISTEN
tcp        0      0 p151190XX.purese:domain *:*                     LISTEN
tcp        0      0 localhost.locald:domain *:*                     LISTEN
tcp        0      0 *:ftp                   *:*                     LISTEN
tcp        0      0 *:smtp                  *:*                     LISTEN
tcp        0      0 *:https                 *:*                     LISTEN
tcp        0      0 p151190XX.pure:www-http monitor1.internet:40920 TIME_WAIT
tcp        0      0 *:ssh                   *:*                     LISTEN
tcp        0      0 217.160.175.XX:ssh      80.142.6:bmcpatrolagent ESTABLISHED
tcp        0   1200 217.160.175.XX:ssh      80.142.67.214:3300      ESTABLISHED
udp        0      0 *:filenet-tms           *:*
udp        0      0 *:ndmp                  *:*
udp        0      0 *:dnp                   *:*
udp        0      0 p151190XX.purese:domain *:*
udp        0      0 localhost.locald:domain *:*
udp        0      0 *:bootpc                *:*
udp        0      0 p151190XX.pureserve:ntp *:*
udp        0      0 localhost.localdoma:ntp *:*
udp        0      0 *:ntp                   *:*
udp        0      0 *:filenet-rpc           *:*
Active UNIX domain sockets (servers and established)
Proto RefCnt Flags       Type       State         I-Node Path
unix  2      [ ACC ]     STREAM     LISTENING     2037   public/cleanup
unix  2      [ ACC ]     STREAM     LISTENING     2056   public/flush
unix  2      [ ACC ]     STREAM     LISTENING     2064   public/showq
unix  2      [ ACC ]     STREAM     LISTENING     1755   /var/lib/mysql/mysql.sock
unix  2      [ ACC ]     STREAM     LISTENING     2044   private/rewrite
unix  2      [ ACC ]     STREAM     LISTENING     2048   private/bounce
unix  2      [ ACC ]     STREAM     LISTENING     2052   private/defer
unix  2      [ ACC ]     STREAM     LISTENING     2060   private/smtp
unix  2      [ ACC ]     STREAM     LISTENING     2068   private/error
unix  2      [ ACC ]     STREAM     LISTENING     2072   private/local
unix  2      [ ACC ]     STREAM     LISTENING     2076   private/virtual
unix  2      [ ACC ]     STREAM     LISTENING     2080   private/lmtp
unix  2      [ ACC ]     STREAM     LISTENING     2084   private/cyrus
unix  2      [ ACC ]     STREAM     LISTENING     2088   private/uucp
unix  2      [ ACC ]     STREAM     LISTENING     2092   private/ifmail
unix  2      [ ACC ]     STREAM     LISTENING     2096   private/bsmtp
unix  2      [ ACC ]     STREAM     LISTENING     2100   private/vscan
unix  2      [ ACC ]     STREAM     LISTENING     2104   private/procmail
unix  2      [ ACC ]     STREAM     LISTENING     6121   /var/run/.nscd_socket
unix  12     [ ]         DGRAM                    1194   /dev/log
unix  2      [ ]         DGRAM                    303228
unix  2      [ ]         DGRAM                    5315
unix  2      [ ]         DGRAM                    3244
unix  2      [ ]         DGRAM                    2349
unix  2      [ ]         DGRAM                    2345
unix  3      [ ]         STREAM     CONNECTED     2107
unix  3      [ ]         STREAM     CONNECTED     2106
unix  3      [ ]         STREAM     CONNECTED     2103
unix  3      [ ]         STREAM     CONNECTED     2102
unix  3      [ ]         STREAM     CONNECTED     2099
unix  3      [ ]         STREAM     CONNECTED     2098
unix  3      [ ]         STREAM     CONNECTED     2095
unix  3      [ ]         STREAM     CONNECTED     2094
unix  3      [ ]         STREAM     CONNECTED     2091
unix  3      [ ]         STREAM     CONNECTED     2090
unix  3      [ ]         STREAM     CONNECTED     2087
unix  3      [ ]         STREAM     CONNECTED     2086
unix  3      [ ]         STREAM     CONNECTED     2083
unix  3      [ ]         STREAM     CONNECTED     2082
unix  3      [ ]         STREAM     CONNECTED     2079
unix  3      [ ]         STREAM     CONNECTED     2078
unix  3      [ ]         STREAM     CONNECTED     2075
unix  3      [ ]         STREAM     CONNECTED     2074
unix  3      [ ]         STREAM     CONNECTED     2071
unix  3      [ ]         STREAM     CONNECTED     2070
unix  3      [ ]         STREAM     CONNECTED     2067
unix  3      [ ]         STREAM     CONNECTED     2066
unix  3      [ ]         STREAM     CONNECTED     2063
unix  3      [ ]         STREAM     CONNECTED     2062
unix  3      [ ]         STREAM     CONNECTED     2059
unix  3      [ ]         STREAM     CONNECTED     2058
unix  3      [ ]         STREAM     CONNECTED     2055
unix  3      [ ]         STREAM     CONNECTED     2054
unix  3      [ ]         STREAM     CONNECTED     2051
unix  3      [ ]         STREAM     CONNECTED     2050
unix  3      [ ]         STREAM     CONNECTED     2047
unix  3      [ ]         STREAM     CONNECTED     2046
unix  3      [ ]         STREAM     CONNECTED     2043
unix  3      [ ]         STREAM     CONNECTED     2042
unix  3      [ ]         STREAM     CONNECTED     2040
unix  3      [ ]         STREAM     CONNECTED     2039
unix  3      [ ]         STREAM     CONNECTED     2036
unix  3      [ ]         STREAM     CONNECTED     2035
unix  3      [ ]         STREAM     CONNECTED     2033
unix  3      [ ]         STREAM     CONNECTED     2032
unix  3      [ ]         STREAM     CONNECTED     2030
unix  3      [ ]         STREAM     CONNECTED     2029
unix  2      [ ]         DGRAM                    2020
unix  2      [ ]         DGRAM                    1790
unix  2      [ ]         DGRAM                    1774
unix  2      [ ]         DGRAM                    1749
unix  2      [ ]         DGRAM                    1744
Vielleicht kann ein versiertes Auge sagen, ob dort etwas nicht stimmt?
captaincrunch
Userprojekt
Userprojekt
Posts: 7066
Joined: 2002-10-09 14:30
Location: Dorsten
Contact:
 

Re: System LOAD über 500

Post by captaincrunch »

217.160.175.XX:ssh 80.142.6:bmcpatrolagent ESTABLISHED
Die Zeile sagt eigentlich nur, dass eine ziemlich komische IP per ssh auf einem bestimmten Port (bmcpatrolagent) zugreift, bzw. die Verbindung aufgebaut ist. Mich wundert dabei die IP des Clients ?!?
DebianHowTo
echo "[q]sa[ln0=aln256%Pln256/snlbx]sb729901041524823122snlbxq"|dc
moppi
Posts: 368
Joined: 2003-02-15 11:16
 

Re: System LOAD über 500

Post by moppi »

hm sieht aus wie meine IP Adresse hier local aber verkürzt.

Wie lange brauchen denn die Damen und Herren bei 1&1 für einen Plattentausch? Vor 2 Tagen habe ich schon gemailt...
[tom]
Posts: 656
Joined: 2003-01-08 20:10
Location: Berlin
 

Re: System LOAD über 500

Post by [tom] »

BMC Patrol ist ein Monitoring Tool. Ist nicht kostenlos und auf keinen Fall defaultmäßig auf einem Rootserver installiert. Gibt es für etliche OS und neigt schon mal dazu, sich arg viel CPU Zeit zu nehmen. Der Agent geht über Highports, aber nicht über SSH.

[TOM]
moppi
Posts: 368
Joined: 2003-02-15 11:16
 

Re: System LOAD über 500

Post by moppi »

Hi TOM,

ich kann mir nicht vorstellen, wer das dort installiert haben soll zumal es wenn komerzeille software ist?!?!?

war auch nur einmal dort nach einem neustart war es wieder weg.

der load ist aber trotzdem immernoch so es werden auch immer mehr prozesse gestartet.
grinch
Posts: 140
Joined: 2002-08-02 11:24
 

Re: System LOAD über 500

Post by grinch »

sagt mir, wenn ich mich täusche, aber ist

Code: Select all

Jun  3 01:15:46 p15119052 kernel: hda: timeout waiting for DMA 
Jun  3 01:15:46 p15119052 kernel: hda: status timeout: status=0xd0 { Busy } 
Jun  3 01:15:46 p15119052 kernel: hda: drive not ready for command 
nicht das zeichen für das bevorstehende ende der platte?
captaincrunch
Userprojekt
Userprojekt
Posts: 7066
Joined: 2002-10-09 14:30
Location: Dorsten
Contact:
 

Re: System LOAD über 500

Post by captaincrunch »

@TOM : Achte mal darauf, von welcher IP der patrol-Port die Verbindung established hat ... ;)

@Grinch : Ja, genau das was ja auch seine anfängliche Vermutung, die sich als wahr herausgestellt hat ... ;)
DebianHowTo
echo "[q]sa[ln0=aln256%Pln256/snlbx]sb729901041524823122snlbxq"|dc
moppi
Posts: 368
Joined: 2003-02-15 11:16
 

Re: System LOAD über 500

Post by moppi »

ja ja ende der platte ....

von welcher ip beobachten... hm sieh bitte mal oben nach ich habe da mal ein netstat gepostet.

Code: Select all

217.160.175.XX:ssh      80.142.6:bmcpatrolagent
Die IP dort sieht etwas fraglich aus. ist jedoch am anfang identisch mit meiner hier vom ISP. nur ich habe sowas nicht gestartet.

Die Frage ist wie geht das mit den Prozessen ich habe hier in einem fenster die ausgaben von TOP liegen und da zählt running processes fast jede 2 Sekunde einen hoch.

Der Load steigt mit jeder Minute um 1 hoch...

Bei 500 ist dann Sense ... nur der Arbeitsspeicher ist unverändert. komisch oder?
rocko
Posts: 30
Joined: 2003-01-16 20:44
Location: Hannover
 

Re: System LOAD über 500

Post by rocko »

Grinch wrote:sagt mir, wenn ich mich täusche, aber ist

Code: Select all

Jun  3 01:15:46 p15119052 kernel: hda: timeout waiting for DMA 
Jun  3 01:15:46 p15119052 kernel: hda: status timeout: status=0xd0 { Busy } 
Jun  3 01:15:46 p15119052 kernel: hda: drive not ready for command 
nicht das zeichen für das bevorstehende ende der platte?
Jo, das war bei mir auch so, nur bei mir stieg die load nit, der server stürzte alle 3-4 Tage ab... Email an den Technischen Support mit der obigen Meldung, und die Platte wird gewechselt. Vorher alle Daten sichern...
kase
Posts: 1031
Joined: 2002-10-14 22:56
 

Re: System LOAD über 500

Post by kase »

Code: Select all

tcp        0      0 217.160.175.XX:ssh      80.142.6:bmcpatrolagent ESTABLISHED 
Die IP ist verkürzt, weil in dieser Spalte nicht mehr Platz ist, und der Port immer voll aufgelistet wird. Somit wird bei Platzmangel die IP abgeschnitten.

Es ist also zu 99,9 % Sicherheit die gleiche IP, die auch die SSH Verbindung aufgebaut hat.

Wenn du meinst, deine Prozesse würden als steigen, wäre es natürlich interessant zu wissen, WELCHER Prozess sich denn vermehrt...
rocko
Posts: 30
Joined: 2003-01-16 20:44
Location: Hannover
 

Re: System LOAD über 500

Post by rocko »

Moppi wrote:hm sieht aus wie meine IP Adresse hier local aber verkürzt.

Wie lange brauchen denn die Damen und Herren bei 1&1 für einen Plattentausch? Vor 2 Tagen habe ich schon gemailt...
Achso, seh ich jetzt erst.
Naja, mußt denen die Meldung aus /var/log/messages schicken, und sagen, das du die Daten bereits gesichert hast, damit die HDD getauscht werden kann. Dann gehts schneller.
moppi
Posts: 368
Joined: 2003-02-15 11:16
 

Re: System LOAD über 500

Post by moppi »

Also es ist CRON ich habe darüber webmins systats laufen habe es gerade ausgeschaltet.

da 1&1 die platte eh in den nächsten stunden tauscht... egal
chaoskind
Posts: 80
Joined: 2003-05-20 10:47
Contact:
 

Re: System LOAD über 500

Post by chaoskind »

cron selbst is es sicher ned, sind die prozesse die cron lädt, und ich gehe davon aus das es Webanalyer oder wie das ding heisst ist. Bei großen Logfiles kann das schnell mal die CPU belasten .. ich hatte bei nem 50 mb weblogfile schon n Load von 1.00 ;) (also ned 500 aba immerhin.. normalerweise hab i 0.00) das ding baut immer mehr prozesse auf, je größer das Logfile... und da bei dir die Pladde anscheinend auch defekt is, oder kurz vor dem abrauchen würde das im zusammenhang sicherlich ein riesiges Disaster sein ;)
dea
Posts: 532
Joined: 2002-08-13 12:05
 

Re: System LOAD über 500

Post by dea »

Moppi wrote:ich habe auch unter netstat etwas merkwürdiges gefunden, da der TRAFFIC ansteigt wenn auch langsam aber kontinuierlich und das ist besorgniserregend. Was bitte ist denn

Code: Select all

bmcpatrolagent
?

Daniel
Moppi, Moppi, Moppi (schnatt, schnatt, schnatt) ... ;) Das ist Dein PATROL-Agent der den Traffic erzeugt und da Du nicht gesagt hast, um wieviel Traffic es sich handelt, kann ich Dir auch nicht sagen, ob es normal oder nicht normal ist.

Eine gute deutschsprachige Adresse für bmc-Produkte ist http://www.patrol-forum.de - es ist Dir aber auch freigestellt, Dich per Mail oder PN direkt an mich zu wenden.
Post Reply