Q-BLOG » Server

Der Server muss weg

markus — Thu, 02 Jul 2009 07:58:05 +0000

So langsam hole ich alles was ich in den letzten Monaten bloggen wurde nach. Die aktuellen warmen Temperaturen (aktuell 24 Grad Celsius) erinnerten mich daran, das es Ende April ja bereits ähnlich warm war. Zu diesem Zeitpunkt hielt ich mich gerade bei einem guten Geschäftspartner auf. Diese hat inhouse einen Rackserver in einem 22 HE 19″ Rack. Aufgrund der Temperaturen dort im Dachgeschoss machte die Maschine immer Lauter auf sich aufmerksam.

Der Wunsch des Kunden die Maschine wegzuschaffen war schnell realisiert. Innerhalb von 20 Minuten stand der Server in unserer CoLo in Hannover. Schnell noch einen BOVPN Tunnel zwischen der WG im Büro und einer unserer WGs im RZ gesponnen, fertig. Lärm und Wärmeentwicklung gehören damit der Vergangenheit an.
In letzter Zeit machen wir soetwas immer öfter, viele Bestandskunden und Firman fragen an ob Sie Ihre eigenen Inhouse Server nicht lieber bei uns virtualisiert oderr dediziert im Rechenzentrum betreiben können. Das bieten wir natürlich an. Dabei gebe ich aber grundsätzlich zu bedenken das eine Standard DSL Anbindung (was man überlicherweise im Büro hat) weder eine MPLS ist noch (in den meisten Fällen zumindest) zugesicherte Verfügbarkeiten aufweist. Da es in den meisten Unternehmen mittlerweile sowieso soweit ist, das ohne Internet nicht mehr gearbeitet werden kann, ist das nicht weiter schlimm.
Das man ohne Internet nicht mehr arbeiten kann gilt für uns auch. Einer der Gründe warum wir zwei DSL Leitungen bei zwei unterschiedlichen Anbietern haben. Wenn nicht gerade der Bagger in der nähe ist, ist es unwahrscheinlich das beide gleichzeitig ausfallen. Sollte dies doch eintreffen folgt dem dann UMTS. Und sollte das UMTS Netz auch weg sein, haben wir natürlich auch noch was.

Murphy und RAID

markus — Mon, 29 Jun 2009 08:54:27 +0000

Irgendwie lässt man mich in letzter Zeit nicht blogge. Zum erneuten Male gelobe ich besserung, irgendwann wird das dann vielleicht auch mal was. Der genannte Fall ist es schon ein wenig her und geschah Anfang
Mai. Bei einem Kunden vor Ort (also nicht im RZ) war eine SATA Festplatte der Meinung sie hätte nun Rentenanspruch und versagte Flux den Dienst und das schon nach 3 Jahren und ein paar Monaten (WD RAID Edition). Es handelte sich um einen Storage Server mit ICP Vortex RAID Controller und einer RAID5 Konfiguration aus 3x 250 GB (damals war das viel . . ) und 1x 250 GB als HotSpare. Der Controller steuerte natürlich sofort die HotSpare an und begann den Rebuild, 30 Minuten später verabschiedete sich auch die HotSpare aus Solidarität in den Feierabend. Damit greift dann eine Sicherheitskonfiguration des Vortex und das RAID läuft ab dann im RO Modus, findet Linux zwar nicht sonderlich lustig, is aber so.
Glücklicherweise war zu der Zeit niemand mehr im Haus, Freitag war Feiertag und damit Montag die erste Person wieder im Haus. Die am Samstag schnell organisierten 250 GB Platten waren natürlich zu klein (das RAID wurde natürlich kleiner als die vorhandenen Platten angelegt) sodass 500 GB die nächstgrößeren Platten genutzt wurden. Nach nur mehr als 12 Stunden Rebuild war das RAID wieder voll Einsatzbereit.
Das war wieder ein Punkt für unseren Grundsatz wichtige Server nach drei Jahren zu erneuern. Nun, der Kunde wollte die Maschine unbedingt 5 Jahre nutzen.

IBM xSeries – AKT XV

markus — Thu, 09 Apr 2009 14:20:50 +0000

Schon wieder ist einiges an Zeit vergangen. Bei uns laufen gerade ein Haufen großer Projekte (ohne IBM) aus diesem Grund ist es hier zur Zeit etwas ruhig. Wenn die ersten komplett abgeschlossen wird, gibt es hier nach und nach Infos dazu. Des Weiteren habe ich mir fest vorgenommen in den nächsten Tagen wieder hilfreiches und sinnvolles zu verfassen. Aber zurück zum Thema.

Für mich ist zur Zeit die Geschichte mit IBM noch nicht abgeschlossen. Mr. Bratislave hat aktuell trotz Einwände meinerseits wohl das Beschwerdeticket geschlossen, zumindest gehe ich davon aus, da er schon seit einigen Tagen nicht mehr angerufen hat. Das IBM Management hat angebloch auch die Zusage gegeben, das das Gerät zurückgenommen wird. Allerdings gibt es immer zwei Seiten einer Geschichte. Der Lieferant konnte jeden von mir genannten Fehler auf Anhoeb nachbauen, IBM weigert sich dem Lieferanten gegenüber aber den Server zurückzunehmen oder nocht irgendetwas daran zu machen. IBM ist der Meinung der Lieferant solle sich die Maschine in die Ecke stellen.

Es kann es immer noch nicht nachvollziehen das und vor allem wie es überhaupt zu solch einem Desaster kommen konnte, wir reden schließlich nicht über irgendeinen Billiganbieter sondern über IBM. Hoffen wir das SUN auch ohne IBM die Kurze bekommt, zumindest wurde die Ankündigung des SUN/IBM Deals von mir und auch einigen Kunden sehr besorgt verfolgt. Auf jeden Fall sackt für mich IBM von Tag zu Tag weiter ab und hat anscheinend auch kein Interesse daran dies zu ändern.

IBM xSeries returns in: IBM xSeries – AKT XVI oder: Es reicht

IBM xSeries – AKT XIII

markus — Fri, 27 Feb 2009 13:00:43 +0000

Au revoir, mon Server

Träum ich? Ich kann es noch garnicht fassen, aber heute morgen wurde der IBM x3550 von UPS abgeholt. Allerdings nicht im Auftrag von IBM sondern des Lieferanten. IBM weigert sich aktuell immer noch beharrlich anzuerkennen das 1. Die Maschie DoA war und 2. Das es immer noch einen Fehler. Der Lieferant wird nun unsere Tests durchlaufen lassen mit denen sich der Fehler zuverlässig nachvollziehen lässt.

IBM xSeries returns in: IBM xSeries – AKT XIV – Oder: Ist ein Ende in Sicht?

HP Service++

markus — Wed, 18 Feb 2009 08:29:24 +0000

Damit das hier nicht doch noch zum IBM Meckerblog avanciert, auch einmal was positives. Wobei natürlich der Grund weniger positiv ist. Wir hatten am Samstag unseren ersten HP ServiceFall. Es versagte gegen 2 Uhr morgens ein System Board eines DL360 (der war gerade einen Monat alt. . . .). Und das nach dem Einbau einer zusätzlichen original HP Netzwerkkarte (wie immer wurden natürlich sämtliche Bestimmungen eingehalten und alles drei mal kontrolliert). Nach einigen eigenen Tests und entfernen der Netzwerkkarte änderte sich nichts. Also schnell HP angerufen und auch sofort jemanden dran gehabt. Fehlersuche war schnell erledigt, ich erwähnte dem Techniker gegenüber was ich bereits gemacht hatte und er erwähnte das er auch nur das vorgeschlagen hättte. Er meinte er sende sofort Techniker und System Board plus Reiser Card für den Notfall los. In weniger als vier Stunden war alles vor Ort und eine Stunde später lief wieder alles. Der HP Techniker hat mir gegenüber ausgeschlossen das es an der Netzwerkkarte oder deren Einbau gelegen haben kann. Ich würde als Fazit sagen, das war ein ServiceFall aus dem Bilderbuch, genau so soll es sein. Ich sollte zudem noch erwähnen das zu der Zeit die Straßen und Hannover (und zwischen Bremen und Hannover) absolut komplett vereist und spiegelglatt waren.

Neue Server – MDS-M

markus — Sun, 15 Feb 2009 20:45:42 +0000

Seit einigen Tagen haben wir nun neue Modelle im Portfolio und natürlich gibt es für alle Interessierten auch Testberichte und Benchmarks. Beim MDS-M handelt es sich um einen DL320G5. Dieser wurde schon genau an dieser Stelle beschrieben, aus diesem Grund gehe ich auf das Bekannte nicht weiter ein. Die Hardware des MDS-X sieht wie folgt aus:
- XEON QuadCore 2,5 GHz
- 8 GB RAM
- 2x 146 GB 15k SAS (RAID 1)
- HP Smart Array E200 RAID Controller
Nun, zu der Hardware gibt es nicht viel zu sagen außer das Sie einfach Pfeil schnell ist und perfekt mit unseren Setups harmoniert, aber ein Benchmark (bonnie++) sagt mehr:

Version 1.93c       ------Sequential Output------ --Sequential Input- --Random-
Concurrency   1     -Per Chr- --Block-- -Rewrite- -Per Chr- --Block-- --Seeks--
Machine        Size K/sec %CP K/sec %CP K/sec %CP K/sec %CP K/sec %CP  /sec %CP
server       16G   273  99 68176  25 27996   6  2293  88 137389  16  1213  11
Latency             38043us   10422ms     273ms   73019us   17354us   29743us
Version 1.93c       ------Sequential Create------ --------Random Create--------
localhost           -Create-- --Read--- -Delete-- -Create-- --Read--- -Delete--
              files  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP
                 16 26295  88 +++++ +++ 29356 100 29592  92 +++++ +++ 29440  98
Latency               466us      56us     970us    1415us      14us    1917us

IBM xSeries – AKT XI

markus — Thu, 12 Feb 2009 11:18:12 +0000

Ich sehe es schon vor meinen Augen: Das Jahr 2020, ich heize gerade mit dem Segway über den “Q-MEX Campus” und bekomme ein Telefonat durchgestellt. Es ist wieder eimal Mr. Bratislava und möchte mich über den aktuellen Stand der Abholung des IBM x3550 informieren. Er versichert mir das er wirklich nur noch eine Zusage braucht, denn der, der diese Zusage eigentlich machen sollte ist mittlerweile in Rente gegangen. Dank langjähriger wöchentlicher Telefonate kenne ich Mr. Bratislava mittlerweile recht gut, so schnacken wir gerade über das Wetter in Bratislava. Ich nähere mich dem Hauptgebäude in dem sich mein Büro befindet und ecke bei der einfahrt in selbiges leicht mit dem Segway an dem IBM Karton an der seit einigen Jahren auf seine Abholung wartet.

Naja, ganz so weit ist es noch nicht, aber nah drann. Seit einigen Wochen steht der DL360 im RZ und tut genau das was er soll und das auch noch stabil. In der Zwischenzeit ruft Mr. Bratislava etwa zwei mal die Woche an und hält mich über den aktuellen Status auf dem Laufenden (das zwei mal die Woche ist nicht ausgedacht). Jedes Mal betont er das ihm jetzt nur noch eine Zusage fehle und dann endlich ein Abholtermin vereinbart wird. Letzte Woche bei einem längeren Planungsgespräch mit Kaffee und Lieferanten betonte dieser nach meiner kurzen beiläufigen Erwähnung des Wortes “diefirmadessennamenichtgenanntwerdendarf” das aktuell keiner von IBM Deutschland eigentlich weiß was Mr. Bratislava da verzapft und keiner kennt ihn oder weiß warum er sich überhaupt damit beschäftigt. Und so vergehen Tage, Wochen und Monate, bald werde ich IBM die Lagerkosten in Rechnung stellen.

IBM xSeries returns in: IBM xSeries – AKT XII Oder: Never ending story?

Neue Managed Server

markus — Thu, 12 Feb 2009 10:40:25 +0000

Nun ist es endlich so weit. Ab sofort haben wir neue Managed Server Modelle im Portfolio. Hierbei handelt es sich um die neuen MDS (Managed Dedicated Server) S, M und X auf Basis von HP Proliant DL320 bzw. DL360. Natürlich gilt wie immer: Was gewünscht wird machen wir, wenn es also lieber ein DL380, DL580 oder eine SUN sein darf (oder irgendetwas dazwischen von SAN bis Blade) ist das auf Anfrage kein Problem.

IBM xSeries – AKT X

markus — Thu, 29 Jan 2009 12:54:19 +0000

Vielleicht sollte ich das hier langsam aber sicher in “IBM Blog” umbenennen. Mittlerweile ist es wieder einmal Montag, von seitens IBM gab es weder Mails noch weitere Kontaktaufnahmen, was eigentlich hätte passieren müssen da ja der Techniker der vor Ort war das wieder an die Technik geben wollte.
Diese lustige Geschichte zieht sich nun schon einige Wochen hin und so langsam reicht es wirklich. Ich habe zwar immer noch ein hohes Verständnis gegenüber dem Lieferanten und weiß, das nur IBM Schuld ist, aber so langsam möchte ich das Projekt abschließen und etwas anderes tun als mich von Morgens bis Abends mit IBM zu befassen.

An eben diesem Montag Morgen habe ich ein kurzes Telefonat mit dem Lieferanten geführt und er berichtete mir das er sich um alles kümmern würde und zudem sowieso noch eine Telefonkonferenz mit Mr. Beschwerdestelle aus Bratislava und Mrs. Chefvertrieblerin aus Hamburg ansteht. Ich habe in der Zwischenzeit einen Termin und bin mal auf das Ergebnis gespannt.

Montag Nachmittag bin ich wieder im Hause und rufe als erstes den Lieferanten an, dieser hat in der Zwischenzeit verschiedene Dinge geklärt. Wenige Minuten später befinde ich mich in einer Telefonkonferenz mit meinem Lieferanten und Mrs. Vertrieblerin von IBM. Diese bedauert meinen Fall sehr und macht wieder einmal den Vorschlag das System nach Erfurt zu bringen, nach erneutem und nachdrücklichem Hinweis das ich die Kiste endlich aus den Augen haben will wurde meinem Wunsch endlich entsprochen und einer Rückabwicklung zugestimmt. Mittlerweile kümmert sich mein Lieferant darum das ich wenige Tage später einen DL360 von HP in den Händen halte.

Offiziell ist die Geschichte nun beendet, inoffiziell geht sie natürlich weiter. Mittlerweile wird IBM bei uns nur noch “DieFirmadessenNamenichtgenanntwerdendarf” genannt.

IBM xSeries returns in: IBM xSeries AKT XI – Oder: Wenn die eine Hand nicht weiß was die andere tut

IBM xSeries – AKT VIII

markus — Sun, 25 Jan 2009 16:34:34 +0000

Es ist ein irgendwie kalter frostiger Morgen. Ich versuche einmal sehr früh im Büro zu nein (normal wäre 9) falls der Techniker zu früh da wäre. Dies ist mir auch gelungen, somit beobachte ich die Zeiger der Uhr, wie sich der Minutenzeiger langsam der 12, der 5, der 10 und der 15 nähert (der Stundenzeiger war mittlerweile schon an der 9 leicht vorbei). Überpünktlich um 9:14 war sogar jemand da, ich rechnete eher mit einem Anruf. Am Abend des Vortages hatte ich noch mit einem Kunden (der mittlerweile Alpträume dank IMS hat) beschlossen nun die Selbsthilfegruppe der “Anonymen IBM geplagten” zu gründen, da klingelte es schon an der Tür (ist zwar auch das Telefon, aber egal).

Ein IBM Techniker, diese possierlichen Tierchen sind in freier Wildbahn nur noch sehr selten anzutreffen und nun steht einer vor der Tür. Noch schwang der Herr Lobreden auf IBM und wusste jedes Argument meinerseits von der Seite zu weisen (bevor mich jemand in Verdacht hat: Nein, ich habe nicht meinen Ärger an ihm ausgelassen, anders als Tom hatte ich zwar noch keine Leichen im Keller, aber dabei ist es auch geblieben). Aber das Blatt wendete sich schneller als er dachte (vielleicht hat er einfach vergessen das er für IBM arbeitete). Nach knapp 40 Minuten hatte er mühevoll die alte Platine aus- und die Neue eingebaut. Aus den Lobreden wurde nun ein unüberhöhrbares Fluchen “das kann doch wohl nicht wahr sein, das passiert in letzter Zeit immer öfter”.

Was war geschehen? Die Platine die er als Ersatzteil mitgebracht hatte war schlimmer dran als die im Server, denn mit der Neuen bestückt gab der x3550 keinen Pieps mehr von sich. Er (der Techniker, nicht der Server) telefonierte ganz schnell mit verschiedenen Personen. Da wäre noch eine Platine in Hamburg auf Lager, diese würde nun mittels Kurier geliefert werden. Er würde dann wieder kommen sobald diese geliefert würde. Mit diesen letzten Worten verabschiedete er sich. Vielleicht hätte ich mich doch besser vorbereiten sollen, unter anderem mit ein paar Betäubungspfeilen um mir solch ein seltenes Exemplar dauerhaft zu sichern. Diese Chance war damit leider vorbei.

Seit diesem Vorfall suchte ich die versteckten Kameras bei mir im Büro und im ganzen Gebäude. Natürlich fand ich keine, die waren sicherlich zu gut versteckt. Es folgte ein Verhör jedes Kollegen und des Lieferanten- Vertrieblers, wer von denen mich bei der “Versteckten Kamera” angemeldet hatte. Heraus kam dabei leider nichts, ich sollte meine Methoden optimieren, bei der nächsten Bestellung von Büromaterial ordere ich ein paar Metalltische . . .

Techniker Reloaded
Gegen 12 Uhr traf nun Techniker und versprochener Kurier am Ort ein. Wieder verging einige Zeit und die Platine wurde getauscht. Ein Wunder, der Server läuft nun. Mittlerweile hatte ich einigen Plausch mit ihm und unter anderem verriet er mir auch, das das Modul was bisher getauscht worden war, gar nicht der RAID Controller sei sondern nur der Speicher und die BBU, der Controller selbst sei direkt auf der Platine. Zu diesem Zeitpunkt fand ich es sehr Amüsierend, das ich mehr Ahnung von IBM Hardware hatte, als die IBM Hotline. Die Freude wehrte nicht sehr lange, denn ein Firmware Update des RAID Controllers stürzte ab. Nun eben noch den “RAID Controller” (also Cache und BBU) getauscht. Schnell einen Benchmark mit dd und einer Gentoo LiveCD, geht. Nun zur Redhat Installation, geht. Da der Techniker zwar von IBM den Auftrag hatte die Maschine nach dem Austausch unter Last zu setzen, aber nicht wusste wie (ich dachte ich hätte nun ein “unterstütztes OS” . . .) empfahl ich bonnie++.

15 Minuten stand die Maschine nun unter Feuer, allerdings war bonnie++ erst bei den ersten beiden Schritten. Der Techniker meinte er hätte nicht den ganzen Tag Zeit und würde gern um 16 Uhr das Haus verlassen, die Maschine würde ja nun stabil laufen. Es folgte das letzte RAID Controller Firmware Update: Absturz des Updates. Er vermutete eine defekte CD und ich bot ihm daraufhin unsere an, diese funktionierte. Wieder ein Test mit bonnie++. Weitere 15 Minuten später: Nun würde ja alles stabil laufen (bonnie++ war immer noch bei Schritt 2) und er würde sich auf den Weg machen.

Ich befürchtete das Schlimmste und zwar das sich die Maschine in dem Augenblick verabschieden würde in dem er das Gelände verlasse. Dieser betonte daraufhin das dies noch nie vorgekommen wäre, gerade da jetzt alles getauscht worden ist. Zur Sicherheit aber gab er mir seine Handynummer und die Zusage in jenem Fall zurück zu kommen.

IBM xSeries returns in: IBM xSeries – AKT IX – Oder: Der Techniker ist weg