Ich bin angefressen. Sehr angefressen. Da kommt man gut gelaunt heim, nur um eine Rechnung auf dem Tisch zu finden. Noch schlimmer: Eine Rechnung fuer unbestellte und ungeleistete Dienste. Auf deutsch: Der Kirchensteuerbescheid. Fuenfhundert Euro wollen die von mir, nur damit ihr institutioneller Wasserkopf aus Bischoefen und Kardinaelen nicht verhungert. Wucher!

Nur weil Adolf damals auf die glorreiche Idee gekommen ist, die Pfaffen dadurch zum Schweigen zu bringen, dass er ihnen das einzige zugesteht was sie wirklich interessiert hat – den direkten Zugang zu unseren Geldbeuteln – soll ich rund ein Prozent meines hart erarbeiteten Einkommens dafuer zahlen, dass ich seit Dekaden keine Kirche mehr von innen gesehen habe.

Nun folgt halt am Montag die einzige wirkungsvolle Reaktion, der amtliche Austritt. Lieber ueberweise ich jedes Jahr hundert Euro auf das Spendenkonto unserer oertlichen Pfarrei, als dass ich dem Ratzinger seinen naechsten Benz finanziere. Beim Spendenkonto weiss ich wenigstens, dass das Geld hier fuer die Gemeinde verwendet wird.

Da ist doch tatsaechlich noch ein Paket von Sun eingetroffen.. konnte mich garnicht erinnern, was bestellt zu haben..

.. und da drin finde ich 256 GB RAM, handlich aufgeteilt auf 64 Riegel.

Eigentlich fast mehr ein Geschenk an unsere Entwickler als an mich.. ich muss das nur einbauen, fuer die ist das jede Menge neue Spielwiese fuer tolle Java’ige Ressourcen-Aserei. SO krieg ich denen nie beigebracht dass die ihren Code mal optimieren lernen sollen.. pah.

Endlich wieder zuhause! Ach so, habe ja ganz verschwiegen dass ich eine Woche fern der Heimat sein wuerde. Mein Chef hat mich fuer eine Woche nach Wien geschickt, um mir einen Solaris SysAdmin II Kurs bei Bacher angedeihen zu lassen – und da war ich jetzt.

Wien ist haesslich. Mindestens genauso haesslich wie alle anderen Grossstaedte. Erst recht der zehnte Bezirk (Wienerberg) wo ich gehaust habe. Eine Handvoll Beton- und Glaspalaeste grosser Konzerne (Philips, ABB, Versicherungen etc), und wahllos drumherumgestreut graue Hotelbloecke und haesslich deformierte Wohnklo-Aggregate aus der Feder frontallobotomierter Architekturstudenten. Ich glaube, das einzige wirklich schoene an Wien ist die Altstadt wo die Touristen durchgescheucht werden.. aber dafuer hatte ich leider keine Zeit.

Zum Hotel gibts nicht viel zu sagen ausser: ich war schon in besseren. Die vier Sterne haben sie sich wirklich nicht anmerken lassen. Personal das nur schlecht deutsch spricht, das uebliche unbequeme Allergiker-Schaumgummi-Bett wie in nem Krankenhaus, und grandioser Ausblick auf den Industriepark. Essen habe ich mir keins zu Gemuete gefuehrt weil unnoetig (Fruehstueck gabs bei Bacher, Mittagessen in der Kantine, und Abendessen nen selbstgekauften Saft und ein paar Kekse. Ich bin eh zu dick.) Allein schon die Information dass das Fruehstuecksbuffet 14 Euro kostet, hat mir den Appetit verdorben. Fuer das Kaesebrot und die Tasse Kakao die ich morgens vertrage, um mindestens einen Faktor 10 zu teuer.

Die Internet-Versorgungspolitik dort war auch amuesant.. Kabel-Internet im Zimmer ist kostenlos, wer stattdessen lieber WLAN nutzen will oder kein eigenes Netzwerkkabel dabeihat, dem wird fuer 9eur/h geholfen (Zugangskontingent bzw. Kabelmiete). Gut dass ich an alles gedacht hatte. So konnte ich zumindest AO spielen.. fuer DDO oder Vanguard war der beschissene Vaio, den ich mir an die Backe nageln habe lassen, zu schwach.

Die ersten drei Kurstage waren relativ unspektakulaer.. Netzwerkkonfiguration, JumpStart, Swap- und Coredump-Management, Patchverwaltung, Syslog und NFS. Interessanter waren dann die beiden letzten Tage.. da gings dann um Virtualisierung mit Zonen und um das neue ZFS-Dateisystem. Bei den Zonen habe ich ein paar neue Features kennengelernt, die ich in naechster Zeit in der Firma mal live testen moechte, und ZFS ist ja sowieso nur noch genial.

Wer ZFS noch nicht kennt.. das ist ein neues Filesystem aus Sun’s Entwicklung, das einem eine Menge Denkarbeit bei der Storage-Verwaltung abnimmt. Man wirft quasi beliebige Datentraeger (Platten an beliebigen Controllern, SAN, iSCSI etc) in einen grossen Topf, legt fest welches Redundanzlevel man mindestens haben will (Raid-Z, Raid-Z2), und dann bedient man sich halt aus diesem Topf an Speicherplatz wie man will. Beliebig neue Volumes anlegen innerhalb des Pools, vergroessern, verkleinern, verschieben, alles geht im Livebetrieb mit einem einfachen Kommando. Snapshots gehen ohne spuerbaren Platzverbrauch und Leistungsverlust.. Aufnahme machen, Partitionsinhalte zerstoeren wie man lustig ist, Rollback, und alles ist wieder da. Ideal fuer schusselige Angestellte oder zu mutige Admins. Mehrere aeltere Versionen eines Dateisystems parallel betrachten koennen? Kein Problem.. einfach den Snapshot als sichtbaren Mountpoint einrichten und man kann sich in einer vergangenen Parallelwelt bewegen und manuell wiederherstellen oder vergleichen. Irgendwo im Netz geistert noch ein geiles Video dazu herum.. da ham Freaks eine Sun mit zwei Dutzend USB-Sticks besteckt, die zu einem zfs-Pool zusammengeschnuert, und dann fangen sie an, wild die Sticks auszutauschen, an- und abzustecken etc waehrend Leute aktiv auf dem Dateisystem arbeiten. Krass. Nicht dass ich sowas gern nachbauen wuerde, aber zumindest die Moeglichkeit, SAN-LUNs ohne Downtime dazuwerfen zu koennen, oder Dateisystemgrenzen on the fly verschieben zu koennen, wuerde mir meinen Job schon einiges leichter machen – es ist so extrem schwer, auch nur auf einen Monat oder zwei im Voraus zu planen bei unseren Platzanforderungen. Die ganzen Hitachi-Kisten zu einem riesigen ZPool zusammenzuschnueren klingt da schon seeeehr verlockend. Nur leider gibts genau da noch ein paar Stabilitaetsprobleme mit dem Fibre-Multipathing.

So, und jetzt flaez ich mich in meinen Sessel und hole eine Woche DDO-Abstinenz nach. *wink*

OpenSource ist ja was feines.. jeder kann sich ueberall bedienen und Code aus allen moeglichen Projekten in seinen eigenen Entwicklungen benutzen, man braucht nichts mehr schreiben was es nicht schon vorgefertigt von anderen Leuten gibt. Alles supertoll – hat nur einen gravierenden Nachteil: man faengt sich damit Abhaengigkeiten in grauenhaften Ausmassen ein, wenn das eigene Projekt an Komplexitaet zunimmt – und diese Komplexitaet laedt man dem Enduser auf. Mittlerweile artet jegliche Softwareinstallation auf allen Unixen in einem Dependency-Chaos aus, das der vor Jahren mal (eigentlich fuer Windows-Software) gepraegte Ausdruck DLL Hell nur unzureichend beschreibt. Jetzt ists halt eine .SO Hell.

Aktueller Fall: Auf einer Solaris 10-Maschine wird Image Magick benoetigt um JPEG-Dateien auf Validitaet zu pruefen. Tool der Wahl ist Blastwave’s pkg-get, weil es dependency tracking kann.

pkg-get install imagemagick….

Eine Stunde spaeter schaue ich ins Installationslog, und stelle fest dass ich um 65 Packages reicher bin, von denen exakt eine ImageMagick im Namen hat. An dieser Stelle stelle man sich einen gepflegten Kotzanfall vor.

Analyse des Debakels:
ImageMagick kann Postscript-Files lesen, also wird Ghostscript nachinstalliert.
Ghostscript kann drucken, also wird CUPS nachinstalliert.
CUPS bringt ein grafisches Druckvorschautool oder irgendsowas mit, also wird GTK2 nachinstalliert.
GTK2 braucht diverse andere Bibliotheken (Pango, glade, weissderteufelwasnoch), also wird fast ein kompletter GNOME nachinstalliert.
Diverse Features in gtk/Pango koennen uebers Netzwerk reden, also wird der komplette OpenSSL-Developerkit nachinstalliert.
GTK2 kann Text darstellen, also wird Freetype/Fontconfig nachinstalliert.
Irgendein Teil von GTK kann Files lesen, also wird das GNOME Virtual File System nachinstalliert.
Das Gnome VFS kennt viele Wege, User zu authentifizieren, also wird der komplette Kerberos- und OpenLDAP-Developerkit nachinstalliert.
Irgendwer aus diesem ganzen Wust an Paketen kann offenbar xml-Files lesen, also wird ein gutes Dutzend xml/css/irgendwas-ml Parser mit saemtlichen Bindings in alle moeglichen Sprachen nachinstalliert.
… und einige mehr deren Abhaengigkeiten irgendwo im sechsten oder siebten Grad liegen und die ich nicht weiter nachverfolgen konnte.

Wir erinnern uns… ich brauche ein Grafiktool um JPEG-Files zu analysieren.. und habe auf dem Weg dorthin also einen umfassenden Crypto-Devkit, einen neuen Windowmanager, einen Filesystemtreiber, einen GUI-Devkit und jede Menge *ML-Parser gewonnen. Das ist doch toll![tm]

Eine Stunde spaeter waren 90% der Pakete wieder manuell deinstalliert, und ImageMagick funktioniert immer noch.

Mal wieder zur falschen Zeit „hier“ geschrien… und zwei Tage Serverraumdienst eingefangen.

Nachdem die neuen Racks jetzt via Patchpanels fix verkabelt sind, und die letzten Server aus den alten Racks rausmigriert sind, muessen ja irgendwie die in den letzten zehn Jahren verlegten Kabel aus dem Boden raus. Sind ja auch nur einige Kilometer, und wildest verknaeuelt. Spass hoch drei.. im Doppelboden knien, von unten die eisige Luft der Klimaanlage, von oben die Hitze aus den Serverracks.. auf meine Bronchien morgen bin ich mal gespannt. *hust* *keuch*

Habe heute, quasi als Reminiszenz an die gleiche Zeit vor einem Jahr, mich mal freiwillig gemeldet um ein paar neue Rechner zusammenzubauen. Ich habe nicht schlecht gestaunt, als ich die Pakete aufgemacht habe.. da muss wohl Chef was ganz grosses damit vorhaben.

2,6GHz QuadCore CPUs, 4GB RAM, Geforce 9600GT Grafikkarte, Terabyte-Festplatten und andere Edelkomponenten… da bin ich angesichts meines Spielrechners daheim doch etwas neidisch geworden.

Und dann kam die Offenbarung wofuer das Monster gedacht war: um ein paar USB-Festplatten aus dem SAN zu befuellen.. quasi die geringste denkbare Anforderung. Und ich dachte noch, es gibt sowas wie zuviel Leistung nicht.

Ich koennte mal wieder diversen Leuten ins Gesicht springen..

Seit Tagen – eigentlich schon Wochen – sind wir am planen und werkeln, um endlich zwei Dutzend Server in zwei neue Racks umsiedeln zu koennen, und an die neuen Coreswitches anzukabeln. Nun war eine relativ wichtige Maschine noch uebrig, und die haette wegen schwer zu bekommender Downtime am Samstag frueh umziehen sollen. Mein derzeit beurlaubter Kollege hatte bereits mit den betroffenen Leuten alles besprochen (mit mir auf CC), ich hatte mir am Montag nochmal den Termin bestaetigen lassen, und dementsprechend meinen Freunden den geplanten Wochenendausflug abgesagt. Job geht ja vor.

Es waere alles so einfach gewesen.. wenn nicht jemand der eigentlich nur die Switchports vorkonfigurieren haette sollen, gemeint haette, er muesste aus dem kleinen Umzug eine riesige Story machen, und hat dabei praktischerweise Leute erwischt die ihrerseits dann meinten, im letzten Moment noch Widerspruch gegen den Umzug einlegen zu muessen.. weil das geht ja nicht der Server ist viel zu wichtig und wenn da was kaputtgeht und ausserdem sind wir ja garnicht dafuer zustaendig und so, und angekuendigt war das ja auch nicht und bla und blub. Dass der Server sowieso fast nix tut weil der Produktivbetrieb auf einem anderen, identischen, Server laeuft, und alle betroffenen Leute seit Wochen bei der Planung auf CC waren und offenbar nur zu faul zum lesen, muss man ja niemandem verraten. Ueber die Befuerchtung, wir koennten den Rechner beschaedigen, lass ich mich jetzt mal garnicht aus – kann ja mal passieren. Ist ja auch der erste Server den wir wo einbauen.. natuerlich. Kopf -> Tisch.

Tja, und nun hab ich am Wochenende mehr Freizeit als ich eigentlich haben wollte, und dafuer darf ich vermutlich naechstes Wochenende nochmal einiges verschieben oder absagen, wenn’s den Herren dann beliebt. Aber dann koennense mich kreuzweise. Die naechste Umzugschance kriegt die Kiste irgendwann unter der Woche. Wenn denen egal ist was sie mit meinem Zeitplan anstellen, dann ist mir auch egal wennse mal ne Stunde oder zwei nicht arbeiten koennen.

Heute hat mich mal eine relativ witzige Anfrage unseres IT-Sicherheitsexperten ereilt…

Hintergrund: im Laufe der letzten Woche hat jemand unserer Audiotechniker von einem Samba-Share ein Verzeichnis mit Arbeitsdaten vernichtet. Konnte nach etwas Suchen vom Band wiederhergestellt werden, hat aber trotzdem die Frage aufgeworfen „wer war das denn?“. Nun sollte man wissen, dass dieses Share auf einem unserer x Fileserver liegt, an denen unsere SAN Storage im dreistelligen Terabyte-Bereich haengt, und die unter anderem die CD-Masteringmaschinen bedienen.

Um solche Vorkommnisse in Zukunft zu vermeiden, wurde die Frage in den Raum gestellt „Kannst du das nicht so einrichten, dass das geloggt wird? Muss ja garnicht jeder Zugriff sein, nur wer halt was rauskopiert oder loescht.“ Ich hab das dann in Betriebssystem-Deutsch uebersetzt: „Also nur jeder Lese- und Schreibzugriff? Na wenns sonst nix ist..“, aber die Message kam irgendwie nur relativ langsam an.

Wenn ich mir das bildlich vorstelle.. hunderte Terabyte Daten in Millionen Dateien.. ein paar hundert interne und nochmalsoviele externe Benutzer auf einem Dutzend Server.. da duerfte vermutlich pro Tag ein Terabyte an Logdaten entstehen. Die Infrastruktur moechte ich nicht sehen, die das handlen muss – und Loggen von Systemcalls ist ja auch soo ressourcenschonend. *tilt*

Wir haben uns dann darauf geeinigt, nur die Samba-Logstufe eine Nummer hochzudrehen.. und das produziert alleine schon genug Trash.

Nach etlichen Monaten Ruhe hat’s mich mal wieder mit einem Sonntagseinsatz erwischt.

Nachdem die IT fuer heute ne grosse Netzwerkrenovierung angesetzt hatte, bei der eh quasi alle Server runtergefahren werden mussten, sind wir gleich auf den Zug aufgesprungen und haben uns den Umzug eines unserer FibreChannel-Switches von einem Rack ins andere vorgenommen. Kann ja nicht so schwer sein.. Server runterfahren soweit noetig, 64 Glasfaserkabel abstecken, Switch rueberbauen, wieder anstecken, fertig. Eigentlich ganz einfach.

Nur steckte leider der Teufel im Detail, oder besser gesagt: im Boden. Offenbar hat es in der Vergangenheit oefters mal an der notwendigen Auswahl Kabel gefehlt, so dass sich nach dem Oeffnen der Bodenplatten das reine Chaos gezeigt hat. Offene Kabelenden die jemand abgesteckt aber nicht rausgezogen hat, Rollen von bis zu 25 Metern ineinander verknaeult, Kabel die zickzack zwischen den Stuetzen des Doppelbodens gespannt waren, Kabel mit Knoten bei denen man sich wundert dass ueberhaupt noch Licht durchgeht, Kabel ohne Nummernetiketten, usw usf..

Insgesamt sind dann aus den geplanten vier Stunden knappe zwoelf geworden.. davon zehn Stunden gegen den eisigen Sturm der Klimaanlage kopfueber im Boden versenkt, wild an Kabelschleifen zupfend und nach sich bewegenden Enden suchen. Fluchend.

Zwischendurch durften wir noch bei der IT um Kabel betteln weil durch das Rausziehen der ganzen 15-25m-Rollen sich Bedarf an einigen kurzen Kabeln aufgetan hat.. gut dass die immer nen Vorrat haben. Unsere Bestellung haette eigentlich am Freitag schon kommen sollen – wahrscheinlich stehtse auch schon im Wareneingang – und ich hab Montag frueh ne Mail dass ich se abholen kann. Scheiss Timing.

So, und jetzt pack ich mich erstmal in die Badewanne. Kann gar nicht in Worte fassen, wie mir mein ganzes Gestell weh tut.

Irgendwie praktisch dass direkt neben dem Eingang einer unserer Serverraeume der Elektroschrottcontainer ist.. da gibts oft die tollsten Sachen zu holen. Nur weil’s abgeschrieben ist und nicht mehr Top-Leistung bringt, heisst ja nicht dass man’s zuhause nicht noch verwenden kann. CPUs, Speicher, externe CD-ROMs, ein paar schoene grosse Luefter (der Sommer kommt noch…), ein HP CapShare Taschenscanner.. jede Menge Zeugs um meine Experimentier- und Werkstattrechner etwas hochzuruesten.

Mein heutiger Beutezug hat mir eine gut ausgestattete und laut entsorgendem IT-Mitarbeiter noch einwandfrei funktionierende Sun Blade 150 Workstation eingebracht. Wobei sich das „einwandfrei“ nicht auf das installierte Solaris bezogen haben duerfte.. das war naemlich nur noch am panic’en. Mal schaun.. am Wochenende neu installieren, und hoffen dass nicht doch noch ne Hardwaremacke zum Vorschein kommt. Dann hab ich naemlich endlich ne Sun zuhause, die meine doch schon recht betagte Ultra2 abloesen koennte.

Sun Blade 150