Wieder CTO

Ab 1. Februar bin ich CTO bei Deutsche Messe Interactive (DMI).

DMI ist einer Tochter der Deutschen Messe Hannover wo CeBIT, HANNOVER MESSE und viele andere führende Branchenmessen stattfinden.

Ich bin dann Leiter der IT-Abteilung. Die IT-Abteilung macht die IT für eCommerce Geschäftsmodelle mit zig-tausend Partnern der Messe, Media-Service für die großen Messen und B2B Lead-Generation, Shops, Content Management, CRM, Marketing Automation, Entwicklung, System Integration, usw. Tolle Sache das.

_happy_deja_vu()

Server Migration

Heute stand wieder mal eine Server-Migration an. Die Weblins wurden vom Ein-Server-Testbetrieb zum aktuellen Produktiv-Cluster migriert. Das war meine bisher schönste Migration:

- Server installieren,
- Konfigurationsdaten anpassen,
- Daten migrieren,
- Integrationstests checken,
- DNS umschalten,
- fertig.

Zugegeben, langsam bekomme ich Übung. Angefangen hat alles mit einem Entwicklungsserver. Dann kam das erste Produktiv-System aus 2 Hetzner-Servern. Darauf folgte ziemlich schnell das erste echte Rechenzentrum aus 10 Servern, genannt: der Proton-Cluster. Der wurde dann ausgebaut bis zu 60 Hosts. Vor 2 Monaten habe ich alles auf einem Server installiert als Testbetrieb mit einem simulierten Cluster (genannt Delta). Zwischendurch gab es noch eine Installation des gesamten Systems auf einer VMware. Heute dann die bisher letzte Installation (genannt Atlas) auf mehreren Servern, die sich die ca. 8 Rollen teilen.

Weblin ist ein komplexes System. Viele Subsysteme, zusätzlich zur Website auch noch ein Client und das Instant Message-System. Trotzdem ist es gut handhabbar, läuft stabil und ist flexibel, wie die unterschiedlichen Setups zeigen. Wäre es nicht so gut in Schuss, dann hätte ich es nicht wieder zum Laufen bekommen.

An Weblin Client und Portal haben viele Leute gearbeitet. Bei denen möchte ich mich hier für mich und im Namen der User bedanken: Entwickler im T-Team und iTeam, Research-Team und Praktikanten, Operating und Code-Review, Design und Content, Partner-Integration und Community-Management. Und nicht zuletzt die, die in letzter Zeit mit Rat (=Consulting) und Tat (=Twincoding) geholfen haben.

Ein paar meiner "Learnings":
- Viele gut ausgeprägte Server-Rollen helfen dabei groß (und klein) zu skalieren.
- Konfiguration zentralisieren und das dann durchhalten, wenn viele Rollen und Subsysteme dazukommen.
- Konsequentes Durchziehen einer verteilten Architektur hilft, auch wenn es manchmal mehr Arbeit macht.
- Ausführliche Integrationstests helfen Konfigurationsprobleme aufzuspüren.
- Refactoring hält jung.
- Technische Lösungen nicht ausreizen. Immer noch eine Optimierung in petto haben.
- Ich kann programmieren, deshalb funktionieren für mich eigene Lösungen, z.B. beim Backup (scp, rsync, tar) und beim Setup (svn und Shellskripte). Und das ist auch gut so.

Jetzt sind wir richtig online.

Weblin is back.

Und das ist erst der Anfang.

_happy_migrating()

Throttling Bandwidth with Linux Tools

As a semi-professional admin I do backups of production systems all the time. This means various "tar", "scp", "rsync" and even "lftp" operations depending on what is to be backup-ed.

The problem: Backup interferes with normal operation

Backup is running at the same time as the normal operation of the production system and the system is already quite busy. Copy and transfer tools take as many resources as they can get from CPU, DMA and network. This usually interferes with the normal server operations and can even bring down the server (thank you DMA).

The solution: Throttling

Many of the tools have a throttling option, which can limit the bandwidth in network transfers and file system operations.

scp:

• Option -l limits the used bandwidth, specified in Kbit/s. 
• Example for max 5 MByte/sec: scp -l 40000 myfile $user@$host:

rsync:

• Option --bwlimit limits I/O bandwidth in KBytes per second. 
• Example for max 5 MByte/sec: rsync --bwlimit 5000 myfile destfolder 

lftp:

• Setting "net:limit-rate" limits transfer rate on data connection in bytes per second. 
• Example for max. 5 MByte/sec: echo "set net:limit-rate 5000000; put myfile" | lftp -u $user,$password $host

Anything else, e.g. tar, use the cstream command:

• cstream can limit throughput of pipes with option -t in bytes per second.
• Example for max 5 MByte/sec: tar cf - myfolder | cstream -t -5000k > myfolder.tar
• Use "-5000k" instead of "5000k" to never exceed the max. Otherwise cstream saves throughput it could not use for later, which may be more bursty.

happy_throttling()

KLab geht an die Börse

Die Firma KLab ist in Tokio erfolgreich an die Börse gegangen. Die Aktien wurden für 1700 Yen ausgegeben. Der Handel begann dann mit 3970 und 3 Tage später stehen sie bei 3500. Also kein schlechter Start. Das ist der erste Börsengang einer Social-Network / Casual-Game Firma in Japan. Vielleicht sogar weltweit. Der Buzz sagt: "Zynga of Japan". KLab ist eine Nummer kleiner als Zynga, aber ziemlich erfolgreich mit Social Games und virtuellen Gütern.

Das tolle daran: seit einiger Zeit arbeite ich mit KLab an einem Projekt wo es um Avatare auf allen Webseiten geht. Das Projekt wird in der Investoreninformation genannt ("Cheers") als eine der 5 Umsatz- und Wachstumssäulen der Firma.

Irgendwann kam der Anruf: "Wir wollen sowas wie Weblin. Du hast das schon mal gemacht. Zeig uns wie das geht". Und das haben wir dann gemacht: eine Plattform für Social Gaming auf allen Webseiten.

Wichtiges Projekt im Börsenprospekt einer Firma mit US$ 200 Mio. Marktkapitalisierung. Coole Sache das.

_happy_trading()

Im VMware Player vom ISO Image installieren

Für Noob-Admins wie mich: Debian in VMware Player vom ISO-Image installieren

Eigentlich soll man mit dem VMware Player keine Syteme installieren (können). Dafür gibt es die Workstation und die ist ihr Geld auch wert. Aber wenn man mal ein System probieren will, bevor man die Workstation kauft, kann man das mit etwas Handarbeit auch im Player machen.

Ich habe eine bootfähige CD als ISO-Image (in meinem Fall "C:\debian-6.0.2.1-i386-netinst.iso") und will von diesem Image ein neues Linux installieren:

1. Dupliziere eine bestehende VM oder lade eine VMware Appliance runter. Die VM kommt mit einer Konfigurationsdatei mit der Endung .vmx, mit einer virtuellen Platte mit der Endung .vmdk und anderen Dateien.

2. Im .vmx setze oder ändere die 4 Werte:

ide1:0.autodetect = "TRUE"

ide1:0.deviceType = "cdrom-image"

ide1:0.fileName = "C:\debian-6.0.2.1-i386-netinst.iso"

ide1:0.present = "TRUE"

3. Boote die VM durch Doppelklick auf die .vmx Datei

4. Beim Bootvorgang, bevor das Auswahlmenü erscheint und das Betriebssystem bootet, drücke F2 für BIOS-Setup SCHNELL.

5. Im BIOS-Setup die bootbaren Devices herum schieben bis die CDROM vor (über) der Festplatte steht. F10: Save and Exit

6. Jetzt sollte die VM automatisch nochmal booten und den Installer des ISO-Images anzeigen.

7. Nach der Installation ordentlich runterfahren

8. Das ISO-Image aus der .vmx Datei löschen:

ide1:0.fileName = ""

ide1:0.present = "FALSE"

happy_booting()

Make Money with Virtual Goods

My session at Barcamp Hannover 2011:

Galaxy Tab wiederbeleben - ein Wunder

Heute mal ein (weniger tiefschürfender, aber doch bewegender) Microblog:

Nach einem ersten ganzen Tag mit dem neuen Galaxy Tab 10.1 bleibt es plötzlich dunkel. Power-Button drücken, Power Button lange drücken, Power Button gaaanz laaange drüüücken, gut zureden, nichts hilft. Dunkelheit auf dem Schirm, trotz Stunden am Ladestrom. Schreck.

Aber keine Panik: Google hilft (Bing hätte vielleicht auch geholfen, aber hat ja keiner gefragt). In der Verzweiflung also gegoogelt: "galaxy tab remains dark" und finde ... warte ... es kommt gleich ... einen Blogbeitrag: Solution for Samsung Galaxy Tab unable to turn on problem

Da heißt es: Den Bildschirm betatschen und GLEICHZEITIG den Power Button pressen. Mit dem wertvollen Hinweis: nur Geduld, kann lange dauern, weiter pressen und beten.

Ich presse und presse und presse und nach gefühlten 2 Minuten lebt er wieder.

Ein Wunder.

Allah ist groß. Und der heilige Geist. Und Google. Und Voyager8 (der Blogger). Danke an alle Beteiligten. Hammer. Echt.

happy_pressing()