Axute

Save-TV: Premium Account und Server-Wechsel

admin — Sun, 27 Feb 2011 11:18:31 +0000

Sorry

Erst ein mal möchte ich mich bei diejenigen entschuldigen, die mich per E-Mail kontaktiert haben bezüglich dem Save-TV Downloadscript. Ich habe seit ca. einem halben Jahr nicht mehr daran entwickelt, Gründe dafür könnte ich hierfür eine Menge nennen, aber viele sind eher Privat.
Einer der größten Gründe war, dass save.tv ständig seinen Quellcode geändert hat, da verliert man die Lust am umprogrammieren.

Das Script funktionierte also vorn und hinten nicht mehr wirklich.

Was hat sich bei mir geändert

Ich für meine Storage “Wohnzimmer PC” das Betriebsystem von Ubuntu auf Freenas gewechselt, da ich mit dem Samba konfigurieren unzufrieden war und ich hier noch keine ZFS Unterstützung zur Verfügung hatte.

Den Provider habe ich ebenfalls gewechselt, von Arcor auf Kabel-Deutschland. Da mein bisheriges Script mit fullspeed heruntergeladen hat, hätte es ebenfalls die Leitung zum VOIP-telefonieren dicht gemacht.

Seit Dezember letzten Jahres habe ich dann den save.tv-Account auf Premium umgestellt, um die neuen Features zu testen.

Der Lösungsansatz

Da ich in letzter Zeit jedoch wieder viel aufgenommen habe, und mit dem Downloaden nicht hinter her kam, musste ich mir eine schnelle und unkomplizierte Lösung einfallen lassen.
Ich habe zunächst ein simples Script gebastelt, das den Linux/Unix befehl wget verwendet.
Das simple Download-Tool hat viele Möglichkeiten:

Drosseln der Geschwindigkeit
Prozess unabhängig
Viele Parameter, die sich ausbauen lassen um weitere Entwicklung an zu hängen

Die Idee

Weil man nur schwer an die Download-Links von save.tv heran, so habe ich immer per DownThemAll-Plugin den Download sofort auf Pause geschalten, dann aus den Informationen den Link heraus geholt und in das Script kopiert: auf Dauer auch lästig!
Meine Suche nach einem Plugin führte mich auf den “WHS Download-Manager-Client“.
WHS steht für Windows-Home-Server, für den wurde wohl ein Download-Manager entwickelt, und für den wiederum ein Client.
Nun das Addon war sehr simple, man konfiguriert ihm eine Server-URL, klickt beim Download “WHS-Download-Manager-Client” an und schon lädt der Server die Datei herunter. Wo war der Haken? WHS-Download-Manager hat eine SOAP-API. Das ist zwar sehr universell und freundlich Programmiert, aber nicht einfach genug für mich!

Die Lösung

Nun nach dem ich mir das Firefox Addon zu WHS angesehen habe, musste ich ein wenig schmunzeln, ein bissl XML und ein bissl Javascript: sieht realistisch aus so etwas um zu basteln

um dann schließlich noch eins drauf zu setzen und eine Übersicht zu erhalten habe ich diesen Ablauf noch erweitert:

Alle Scripts und das Addon werde ich noch online stellen, es ist dann hier im Blog zu finden:
http://www.axute.de/save-tv/

Sicherer Surfen – KB SSL Enforcer

admin — Tue, 19 Oct 2010 17:38:11 +0000

Nun in Sachen Surfen kann man heute nicht vorsichtig genug sein.
Aber wer möchte sich schon immer vergewissern ob die Seite auch ein Sicheres Protokoll verwendet?

Was ist ein sicheres Protokoll? Wiki (ftw)

Fast alle großen Internetportale bieten auch eine gesicherte Verbindung an, wie zum Beispiel
Goolge: http://www.google.de, https://www.google.de
Facebook: http://www.facebook.com, https://www.facebook.com

Ich möchte gerne ein Addon für Google-Chrome vorstellen: KB SSL Enforcer
Es ist recht einfach gehalten, es prüft selbstständig ob eine Internetseite auch mit Verschlüsselung zur Verfügung stellt, und ruft stattdessen diese auf.

Zu den Optionen gibts nicht viel zu sagen, außer:
Whitelist: (Seiten bei denen SSL vorhanden ist)
Blacklist: (Seiten bei denen kein SSL gefunden wurde)

Wenn man eine Seite nicht verschlüsselt haben möchte, weil diese Fehler verursacht (zum Beispiel: maps.google.com), kann man diese mit auf die Blacklist setzen.

Eine Alternative für Firefox gibt es auch: HTTPS Everywhere.
Wer den Internet-Explorer verwendet hat schon mal die größte Tür geöffnet und ist nicht mehr zu helfen

Tarif-Retter: DroidStats

admin — Wed, 01 Sep 2010 15:14:46 +0000

Heute möchte ich mal wieder eine sehr nützliche Application für Android vorstellen: DroidStats (by Michael Ludwig)
Gesucht habe ich eigentlich nur einen einfachen Counter, da ich im vorletzten Monat mein SMS-Kontingent überschritten habe.
Gefunden habe ich eine sehr vernünftige und einfache APP die alles abdeckt: DroidStats.

Sehr genial finde ich das man hier nicht nur die Freiminuten und Frei-SMS eintragen kann, sondern auch die Kosten für jede zusätzliche Minute (inkl. Taktung) und auch die SMS-Kosten.
Die zusätzlich anfallenden Kosten sind glücklicherweise bei meinem Tarif sonst recht konstant (und teuer, sobald das Kontingent überschritten wird).

http://www.androidzoom.com/android_applications/tools/droidstats_ckjc.html

media-server Probleme

admin — Mon, 16 Aug 2010 19:15:38 +0000

Sorry das ich zur Zeit nicht mehr an Save.TV Script weiter entwickle, aber ich kämpfe stark an meinen Problemen mit meinem Wohnzimmer-PC. Dort sind all meine Aufnahmen drauf, und ich habe beim Filme ansehen über LAN dermaßen unzumutbare “Lags”, das ich nicht mehr weiter weiß. Erst dachte ich: die junge Festplatte gibt den Geist auf, dem war jedoch nicht so. Um das zu merken habe ich mir eine neue Samsung 1TB 24/7 F1 (7200 U/min) gekauft, teuer aber richtig flott im Gegensatz zu der 1.5TB (zugegeben, das sind auch nur 5400 U/min).

Zwischendurch lief die Freigabe wieder flüssig, allerdings bisher wieder wie vorher. Im aktuellen Ubuntu-Update sind wieder Samba-Pakete enthalten, ich bin gespannt … es ist nicht mehr lustig.

Falls jemand zufällig weiß woran das liegen kann, hier meine Systemdaten:

Server: Ubuntu 10.04 (32bit)
Clients: Windows 7 (32bit)

Server-Filesystems:

root (/) ext3
srv (/srv) ext2
filme (/mnt/local/video) jfs(1)

Netzwerk:

100 M/Bit
Router: LinkSys WRT54GL

Unterseite für save.tv-Download-Script

admin — Thu, 15 Jul 2010 03:05:58 +0000

Ich habe in den letzten beiden Wochen mehrere Anfragen bekommen, die bezüglich meines Download-Scripts sind. Da die Nachfrage hier wohl doch größer als gedacht ist, habe ich eine separate Unterseite angelegt.
Entweder ihr klickt auf den tollen Link ganz oben im Menü, oder falls ihr diesen Eintrag aus einem RSS-Feeder herauslest könnt ihr auch folgenden Link verwenden:

http://www.axute.de/save-tv/

PS: Denkt daran das es seit der Umstellung nicht mehr funktioniert, sobald es die Temperaturen aber zulassen werde ich mein Hobby fortsetzen

Problem beim Update auf Thunderbird 3.1 Ubuntu 8.10 mit Ubuntuzilla

admin — Fri, 25 Jun 2010 07:23:21 +0000

Ich habe heute per Ubuntuzilla den Thunderbird auf die Version 3.1 aktualisiert, leider ließ sich der Thunderbird danach nicht mehr starten!
Nach dem ich diesen dann noch mal gelöscht und neu installiert hatte, funktionierte es immer noch nicht.
Verschieben der Profildaten half dann. Ursache habe ich auch gefunden:

xpti.dat

Diese Datei einfach löschen, anschließend funktioniert wieder alles.

Updatescript für Ubuntuzilla

#!/bin/bash
ubuntuzilla.py -a install -p thunderbird

Ubuntuzilla gibt es unter: http://ubuntuzilla.sourceforge.net

UPDATE:
Nach einem Neustart half nicht ein mal mehr das, ich bin wieder auf Version 3.0.5 umgestiegen.

Geburtstage + Google Contacts + Android = EboBirthday

admin — Thu, 13 May 2010 12:02:36 +0000

Android kann bis heute nicht die Geburtstage mit Synchronisieren, Google Calendar kann bis heute keine Geburtstage im Kalender darstellen.
Das Tool von EboMike tuts total, es hat eine Synchronisation mit Google Contacts und sogar ein Widget, das einen die nächsten Geburtstage anzeigt.

Man kann natürlich auch die Geburtstage selbst einpflegen, aber dann kann ich sie mir ja gleich merken und in den G.Calendar eintragen

Hier der Link zur APP:

EboMikes Homepage – EboBirthday.

Dateinamen Normalizer

admin — Sun, 02 May 2010 12:56:25 +0000

Bei meiner neuen Zuordnung von Dateinamen zu Filmen, bin ich schon länger immer wieder über das gleiche Problem gestoßen: Umlaute in Dateinamen.
Umlaute sollten eigentlich kein Problem darstellen, allerdings pendelt mein Wohnzimmer PC zwischen 2 Betriebssystemen (Linux / Windows), einem lokalem (Dateisystem jfs) und einem netzwerk (Samba / Windows-Dateifreigabe) Dateiaufruf.

Das Problem

Das bringt so einige Dateinamen Probleme mit sich. Theoretisch könnte man die Dateinamen alle mit Umlauten auf die Festplatte (jfs) schreiben, Samba kommt damit allerdings nicht so zu recht. Man könnte auch die Dateinamen URL-Encoden, womit ebenfalls das Dateisystem zurecht käme, allerdings hätte ich hier Probleme bei den URL-Aufruf durch den jeweiligen Player, da ich nicht weiß diese nicht auch ein URL-Encoding drin haben und mit einem doppeltem Encoding wären diese dann nicht aufrufbar.

Der Versuch

In diesem Artikel wäre auch super besprochen wie man es mit einem URL-Encode ähnlichem Verfahren hin bekommen würde. In meinen Versuch diesen Artikel um zu setzen scheiterte es jedoch an der Normalizer-Klasse, die bei mir ständig ein “false” zurück gibt. Ich habe ca. 15-30 Minuten gekämpft, ohne Erfolg.

Die Lösung

Nun der Ansatz ist eigentlich nicht verkehrt, ein URL-Encode ähnliches Verfahren zu verwenden.
Das Rad neu erfinden war noch nie meine Intention, also habe ich mir erst ein mal dieses Verfahren zu nutze gemacht.

So wurde zum Beispiel aus Tränen_der_Sonne.avi ein Tr%E4nen_der_Sonne.avi.
Damit dieses Prozent-Zeichen (%) nicht versucht wird erneut zu URL-Encoden oder zu der Dateiname insgesamt nicht versucht wird zu URL-Decoden, habe ich mir ein Zeichen gesucht, das eigentlich im Dateisystem sehr üblich ist: ~ (tilde)
Schließlich sieht dann also der Dateiname wie folgt aus: Tr~E4nen_der_Sonne.avi

Wenn man also das mal in einer Befehlskette zusammenfassen möchte sähe das wie folgt aus:

$filename = str_replace('%','~',urlencode($filename));

// Reverse
$filename = urldecode(str_replace('~','%',$filename));
?>

Mein Normalizer

Nun da der Normalizer von PHP ja komischer Weise nicht funktioniert, habe ich mir selber einen geschrieben mit der oben genannten Lösung. Ich habe auch gleich noch ein paar andere Funktionen eingebunden: strtolower, reparieren von vermurksten Umlauten und das Entfernen von Sonderzeichen.

class file_safety
{
public static function normalize($orginalname)
{
$newname = self::dec($orginalname);
$newname = self::repair($newname);
$newname = self::sonderzeichen($newname);
$newname = strtolower($newname);
$newname = self::enc($newname);
return $newname;
}
private static function enc($filename)
{
if(strpos($filename,'~') === false && strpos($filename,'%') === false)
{ $filename = urlencode($filename); }
if(strpos($filename,'~') === false && strpos($filename,'%') !== false)
{ $filename = str_replace('%','~',$filename); }
return $filename;
}
private static function dec($filename)
{
return urldecode(str_replace('~','%',$filename));
}

private static function sonderzeichen($filename)
{
$sonderzeichen = array(',','!','?');
foreach($sonderzeichen as $zeichen)
{ $filename = str_replace($zeichen,'',$filename); }
$filename = str_replace('_-_','-',$filename);
return $filename;
}
private static function repair($filename)
{
$uml = array();
for($x=0;$x<strlen($filename);$x++)
{
$z1 = substr($filename,$x,1);
if(ord($z1) == 195)
{
$z2 = substr($filename,$x+1,1);
$uml[] = $z1.$z2;
$x++;
}
}
foreach($uml as $search)
{ $filename = str_replace($search,chr(self::uniord($search)),$filename); }
return $filename;
}
private static function uniord($c) {
$h = ord($c{0});
if ($h <= 0x7F) {
return $h;
} else if ($h < 0xC2) {
return false;
} else if ($h <= 0xDF) {
return ($h & 0x1F) << 6 | (ord($c{1}) & 0x3F);
} else if ($h <= 0xEF) {
return ($h & 0x0F) << 12 | (ord($c{1}) & 0x3F) << 6
| (ord($c{2}) & 0x3F);
} else if ($h <= 0xF4) {
return ($h & 0x0F) << 18 | (ord($c{1}) & 0x3F) << 12
| (ord($c{2}) & 0x3F) << 6
| (ord($c{3}) & 0x3F);
} else {
return false;
}
}
}

Meine Helfer

Ich habe natürlich über 700 Filmaufnahmen, wovon ca. 1/3 Umlaute haben die bereits vermurkst sind.
Um mir hier Zeit zu sparen habe ich mir ein Consolen-Script gebastelt, dass mir die Nachträglich Codierung abnimmt:

Einzelscript in PHP

In dem aufnahmen.xml befinden sich sämtliche Referenzen zu den Filmen, sofern man das nicht hat, kann man das beruhigt raus löschen.
(Übrigens die Helferklasse file_safety muss unten mit rein kopiert werden, wenn das Script funktionieren soll)

#!/usr/bin/php

ini_set('display_errors',true);
ini_set('display_startup_errors',true);

$aufnahmenfile = '/srv/www/xml/aufnahmen.xml';
$aufnahmenstring = file_get_contents($aufnahmenfile);
/*
* Füllt sich selber auf, wie zum beispiel mit "chr(195).chr(164)";
*/
$uml = array();

$debug = in_array('debug',$argv);
if(isset($argv[1]) && is_file($argv[1]) && is_writable(dirname($argv[1])))
{
$path = $argv[1];
$new = $org = basename($path);
$new = file_safety::normalize($new);
if($new !== $org)
{
$newpath = str_replace($org,$new,$path);
$command = "mv '{$path}' '{$newpath}'";
echo $command."\n";
if(!$debug)
{
exec($command);
if(strpos($aufnahmenstring,'"'.$org.'"') !== false)
{
echo "Eintrag in Aufnahmen-Datei gefunden\n";
$aufnahmenstring = str_replace('"'.$org.'"','"'.$new.'"',$aufnahmenstring);
file_put_contents($aufnahmenfile,$aufnahmenstring);
}
}
else
{ echo "Debug-Mode (no change): {$org}\n"; }
}
else
{ echo "No Changes Required: {$org}\n"; }
}

Um mir die Arbeit in der Console zu erleichtern, habe ich ein Symbolic Link gemacht:

ln -s /srv/www/urlencode.php /usr/bin/urlencode

Stapelverarbeitung

Bei über 700 Dateien wäre die Eingabe jeder einzelner Datei sehr lästig, darum habe ich mir nur ein bash-Script gebastelt, das alle avi-Dateien im aktuellen Verzeichnis durcharbeitet:

#!/bin/bash
for fname in *.avi
do
urlencode $fname
done

Und natürlich wieder ein Symbolic Link gemacht:

ln -s /srv/www/urlencodedir.sh /usr/bin/urlencodedir

Zwei-Einhalb TeraByte eingerichtet :)

admin — Sun, 25 Apr 2010 10:38:24 +0000

Nach dem ich nun ja mal wieder den Wohnzimmer PC aufrüsten musste weil mir der Platz für Aufnahmen fehlte, habe ich die Festplatten gleich mal umstrukturiert.

Wohnzimmer PC

Der Wohnzimmer PC ist ein alter Rechner

Motherboard A7n8x-E Deluxe
AMD Barton 2,4 GHz (runtergetaktet auf 650 MHz)
2GB DDR1 (333 MHz) RAM (runtergetaktet auf 100 MHz)
LG DVD-Brenner
Gehäuse ist ein voll-gedämmtes “Yeong Yang (YY-B0221)”

Umstrukturierung

1,5 TB – 4 Festplatten

Vorher war alles eher verteilter, was mich schon länger störte:

[0160] Boot, System, Services, Files (part1)
[0160] Files (part2)
[0500] Video 1
[0500] Video 2

2,5 TB – 3 Festplatten

Nachher:

[0500] Boot, System, Services, Files (part1 & part2)
[1500] Video 1.1, Video 1.2
[0500] Video 2.1

Die [1500] musste ich leider Teilen, denn ich bin Fan von JFS (siehe Bild) und JFS lässt leider nur Partitionsgrößen von 1000 GB zu. “Video 1″ ist deshalb zu zwei Partitionen geworden (1.1 und 1.2).

JFS

Warum ich JFS gewählt habe, hat mehrere Gründe:

Es hat schnelle Löschzeiten (wichtig für Aussortieren von Aufnahmen)
Die Dateisystem Treiber sind sehr Resourcen sparend (braucht wesentlich weniger CPU-Leistung!)
In sämtlichen Performance-Tests liegt JFS stehts im Mittelfeld
Es ist also nirgends das Beste System, trotzdem auch bei den Rangbesten dabei

Wünschenswert wäre natürlich JFS2, es kann wesentlich mehr allerdings habe ich hier noch keine gute Einbindung in Ubuntu Server gefunden (10.04 hat es anscheinend schon drin – also die Tools dafür, allerdings is mir das zu “beta”).

FSTAB mit Labels

Es ist eigentlich das erste mal, das ich in der FSTAB (/etc/fstab) Labels verwende.
Darauf gestoßen bin ich erst durch die Umstrukturierung, denn wenn man mit gParted die Partitionen kopiert, werden auch die UUID mit kopiert …
Wer hat sich so nen scheiss ausgedacht !? macht wenig sinn! sind ja dann nicht mehr UNIQUE!

Nun ja ich habe mir dann die (einmalige) Mühe gemacht und allen Partitionen Labels verpasst

Nimmt in der /etc/fstab weniger Platz weg
Kann man im Gegensatz zur UUID selber ändern
Man hat mehr Überblick im Partitionierungsprogramm

So bei Gelegenheit gibt es dann ein Atom-Board, bis dahin muss das genügen

ZendServer mit NCURSES

admin — Wed, 10 Feb 2010 22:45:10 +0000

Seit PHP 5.3 wurde “ncurses” aus den Standardmodulen entfernt, verständlich denn die Consolenverschönerung ist eigentlich nur ein nice2have.

Da ich allerdings den Background-Downloader vom Filmarchiv damit programmiert habe, und das auch toll finde möchte ich bei NCURSES bleiben.

Es war eine schwere Geburt, trotzdem ist aber was bei heraus gekommen, und für alle jene die es auch haben wollen hier nun die schlagkräftigen Zeilen:

apt-get install m4 autoconf gcc ncurses-term libncurses5-dbg libncurses5-dev libncursesw5-dbg libncursesw5-dev
/usr/local/zend/bin/pecl channel-update pecl.php.net
/usr/local/zend/bin/pecl install ncurses

Also mit Apt die Pakete “m4″ und “autoconf” installieren, braucht PECL zum konfigurieren, “gcc” zum kompilieren (sollte nicht neu sein ) und die darauffolgende Pakete werden auch dafür gebraucht.

Anschließend folgt das Channel-Update (da sich das Protokoll geändert hat) und dann die Installation.