Ich habe jetzt Tiffu eingesetzt, um Twitter zu überwachen. Dazu läuft ein Script, das ungefähr alle 5 Minuten durch einen Cronjob (aus Bequemlichkeit noch über http://cronjob.de) aufgerufen wird. Dieses Script ruft aus der public timeline von Twitter die 20 aktuellsten Tweets und wertet diese aus. Dabei ist als erstes festzustellen, dass Twitter in der public timeline nur jeden 1000sten Tweet zurückliefert. Also alle mit einer ID, die ohne Rest durch 1000 teilbar sind.

Kann man diesen Input nun für sinnvolle Statistiken verwenden? Und wenn ja, wie?

Wieviele Tweets werden pro Sekunde bei Twitter geschrieben?

Die ID der Tweets repräsentiert die Anzahl der insgesamt geposteten Tweets, da diese offensichtlich aufsteigen nummeriert sind. Aufgrund des hohen Tweet-Aufkommens (zur Zeit ca. 1000/Sekunde) kommen in 5 Minuten also ungefähr 300.000 Tweets zusammen, was bedeutet, dass die Schrittweite von 1000 in der ID kaum ins Gewicht fällt. (Messfehler > 0.33%).

Die Anzahl der pro Sekunden geschriebenen Tweets lässt sich also ermitteln, indem man die Differenz der höchsten IDs zweier Twitter-Abfragen durch die verstrichene Zeit in Sekunden teilt. Das ist einfach.

Wieviele Accounts gibt es bei Twitter?

Interessanter wird es bei der Frage, wie viele Accounts bei Twitter existieren. Es gibt meines Wissens keine Möglichkeit, dies direkt abzufragen.
Hier gibt es zwei wesentliche Ansätze. Die erste einfachere ist, dass man sich aus den Stichproben (alle 5 Minuten 20 Tweets) einfach die insgesamt höchste Account-ID ermittelt und speichert und hofft, dann ungefähr auf die Million genau sagen zu können, wieviele Accounts insgesamt je existiert haben. Pro Tag werden 20x12x24=(5760) Tweets analysiert. Die Wahrscheinlichkeit, dass dabei einer der 1 Mio neuesten Accounts getroffen wird, hat eine Wahrscheinlichkeit von ca. 1:174, wenn man davon ausgeht, dass alle Accounts gleichmäßig twittern, was aber kaum der Fall sein dürfte. Wie hoch die Chance tatsächlich ist, lässt sich also schwer einschätzen. Man kann aber davon ausgehen, dass die ermittelte Anzahl im Laufe der Zeit immer genauer, aber nie ganz genau sein wird. Leider lässt sich die aktuell ermittelte Zahl von 184 Millionen kaum verifizieren.

Die zweite Methode, die aktuelle Anzahl der Accounts zu ermitteln ist, einfach zwei möglichst aktuelle Accounts zu nehmen und die Differenz der IDs durch die Anzahl der passenden Zeiteinheit zu teilen. So erhält man zum Beispiel die Anzahl der erstellten Accounts pro Stunde in dem Zeitraum zwischen der Erzeugung dieser beiden Accounts. Mit diesem Wert kann man dann ungefähr hochrechnen, wieviele Accounts bei gleichbleibender Rate jetzt existieren könnten.

Aktuell habe ich die erste Methode gewählt, weil es einfacher ist. Ich werde aber bei Gelegenheit zusätzlich die zweite implementieren, um überprüfen zu können, wie nahe die erste dem tatsächlichen Ergebnis kommt.

Welche Clients werden am häufigsten (zum Tweeten) verwendet?

Für diese Statistik benötige ich eine Tabelle in einer Datenbank. Zu jedem Tweet liefert Twitter die Information mit welchem Client dieser gepostet wurde. In dieser Datenbank haben sich bisher knapp 600 Einträge - also verschiedene Twitterclients angesammelt, wovon man max. 10% überhaupt als betrachtenswert einstufen kann. Insgesamt wurden bereits über 12.000 Tweets analysiert, was schon eine recht repräsentative Stichprobe darstellt. Zur Zeit führt neben den Twitter Clients (web und API) mit ca. 33%, Übertwitter mit etwas mehr als 10%, gefolgt von Tweetdeck und Twitter for BlackBerry® mit je ca. 4,5%.

Die laufende Statistik kann unter Tiffu beobachtet werden.

[Update 21:28] Gerade finde ich noch folgenden interessanten Artikel, nach dem herausgefunden wurde, dass die Account-IDs nicht sequentiell vergeben werden, sondern teilweise in Schrittweiten von 10: Twitter id's and number of Twitter users

Zwischen einer Idee und deren Realisierung steht nicht selten ein langer steiniger Weg. Aber nicht immer. Zwischen meiner Idee von Samstag morgen und der ersten funktionierenden Version steht nur ein Wochenende, dass ich fast ausschließlich programmierend verbracht habe. Das Ergebnis kann man unter http://tiffu.com bestaunen.

Welche Idee steckt hinter dieser Seite?

Ein Großteil aller Informationen, die man publizieren möchte, besteht aus einer einfachen Zahl, einen Wort, einem Datum oder einem Namen. Um eine solche Information zu publizieren ist ein Blog-Eintrag zu viel, Twitter ist zu flüchtig und eine Zahl auf einer statischen Webseite zu ändern ist auch lästig.

Mit http://tiffu.com kann man diese Informationen übersichtlich und schnell präsentieren und sich zugleich auch eine Liste mit Informationen anderer Leute aufbauen, die man dann schnell und übersichtlich anschauen kann.

Die zu präsentierenden Informationen können sehr vielfältig sein. Irgendwer macht sich vielleicht die Mühe und bietet die aktuellen Lottozahlen an, ein anderer hält den DAX-Kurs aktuell und wieder einer stellt die aktuellen Spritpreise der Tankstelle um die Ecke zur Verfügung. Manch einer möchte seinen aktuellen Lieblingsfilm empfehlen oder seinen neuesten Highscore eines bestimmten Spieles zum besten geben. Der Kreativität sind hier kaum Grenzen gesetzt und was nützlich ist und was nicht, entscheiden die User selbst, indem sie eine bestimmte Information beobachten oder auch nicht.

Ich halte diesen Service eine ideale Ergänzung zu den bestehenden Angeboten.

Es wird ein API geben, mit dem es möglich ist, Informationen automatisiert zu aktualisieren und abzufragen. Damit erweitert sich das Anwendungsgebiet dieser Idee enorm. Man wird sehen, was sich entwickelt, Ideen sind willkommen.

Nun gebe ich die Seite zum Testen frei, man kann sich anmelden, einloggen und herumprobieren: http://tiffu.com

Viel Spaß

Ich habe heute ein kleines Spielchen mit JavaScript umgesetzt und kam dabei auf die Idee, die Einstellungen per Formular an das Script zu schicken. So etwas habe ich bereits mal bei jQuery gesehen, aber nicht näher drüber nachgedacht, wie das geht. So habe ich mich in den Tiefen des Netzes auf die Suche gemacht und bin auf eine völlig skurrille aber sehr praktische Methode gestoßen, auf diese Parameter zuzugreifen.

Der Kern der Sache ist folgende Funktion:

(function()
{
var s = window.location.search.substring(1).split('&');
if(!s.length) return;
var c = {};
for(var i = 0; i < s.length; i++)
{
var parts = s[i].split('=');
c[unescape(parts[0])] = unescape(parts[1]);
}
window.param = function(name){return name ? c[name] : c;}
}());

Dieser etwas kryptisch anmutende Codeblock ohne Namen ruft sich bei der Ausführung des Scripts selbst auf. Im Anschluss kann man dann mit param('parameter') auf die URL-Parameter zugreifen.

Angenommen man hat folgende URL:
http://domain.de/index.html?width=100
dann liefert param('width') den Wert 100.

Wenn man sich nicht darauf verlassen möchte, dass ein bestimmter Parameter übergeben wurde, kann man folgendes machen:
var width = !!param('width') ? param('width') : 50;
wobei 50 dann ein Default-Wert ist, der angenommen wird, wenn param('width') nicht definiert ist.

Eine praktische Anwendung für dieses Feature kann man auf dieser Seite sehen.

Ich habe nun ein Script fertig gestellt, dass nicht nur für die Auftraggeberin @BettinaKalandra nützlich ist, sondern für viele Webdesigner und Webmaster interessant ist, die ihren Kunden ermöglichen möchten, die News auf ihren Webseiten selber zu bearbeiten. Ich finde, das war eine perfekte Idee für den Programmieren-für-Nüsse-Tag. Danke nochmal für die Inspiration.

Das PHP-News-Script ist völlig kostenlos und darf frei verwendet werden. Feedback ist ausdrücklich erwünscht und wer es einsetzt und mir den Link auf die Seite schickt, kommt als Beispiel auf diese Seite drauf.

Leider hatte ich keine Zeit für alle die Blog- und Wordpress Probleme. Aber ich muss auch sagen: Von Wordpress habe ich keine Ahnung und kann da kaum weiterhelfen. Vielleicht gibt es ja einen Wordpress-Spezialisten, der mich imitiert und mal einen Wordpress-Konfiguration-für-Nüsse-Tag macht ;o)

Weil ich nach über einem Monat immer noch kein neues Projekt habe (klares Projektvermittler-Fail) werde ich heute ganz kostenlos Programmieraufträge in PHP und JavaScript entgegennehmen und kostenlos ausführen. Die Ergebnisse dürfen vom Auftraggeber frei und ohne Einschränkungen benutzt werden, wobei ich die Ergebnisse allerdings veröffentlichen werde.

Wer ein Script braucht, schreibt seine Wünsche als Kommentar an diesen Blog-Eintrag. Ich suche mir dann was raus und setze soviel um, wie ich schaffe. Es sollten keine allzu großen und aufwändigen Sachen sein, die man in ein paar Stunden schaffen kann.

Damit möglichst viele in den Genuss der Gratis-Programmierung kommen, werde ich die kleineren Sachen vorziehen und schauen, wieviel ich an einem Tag schaffe.

Also ran an die Tasten, morgen früh lege ich direkt los und ich hoffe, dass es dann auch was zu tun gibt!

Reihenweise schieben diverse Politiker die Schuld an der (angeblich) zunehmenden Gewalt bei Jugendlichen auf Computerspiele, das Internet und einfach alles, was die Leute davon abhält, vor der Glotze zu hocken und sich manipulieren zu lassen. Das wird von den Medien gerne wiedergekäut und aufgebauscht, weil denen vor allem das Internet ein Dorn im Auge ist. Die Auflagen der Printausgaben gehen zurück und das passende Geschäftsmodell für das Internet haben sie immer noch nicht so richtig entdeckt.

Wenn man aber nur mal ganz kurz seinen Verstand aktiviert, müsste einem sofort einfallen, warum Jugendliche immer krasser werden:

1. Weil dies der Erwartungshaltung der Gesellschaft entspricht. Politiker nutzen Vorfälle von Jugendgewalt gerne, um ihre kruden Ideen durchzusetzen. Alles, was die Medien ausnutzen können, um das Volk zu empören wird von den Politikern wiederum ausgenutzt, um darauf aufmerksam zu machen, wie wichtig es doch ist, mehr Kontrolle über den Informationsfluss auszuüben.

2. Weil das Bildungssystem vollständig versagt. Schulen kann man heutzutage schon mit Wissens-Abfüllanlagen für Kinder und Jugendliche betrachten. Auf individuelle Fähigkeiten und Interessen wird nicht eingegangen. Alles, was sich nicht handlich abfertigen lässt, ist lästig und wird stigmatisiert. Als Begründung dafür, dass die Schüler immer schlechter und unmotivierter werden, dienen neben dem Internet auch Migranten.

3. Steigende Kosten, sinkende Löhne, ständig neue Abgaben zwingen die Eltern dazu, mehr und länger zu arbeiten, was dazu führt, dass die Kinder vernachlässigt werden. Es gibt so gut wie keine Ganztagsschulen, wo die Kinder wirklich sinnvoll den ganzen Tag betreut werden. Sozial schwache Familien werden prinzipiell benachteiligt, weil man ohne zusätzlicher Unterstützung der Kinder kaum noch eine Chance hat, ihnen einen vernünftigen Bildungsweg zu garantieren, wenn sie nicht schon von sich aus superintelligent sind.

Diese Liste könnte ich noch beliebig weiterführen. Die Ursachen all dieser Punkte liegen aber immer bei der Politik, da diese für die Rahmenbedingungen verantwortlich sind, in denen die Kinder aufwachsen. Anstatt auf den Bürgern herumzuhacken, sollten sich diese Dummschwätzer an die eigene Nase fassen und darüber nachdenken, wo sie und ihre Vorgänger selbst versagt haben.

Einfach mal ohne Worte...
Continue reading "Nennt mich Prophet!"

Vor einiger Zeit habe ich einen Brief von der ehemaligen Bundesvorsitzenden der Violetten, Frau Gundula Blau in meinem Blog veröffentlicht.

Heute habe ich zu diesem Brief eine Stellungnahme von Frau Susanne Clemenz erhalten, die ich auf ihren Wunsch hin ebenfalls hier einstellen möchte:
Continue reading "Die Violetten: Kommentar von Susanne Clemenz auf einen Brief von Frau Blau"

Ich war gerade damit befasst, ein paar Teile von http://wayati.com für ein neues Projekt zu kopieren, als ich auf ein PHP-Code-Snippet gestoßen bin, die eine klare Absage an Rechtsextremismus darstellt:

$nazi = false;
if( stristr( $user, "npd" ) )
{
   $nazi = true;
}

Anschließend kann man sich aufgrund dieser Variable im weiteren Code von Rechtsextremismus distanzieren.

Vuvuzelas sind ja seit der WM in Südafrika einerseits ein beliebtes Fan-Objekt, mit dem man die Akkustik einer kranken Kuh nachahmen kann, um seiner Freude ausdruck zu verleihen. Andererseits ist es auch Hassobjekt all jener, die einfach nur ihre Ruhe haben wollen. Für beide dieser Gruppen habe ich heute einen Blog-Eintrag, der zum Nachdenken anregen soll:

Bevor man das nächste Mal in so eine Tröte bläst, sollte man sich einfach mal den Ursprung dieser Musikinstrumente bewusst machen...
Continue reading "Wo die Vuvuzelas herkommen"

Fussball ist wohl die einzige Sportart, die - aus welchem Grund auch immer - in der Lage ist, die Fans in halbintelligente Neandertaler zu verwandeln, die mit Deutschlandschals behängt, "Schland"-Fähnchen schwingend und neuerdings auf Vuvuzelas trötend durch die Straßen ziehen.

Natürlich kann man nichts dagegen sagen, wenn man sich für die eigene Nationalmannschaft freut, wenn sie gewinnt. Aber ist es wirklich ein Ausdruck von Freude, wenn man sich ins Auto setzt und wie bescheuert hupt? Oder trötet? Für diese Tröten hasse ich Afrika. Ich bin extra ins Dorf gezogen, um diesen bescheuerten Autokonvois zu entgehen, die zu jeder Gelegenheit durch die Städte fahren und nun sitzen die Leute mit ihren Tröten vor der Glotze und verursachen Laute, wie man sie allerhöchstens von wahnsinnigen Rindviechern erwarten würde.

Continue reading "WM 2010 oder Willkommen im Neandertal!"

Ich bin IT-Freiberufler und das schon seit gut 10 Jahren. Ich habe in diesem Zeitraum an 8 Projekten mitgearbeitet. Mit dem Know-how, das ich in dabei angesammelt habe und dem, das ich vorher schon hatte, kann ich viele Unternehmen bei ihren Software-Projekten kompetent unterstützen, vor allem dann, wenn es eng wird. Z.B bei Engpässen am Projektende, bei Auftragsspitzen oder auch bei Neuentwicklungen, bei denen man mit allgemeinem Schulwissen nicht sehr weit kommt. Ich bin einfach der ideale Mann, wenn man zweitweise gewichtige Probleme in der Software-Entwicklung zu lösen hat.
Continue reading "Hexenjagd auf IT-Freiberufler"

Gerade erreicht mich folgende Nachricht:

www.direct-action.de.vu
www.biotech-seilschaften.de.vu
www.gentech-weg.de.vu
www.projektwerkstatt.de
www.projektwerkstatt.de/antirepression
www.im-namen-des-volkers.de.vu
www.ak44.de.vu
... und Hunderte mehr!

Alles ist Geschichte.
Per richterlicher Anordnung sind vor wenigen Stunden der gesamte Domainbereich der www.projektwerkstatt.de abgeschaltet, alle Daten über Verbindungen beim Provider von der Polizei gesichtert und sämtliche Computer und Festplatten des Seiteninhabers im Rahmen einer Hausdurchsuchung in Berlin beschlagnahmt worden.

Damit steht die politische Internetplattform der Vielzahl beteiligter Gruppen nicht mehr zur Verfügung. Der Provider wurde gezwungen, die Domain abzuschalten, ohne dass ein Grund genannt wurde. Bislang wird über den Hintergrund nur spektuliert.

Diese Information kommt aus der Projektwerkstatt Saasen. Die Seiten www.projektwerkstatt.de/saasen stellten auch unser Projekt vor. Auch das ist jetzt Geschichte.

Nach den Verboten von gentechnikkritischen Schriften und Veröffentlichungen, dem mysteriösen Verschwinden von www.volker-bouffier.de.vu vor einigen Jahren sorgt der Staat erneut für Zensur. Über 10.000 informative Politikseiten sind damit zur Zeit verschwunden.

[Update: 10.09.2010 08:25] Die Betreiber der genannten Webseiten haben die richterliche Verfügung veröffentlicht, aufgrund der das krasse Vorgehen dann schon gerechtfertigt erscheint. Ganz willkürlich ist die Aktion also doch nicht: http://www.projektwerkstatt.de/

Auf den gesperrten Webseiten wurden offenbar Anleitungen für diverse Protest-"Aktionen" veröffentlicht, bei denen es sich überwiegend um Sachbeschädigungen handelt. Die Veröffentlichung dieser Anleitungen wird als Aufforderung zu Straftaten gewertet. Das ist natürlich schon ziemlich dämlich.

Ich will man die jetzige Situation beschreiben:

Ich gucke aus dem Fenster (ich kann auch ohne hingucken schreiben) und sehe grüne Bäume, eine Garten, ein lustig buntes Plastikhäuschen - Dorfidylle halt. Ich höre die Vögel zwitschern, hier und da kräht mal ein Hahn, hier fahren keine Autos vorbei, also ist es schön ruhig. Die Sonne scheint fleckchenweise durch die Wolken und schürt die Hoffnung, dass es heute nicht regnen wird. Auf meinem Schreibtisch steht lecker Kaffee, zwei der drei heute anwesenden Kinder schlafen noch, die Frau läuft geschäftigt hin und her - kurzum: Heile Welt.
Continue reading "Das Internet ist eine Kloake"

Bei Blip.fm spiele ich mit Vorliebe die Liste der Lieder ab, die ich geblippt habe und für die ich dann auch Props gekriegt habe. Heute habe ich gleich drei Titel in Folge gehabt, die "unavailable" sind. Find' ich ehrlich gesagt, voll beschissen. Auch, wenn man mal ein Lied sucht, das einen interessiert, findet man fast nur noch Live-Mitschnitte und Cover-Versionen. Bei irgendeinem Lied habe ich festgestellt, dass die Cover-Version auch gar nicht so schlecht ist und habe dann eben die geblippt.

Genau in dem Augenblick, als ich auf "BLIP" geklickt habe, hatte ich die Version vom endgültigen Untergang der Musikindustrie:

Wenn die Stücke der bekannten Künstler im Internet nicht mehr auftauchen, sondern nur noch gecoverte Versionen und diese Covers immer besser werden, braucht bald keiner mehr diese Superstars. Selbst, wenn man als Independent-Künstler jetzt kaum Geld verdienen kann, könnte die selbstzerstörerische Geldgier der Musikindustrie doch bald dazu führen, dass dieser Dinsoaurier ausstirbt und die Indies ihre große Stunde haben.

Ich sag': Lasst den Dinosauerier sterben! Füttert ihn einfach nicht mehr. Überhört sein Heulen und sein Flennen. Er wird ein bißchen um sich schlagen, wütend und zornig werden. Wenn ihn aber trotzdem niemand füttert, wird er immer schwächer und irgendwann tot umfallen.