Archivvorschau: News-Inhalte aus historischen Cache-Dateien wurden gegen die öffentlichen Berechtigungen im SQL-Dump geprüft.

Sesam öffne Dich

Sesam öffne Dich (Montag, 8. Dezember 2008 - 09:11:31)
[Marc's Blog] Als ich noch ein Kind war, hat mir meine Mutter immer Geschichten und Märchen vorgelesen. Besonders mochte ich jene aus "Tausendundeiner Nacht". Irgendwie war es immerwieder spannend zu hören, was die Helden in fernen Ländern so alles erleben durften. Und im Gegensatz zu heute hat es mich damals auch gar nicht gestört, eine Geschichte mehr als einmal anzuhören.

Besonders angetan hat es mir "Ali Baba und die 40 Räuber". Einerseits war es mir ein Rätsel, wie sich 40 verruchte Räuber finden konnten. Ja, in meiner Naivität nahm ich an, dass es wohl nicht mal weltweit mehr als 10 böse Menschen geben könnte (einer davon war in meiner Spielgruppe!). Andererseits war ich fasziniert davon, dass sich mit der simplen Zauberformel "Sesam öffne Dich" die geheime Schatzkammer zugänglich machen liess! Schon damals fragte ich mich, wie eine Höhle aus Stein die Stimmen erkennen und sich selber verformen könnte. Heutzutage weiss ich, dass soetwas natürlich durchaus mit Voice Recognition und feinster Mechanik möglich ist.

Später habe ich begriffen, dass - wie so oft in der Literatur - das geschriebene Wort nur eine Metapher bilden sollte: Kennt man die richtigen Worte, sollte einem keine Tür auf dieser Welt versperrt bleiben. Wissen und Diplomatie sind wahrscheinlich eben jene Dinge, die die Feder erst mächtiger als das Schwert werden lassen.

Regelmässig schaue ich die Logdaten meiner Webserver durch. Mitunter deswegen, weil ich das Verhalten meiner Besucher studieren und mich auf dieses einstellen möchte. Welche Keywords beschreiben die Themen von heute? Welche Blogs und Foren definieren die Trends von morgen? Das Auswerten der Referer, also der letztbesuchten Webseiten, wird damit zu einem wichtigen Werkzeug.

Immerwieder werden gewisse Dinge auf computec.ch auf anderen Seiten, vorwiegend Webforen, diskutiert. Will ich denn auf diese zugreifen, um mich mit dem Geschriebenen auseinanderzusetzen, erhalte ich oft eine Signup-Meldung: Man solle sich doch zuerst registrieren, bevor man die Seite besuchen kann. Nein, das entspricht mir nicht - Ganz besonders dann, wenn ich nur kurz vorbeigucken will.

Informiert man sich über solch semi-öffentlichen Foren mittels Google, so fällt auf, dass diese dennoch von der weltweit grössten Suchmaschine indiziert werden können. Google muss also etwas haben, was mir bis dato nicht bekannt ist ... Einen Spruch wie "Sesam öffne Dich"!

Firefox ist (leider!) noch immer mein Standardbrowser und so ist es ein Leichtes mittels einem Plugin die Ausgabe des Agents zu verändern. Dieser wird durch den Webbrowser übergeben, damit der Webserver zum Beispiel anhand von PHPs $_SERVER['HTTP_USER_AGENT'] den Browser identifizieren kann. Dies ist wichtig, um browserspezifische Elemente anpassen zu können (Es halten sich halt noch immer nicht alle an die Vorgaben des W3C!). Aus eigener Erfahrung weiss ich, dass der Googlebot, welcher für das Crawling zuständig ist, sich selbst mitunter wie folgt als Agent ausweist:
    Bildschirmausgabe:
    Googlebot/2.1 (+http://www.google.com/bot.html)


Durch den User Agent Switcher kann ich mich nun mit einem Knopfdruck als Googlebot ausgeben lassen. Und siehe da: Die meisten zuvor gesperrten Seiten sind plötzlich zugänglich! Was ist da passiert? Die Entwickler und Administratoren entsprechender Seiten möchten natürlich weiterhin auf Google gelistet werden, um den eigenen PageRank zu optimieren. Indem man den User-Agent ausliest und jenachdem dem Googlebot den temporären Zugriff gewährt, kann man natürlich eine Indizierung zulassen. Alle anderen müssen sich zuerst anmelden.

Es erstaunt, dass sich viele Betreiber auf eine so leicht zu manipulierende Information des Clients verlassen. Es wäre viel gescheiter, würde man zum Beispiel einen Reverse-Lookup der IP-Adresse durchführen und die damit generierte Zeichenkette auf den regulären Ausdruck
    Bildschirmausgabe:
    ^crawl-\b(?:\d{1,3}\-) {3}\d{1,3}\b.googlebot.com$

hin abzusuchen. Doch die meisten denken sich, dass der Ressourcenverbrauch und damit die Belastung zu hoch sind. Wer ein Risiko akzeptiert, der muss halt damit leben können, wenn das Unerwünschte auch tatsächlich eintrifft.

Lese/Schreibe Kommentar: 12 printer friendly

Kommentare ...
Sesam öffne Dich NeoCrypt | 08. Dez 08 : 10:30
Dukky.gif
Aktives Mitglied (Level 8)
Rang 8 (Aktives Mitglied)2 Ränge fehlen noch

Kommentare: 2
seit 27. Jan 05 : 14:54

Antworten
Wau ... da bin ich doch immerwieder begeistert was solch simple Methoden alles zu bewirken vermögen.
Mann muss nur eben erst einmal darauf kommen das Tor nicht solange anzubrüllen bis man "Sesam öffne dich" hat - sondern eben einfach den Schlüssel unter dem Fußabstreifen nehmen =)


Kommentare ...
Sesam öffne Dich gaps | 08. Dez 08 : 19:38
GornokTheRock.gif
Sehr aktives Mitglied (Level 9)
Rang 9 (Sehr aktives Mitglied)1 Ränge fehlen noch

Kommentare: 18
seit 10. Nov 07 : 15:18

Antworten
Hi Marc,

super Beitrag und nettes Tool, kannte ich noch nicht! Gleich mal getestet. Also nicht wundern wenn der Googlebot jetzt mal öfter vorbei schaut ;-).

gruss gaps



Kommentare ...
Sesam öffne Dich ports | 09. Dez 08 : 09:13
ThisIconSUCKS.gif
Kernmitglied (Level 10)
Rang 10 (Kernmitglied)

Kommentare: 85
seit 31. Jan 05 : 16:37

Antworten
"Miunter" sollte wohl "Mitunter" werden. Aber wieso ist Firefox *leider* dein Standardbrowser?


Kommentare ...
Sesam öffne Dich Marc Ruef | 09. Dez 08 : 10:03
http://www.computec.ch/_images/newsicons/marcs_blog.gif
Kernmitglied (Level 10)
Rang 10 (Kernmitglied)

Kommentare: 427
seit 25. Jan 05 : 17:54

Antworten
Danke fuer den Hinweis.

Firefox hat immermal wieder Probleme, deren Diskussion leider sehr schnell in Glaubenskriege umschlagen (habe ich selber schon beim Mailverkehr mit Entwicklern erlebt!). Manchmal sind unschoene Freezes zu beobachten, manchmal finden sich nervige Memory Leaks, manchmal zicken die Addons rum, etc. Nicht selten switche ich kurze Zeit auf Opera um, um dann reumuetig wieder zum Firefox zurueckzukehren. Ich fuehle mich da wohl ein bisschen wie damals Kate Moss und Pete Doherty ;) !

Re: Sesam öffne Dich ports | 09. Dez 08 : 11:35
ThisIconSUCKS.gif
Kernmitglied (Level 10)
Rang 10 (Kernmitglied)

Kommentare: 85
seit 31. Jan 05 : 16:37

Antworten
Ja, deine angesprochenen Punkte sind mir auch schon aufgefallen. Nicht so klasse finde ich auch, dass Firefox immer "groesser" und umfangreicher wird. *Eigentlich*, mal nur die Nutzung des Internet betrachtend, wuerde mir ein Browser wie k-meleon reichen. Aber Firefox ist bei seiner Modularitaet und Erweiterbarkeit (ob nun Mouse Gestures, Noscript, Tamper Data oder Web Developer) einfach ungeschlagen.

Re: Sesam öffne Dich El Kassem | 09. Dez 08 : 12:11
PentaxMajorum.gif
Kernmitglied (Level 10)
Rang 10 (Kernmitglied)

Kommentare: 148
seit 01. Jun 08 : 21:47

Antworten
Also...
Ich bin mit FF relativ zufrieden. (Besser wie IE)
Mir würde auch ein ganz ganz simpler Browser reichen.
(Naja... vllt programmierer ich mir mal einen in paar Monaten / Jahren? :D )

Re: Sesam öffne Dich Pegen | 09. Dez 08 : 12:53
Kernmitglied (Level 10)
Rang 10 (Kernmitglied)

Kommentare: 6
seit 28. Jan 05 : 13:02

Antworten
Firefox ist aber nicht die einzige Software, die immer 'grösser' wird und sich so unweigerlich selber vom Tron schiesst!

Winamp in der Version 2 war wunderbar, nach der Version 3 musste ich mich dringend nach einer Alternative umsehen (foobar tuts nun), zuviel Ballast lähmt mein System.

Aber das Add-On FireBug (CSS/DOM/Javascript) ist wirklich unersetzlich! Dafür braucht mein Fuchs nun mind. 3 Sekunden bis er gestartet ist..

Re: Sesam öffne Dich ports | 09. Dez 08 : 13:46
ThisIconSUCKS.gif
Kernmitglied (Level 10)
Rang 10 (Kernmitglied)

Kommentare: 85
seit 31. Jan 05 : 16:37

Antworten
Ja, das Problem ist nicht Firefox-typisch. Neben Winamp fallen mir spontan noch ACDSee (Bildbetrachter) und UltraEdit ein. Beides waren Tools die in frueheren Versionen genau das getan hatten, wofuer sie urspruenglich gedacht waren. Heute sind mir die Tools viel zu ueberladen.

Re: Sesam öffne Dich Nixi | 14. Dez 08 : 04:53
ThereCanBeOnlyOne.gif
Kernmitglied (Level 10)
Rang 10 (Kernmitglied)

Kommentare: 20
seit 22. Apr 05 : 09:41

Antworten
Oh ja. Gerade bei ACDSee hab ich das gemerkt. ACDSee war immer ein wunderbarer Bildbetrachter. Gut und schnell und vorallem wunderbar durch shortcuts bedienbar. Nur ab Verion 4 fingen die entwickler groß an die Bildbearbeitung aufzubauschen, dann noch irgendwelche Kamera und Scannerunterstützung reinzubauen und all so ein schnickschnack. Grauenvoll. ACDSee blähte sich immer mehr auf. In Windows nutze ich immernoch ACDsee 3.1, das ich mir extra gut behütet gespeichert habe, da ich bissher keinen Ersatz gefunden habe. Nein auch Irfanview nicht, obwohl er nahe rankommt.
Anscheinend wollen immer mehr Entwickler ihr Programm zum Allrounder machen.
Nero z.B. . Ich kenne die letzten Versionen nicht und weiss nicht was vielleicht noch alles dazu gekommen ist, aber irgendwo ab v6 fingen sie an auch ein Emuliertes laufwerk anzubieten, wo es doch schon software gibt die diesen Zweck wunderbar erfüllt. So läd man sich den Kram quasi doppelt auf die Platte und die einzelnen Programme werden dadurch nur langsamer. Das kanns doch echt nicht sein ...


Kommentare ...
Sesam öffne Dich El Kassem | 09. Dez 08 : 14:59
PentaxMajorum.gif
Kernmitglied (Level 10)
Rang 10 (Kernmitglied)

Kommentare: 148
seit 01. Jun 08 : 21:47

Antworten
Tja die Entwickler wollen in Ihr System immer mehr Funktionen reinpressen...
Das kenn ich aber von mir auch.

*zurückdenk*
Da denk ich spontan an ein SH Skript. Das ursprünglich nur private Nachrichten verschicken soll per "formular".
Dann wurde damit irgendwie ein Administrationscenter... (Und jetzt ist es weg..)


Kommentare ...
Sesam öffne Dich gaps | 09. Dez 08 : 21:45
GornokTheRock.gif
Sehr aktives Mitglied (Level 9)
Rang 9 (Sehr aktives Mitglied)1 Ränge fehlen noch

Kommentare: 18
seit 10. Nov 07 : 15:18

Antworten
Hallo,

also ich Liebe die Erweiterungen bei Firefox! Egal ob es Firebug, Noscript oder Fast Video Download ist! Einfach genial, ich will Ihn nicht missen!

Aber zum Surfen reicht mir Lynx auf meiner Shell... ;-)!

gruss gaps


Kommentare ...
Sesam öffne Dich Scythur | 11. Dez 08 : 12:58
GemWebSkul.gif
Aktives Mitglied (Level 8)
Rang 8 (Aktives Mitglied)2 Ränge fehlen noch

Kommentare: 4
seit 17. Feb 05 : 18:52

Antworten
Grüsse,

Top-Blog!

FF Addons erleichtern einem schon das Leben, als erstes denk ich da an Foxmarks(wenn man täglich mehrere computer benutzt und immer auf die neuesten Lesezeichen angewiesen ist;))
Oder HttpFox(HTTP Analyzer), Tamper Data(HTTP-/S Header anzeigen & verändern).