No more changes on sourceforge!

Keine Änderungen mehr auf Sourceforge!

No more changes on sourceforge!

Keine Änderungen mehr auf Sourceforge!

Zunächst einmal alle unnützen Zeichen entfernen (es sind nur Kleinbuchstaben, Zahlen, und die Zeichen _ . # und – erlaubt):

$str = preg_replace("#[^a-z0-9_\.\#-]#i", " ", $str);

Alle Wörter mit mehr als 4 gleichen Buchstaben oder Buchstabenkombinationen entfernen (z.B. hihihihihi oder looooool):

$str = preg_replace('~[a-z0-9_\.\#-]*([a-z_\.\#-]+)\1{4,}[a-z0-9_\.\#-]*~', " ", $str);

Alle Links entfernen:

$str = preg_replace("#((mailto\(news|(ht|f)tp(s?))\://){1}\S+)#i", " ", $str);

Alle zusammenhängenden Zeichen entfernen, in denen kein Buchstabe vorkommt (z.B. 0001-223 oder -_-):

$str = preg_replace("#\s+[0-9_\.\#-\s]+\s+#i", " ", $str);

Alle unbrauchbaren Zeichen (_ . # -) am Wortanfang entfernen (z.B. -soso oder auch _-_-hallo):

$str = preg_replace("#\s+[_\.\#-]+([a-z0-9]+)#i", " $1", $str);

Das Gleiche nochmal am Wortende:

$str = preg_replace("#([a-z0-9]+)[_\.\#-]+\s+#i", "$1 ", $str);

Und schlussendlich soll nur ein Leerzeichen zwischen den Wörtern stehen:

$str = preg_replace("#\s+#i", " ", $str);

Dazu gibt es noch weitere um z.B. BBCode zu entfernen, aber die sind ja zu genüge im Web zu finden. Falls jemand doch eine Frage dazu hat, kann er sie natürlich gerne in den Kommentaren stellen.

Downloads wie immer hier oder hier

Allerdings überarbeitet und um eine weitere größere Communtiy in den live Beispielen ergänzt. XSRF stirbt halt leider nicht aus…

Wer von euch also am Mittwoch Abend (10.11. 2010) um 19:10 Uhr noch nichts vor hat, kann gerne meinen Ausführungen zum oben genannten Thema lauschen. Fachhochschule Stralsund, Haus 5, Hörsaal 2 (Anfahrt).

Den Vortrag selbst gibt es hier: websicherheit (den gibt es erst morgen). Allerdings fehlen da die Hinweise zum live Hacking. Wer das sehen möchte, muss sich das Ganze schon analog anschauen

[update 18.11.10]

hab ich doch glatt vergessen die PDF hoch zu laden

Was hat sich geändert?

• ein paar Bugfixes hier und da
• besseres Exceptionhandling an einigen Stellen – obwohl XG eigentlich “rock solid” ist , sollte er jetzt nicht mehr so oft abstürzen und sich ggf. mit Fehlermeldungen bemerkbar machen
• die Statistiken sollten jetzt ohne Fehler in der Datei “statistics.xml” landen – die wird sich dann später im Webfrontend anzeigen lassen

Viel Spass damit!

Wie immer gibt es die Downloads: hier oder hier.

Ach und die Konfigurationsdatei heißt jetzt auch settings.xml und nicht mehr setings.xml (dämlicher Typo) – also bitte umbenennen, wenn ihr auf XG 0.5 updatet!

Viel Spass mit den Downloads: hier oder hier.

• ef79100b3f9d1fec8
• 87469e0b770eb6740
• 84078ca960e17cad1

Viel Spass

An dieser Stelle bleibt nur noch der Import über die plain Html Seiten durch einen selbst geschriebenen Crawler. Klingt nach einer interessanten Aufgabe
Ich habe mich dem Thema mal angenommen und so ein Tool mal fix in C# geschrieben. Damit ist es möglich, aus den Html Seiten der Carookee Foren einen Sql Dump zu erzeugen, den man problemlos in ein bereits bestehendes phpBB Forum importieren kann. Das Ganze funktioniert über einen Crawler, der aus dem DOM Baum der Seiten die Threads, Postings und User generiert. Dabei wird alles gespeichert, was sich über die Html Seiten abrufen lässt.

Das Ganze ist zwar auf Carookee zugeschnitten (der DOM Baum der Html Seiten ändert sich ggf. bei einem anderen phpBB Theme), allerdings sollte es kein größerer Aufwand sein, das an andere Foren anzupassen.

Wer daran Interesse hat, kann sich gerne an mich wenden (E-Mail oder Kontakt).