Bei mir gehen die Umlaute in verschiedenen Browsern einwandfrei.
Schau mal nach den Einstellungen für das Character Encoding (Zeichensatz). Muss auf 'Western (ISO-8859-1)' stehen.

Gruß,
ahk