öhm, also fritz.box wird wahrscheinlich deshalb nicht funktionieren, weil die fritzbox im Moment nicht der DNS-Server ist, sondern der Speedport. Das sollte die Fritzbox allerdings nicht daran hindern, sich konfigurieren zu lassen. Vielleicht mal direkt mit LAN-Kabel von deinem Rechner in die Fritzbox gehen, ohne Anschluss an das restliche Netzwerk. Dann sollte es auf alle Fälle funktionieren.
Was heißt denn "keinen Zugriff drauf" überhaupt. Findet der Browser den Host überhaupt nicht, oder kommt irgendeine Fehlermeldung, dass der Zugriff verweigert wird? Das wäre dann schon sehr seltsam.