La Freebox 4 est un routeur oui.
Il faut pas forcément un routeur pour une connexion sans fil, un AP (Access Point, ou point d'accès) suffit à créer un réseau sans-fil. Il faut un modem par contre pour se connecter à l'Internet.
La Freebox est un modem et un routeur. Ce n'est donc pas au niveau du pare-feu (intégré au routeur) qui pose problème, seulement ton réseau local est mal configuré.
Commence par désactiver le pare-feu sur ton ordinateur (ZoneAlarm, Kerio, Outpost ....), rends-toi dans Panneau de config > Connexions réseau > Clic droit sur "connexion sans-fil" > Propriétés > TCp/IP > sélectionne les paramètres IP et DNS automatiques.
Redémarre ta machine tape démarrer > Executer > cmd.exe, dans la nouvelle fenettre tape ipconfig /all
Fais stp un copier/coller de ce que tu obtiens.