index.php aus URL verschwinden lassen

Hallo zusammen,
bin neu hier und bedanke mich schon mal jetzt für Eure Hilfe.

Mein Problem:
Ich habe WP auf dem Server installiert und diverse Pages angelegt. Dann wollte ich das klassische /?p=zahl aus der URL verschwinden lassen und habe entsprechend bei den Einstellungen der Permalinks unter "Custom Structure" eingetragen: /%category%/%postname%.html
Allerdings war außer der Startseite dann keine Seite mehr zu erreichen, es erschien immer ein 404. In einem anderen Forum habe ich dann gelesen, dass man in solch einem Fall in der "Custom Structure" eintragen muss /index.php/. Nun sind auch die Seiten wieder zu erreichen, allerings immer mit dem /index.php/ davor. Siehe HIER!

Meine Frage:
Liegt das nun an der Serverstruktur? WP ist im root-Verzeichnis installiert. Oder liegt es an den Einstellungen der Permalinks? Posts habe ich in dem Sinn ja nicht angelegt, sondern Pages!

Viele Dank für Eure Unterstützung!

Hey, danke für Deinen Tipp.
Leider ändert das nichts und auch hier erscheint die 404.

Denke eher es liegt an irgend einer Einstellung in der .htaccess oder so....

Danke für den Tipp, ich habe mich mit dem Hoster in Verbindung gesetzt und hoffe, dass es daran liegt. Ich melde mich, sobald ich eine Antwort habe.

Jaaaa! Es läuft! Vielen Dank für den Tipp!