Prova anche a fare un ulteriore verifica.
Vai su Strumenti\Opzioni cartella (da una qualsiasi finestra di cartella aperta in windows explorer) apri il tab "Tipi di file", e prova a cercare e *cancellare* sia htm che html.
Reimpostali da capo (facendo doppio clic su un file .htm e un file .html) e, invece di selezionare il "Firefox" già presente in elenco, premi "Sfoglia" e vai a cercare l'eseguibile di firefox (firefox.exe) nella sua cartella di installazione.
Metti anche una descrizione adeguata, e spunta la casella "Apri sempre il file con questo programma".
Se il suggerimento di fabrixx non ha effetto, questo *dovrebbe* essere risolutivo.
Se dopo un po' Firefox (o meglio, windows) fa di nuovo le bizze, controlla ancora nei "Tipi di file" se il programma associato è cambiato.