Trova un'icona di Firefox (menu "Start / Tutti i programmi" o quella sul desktop).
Fai clic destro su di essa e poi clic sinistro su "Proprietà".
Nel campo: "Tasti di scelta rapida" ti ritrovi F4?
Se sì, cancellalo e poi dai l'Ok.
Se no, occorre configurare la tua tastiera e qui quoto Underpass: siamo off topic e non possiamo farlo noi a distanza.