C'avevo pensato anche io, però il risultato è decisamente diverso: impostando una dimensione minima per i caratteri, perdi la proporzione tra le varie parti del testo.
In altre parole: se in una pagina ho tre dimensioni di carattere, 10,12 e 14 pt, usando CTRL+ aumenta tutto di 1 (10,13 e 15), usando la dimensione minima a 20 ti trovi tutti i caratteri a 20 (con conseguente layout sballato).