Hola Spiderstave,
Desafortunadamente no hay manera que usted puede evitar que el hojeador agrande el texto sobre ajustes del usuario.
Esto fue pensada para ser utilizada a la accesibilidad, si usted pudiera parar el texto del agrandamiento, la característica soltaría su propósito para los usuarios con deficiencias visuales.
La determinación de su tamaño en pixeles es la cosa más fija que usted podría hacer, evitaría realmente que agrandara en el IE sin embargo, pero en el FF actúa como debe pero ahora con la característica de zumbido debe actuar mucho mejor que previamente cuando el zumbido era texto solamente.
La única manera de prevenir esto es fijar todo en el porcentaje para la disposición entera que es impráctica en la mayoría de los casos.