Bueno, empezando por el principio, con una geometría tan poco densa, lo que tienes es mucho control y podrás animar sin muchos problemas, pero por contra, no podrás hacer tantos detalles como quisieras casi seguro. Para ello tendrías que darle más densidad.
Lo que te puede pasar entonces es que eches en falta un loop más alrededor de los ojos y alrededor de la boca que no forme ese quad, como te adjunto en la imagen.
De todas formas, yo tampoco soy un maestro del modelado ni de la animación, así que alguien podrá darte datos más precisos.