Yo también los llevo normalmente por fuera, pero eso no quiere decir que queden mal llevarlos por dentro.

Siendo una prenda fundamentalmente informal, creo que lo importante es sentirse cómodo y verse bien, para mi son aceptables ambas opciones.