[RESPONSIVO] Devo utilizar Em em todo lugar ou somente em Fontes?

Sei que se deve usar em ao invés de px em fontes para um bom desempenho da sua aplicação em celulares, porém só uso isso em tamanho de fontes.

Devo usar em também em lugares como margens, paddings, line-height, etc?

Obrigado