Otimizar o site por cache da imagem

Pessoal, tenho lido sobre melhorar o desempenho do site em termos de velocidade, e estou tentado empregar.

Mas teve algo sobre colocar algumas imagens em cache para que seja carregadas mais rapido que eu nao entendi....como funciona eu crio alguma pasta no ftp e determino que elas devem ser carregadas mais rapido?

Pq assim, logico que todas as imagens nao tem pq fazer isso, mas o logo do site, os botoes de imagem e etc....alguem sabe me orientar como fazer isso? ALguem já fez isso? E principalmente isso realmente fornece alguma melhora no desempenho e velocidade do site?

Valeu