Tem como proteger senha de e-mail no PHPMailer?

Olá, é muito fácil enviar e-mails com a class do PHPMailer, porém me incomoda um pouco a senha ficar exposta e visivel a qualquer um que tenha acesso ao código fonte do sistema. E-mail é uma coisa muito pessoal e não sabemos a indole das pessoas que irão administrar nosssos servidores. Por isso gostaria de saber se tem alguma maneira de proteger essa parte de configuração de senha?