Agora foi, fiz exatamente o que você disse.
Na verdade já estava fazendo isso antes, mas mesmo assim o Mail não aceitava, ele insistia de fazer a conta via IMAP por conta própria.
Acho que o problema era justamente este eu habilitei o POP no servidor, mas não desabitei o IMAP, daí o Mail fazia o que ele achava mais interessante para ele.
Daí eu mais uma vez, detonei a conta, fui no Gmail, desabilitei o IMAP e desabilitei o POP, e habilitei de novo. Esperei um pouco e na segunda tentativa ele disse que não poderia configurar o e-mail. Esperei mais um pouco, reiniciei o Finder, e tentei mais uma vez. Dessa vez ele disse que era impossível configurar automaticamente e me deu as opções.
Valeu mesmo!