Como fazer a autencicação do usuário que envia email

Bom dia pessoal, depois de muita surra consegui fazer o server com autenticação, porém se eu colocar um email que não existe exemplo: abcd@dominio.com ele envia o email mesmo assim. Segue abaixo parte do main.cf

#====== SASL ================
smtpd_sasl_auth_enable = yes
smtpd_sasl_security_options = noanonymous
smtpd_sasl_local_domain = $myhostname
broken_sasl_auth_clients = yes
smtpd_recipient_restrictions = permit_sasl_authenticated,permit_mynetworks,check_relay_domains

Algo a mais que eu deva fazer para bloquear esse tipo de envio não autenticado ?