puedes invocar alguna causal de divorcio que aplique a tu caso si ya no haces vida conyugal en comun con el o definitivamente pideselo voluntario, y asi puedes hacer convenio para las visitas y convivencia con la menor definitivamente no te lo puede quitar asi de facil, pues el menor depende mucho de su mama la ley esta de tu lado, pero contacta un abogado de tu localidad para que te ayude, yo he tenido varios casos asi y a la mera hora los maridos no hacen nada de lo que amenazan al menos a mi no me ha pasado.... suerte