Una de las causales por la cual se pierde la patria potestad es:

• Cuando el que la ejerza es condenado expresamente a la pérdida de ese derecho, o cuando es condenado dos o más veces por delitos graves;
• Cuando por las costumbres depravadas de los padres, malos tratamientos o abandono de sus deberes, pudiera comprometerse la salud, la seguridad o la moralidad de los hijos aun cuando esos hechos no cayeren bajo la sanción de la ley penal; Así mismo cuando tolere que otras personas atenten o pongan en riesgo la integridad física o moral de los menores.

Saludos!!