hola consultante, interesante su caso,   es de valor y admirable lo que relata de su parte, felicidades, ahora, con respecto de su consulta deje lo comento, la patria potestad se pierde por resolución judicial unicamente para ello debe existir una causa sumamente  severa para ello, como por ejemplo, ejercer violencia fisica hacia la menor,  el desentendimiento de suministrar alimentos... aqui lo importante es saber,  que edad tiene usted? su  menor hija y el padre de su menor? ya que se pueden hacer varias cosas, la primera es,  iniciar un juicio de alimentos a efecto de que se le imponga  el pago de una cantidad de dinero en favor de su menor hija, segunda, acudir a la agencia del mp e iniciar una querella (carpeta de investigación) por el delito de incumplimiento a los deberes alimentarios, y  esta puede ser la antesala para iniciar posteriormente la perdida de la patria potestad, solo que no es tan rapido y sencillo como suena, es tardado,  sin embargo se puede rescatar mucho!!!  no importa que el sujeto no trabaje, al contrario!!!  mientras mas excusas tiene la gente, mas aprovecha para incumplir,  en donde se encuentra usted? saludos