Mira la infidelidad le corresponderia a tu esposo demostrarla si es esa la causal en la que base su contestación, respecto a que si te pueden quitar a tui hijo, lo veo muy dificil, ya que por lo general los menores se quedan al lado de su madre, por los cuidados que ella le puede dar, ahora bien ten en cuenta de los hechos que manifesto tu esposo ante el dif, en un modo podria tambalear esa decision en el juez pero no a tal grado de quitarte a tu hijo, acercate a un abogado o institución que te pueda ayudar de manera economica o gratuita y que te asesore respecto a tu caso.