Cuándo los hijos son menores a los 12 años deben estar al cuidado y resguarda de la madre. Pero en tu caso, como tu hijo ha pasado esa edad ante un Juez de lo familiar puede declarar su libre voluntad para quedarse a tu lado, incluso en alguna prueba psicologica que le llegaran hacer saldría a tu favor  si el ambiente en el cual vive es armónico para él.

Así que no tienes de que preocuparte, no te lo van a quitar, y tu puedes rehacer tu vida, tu mismo lo dijiste, estuve en unión libre.

Suerte