Por supuesto que si se configura un delito sellama despojo y es sancionado con pena privativa de libertad.

Además el dueño, tiene acción civil para pedir la reivindicación de la propiedad con la correspondiente indemnización.

El hecho de que el predio haya estado vacante, no te facultaba poseerlo, ni tienes derecho alguno sobre el inmueble. Tu sitiación es delicada, te sugiero que contactes a un abogado de tu localidad.