redactas la situacion bastante confusa pero lo q te entendi es q hay un convenio y hay q respetarlo no esta caduco asi de facil solo esta elevado a categoria de cosa juzgada es como una sentencia.

por otro lado si no quieres hacer valer lod e la pension alimenticia q por derecho le corresponde a tu hijo ese ya es otro problema y q tu hijo cuando sea mayor de edad podra retomar pero le vas  a dar en la torre

y si puedes hacer otro conenvenio con "tus necesidades tuyas de ti "y de tu menor hijo sdiempre y cuando el padre quiera

o puedes solicitar se restrinjan dichas convivencias por violencia psicologica esto lo tienes q demostrar con periciales 

por otra parte si todo esto debe hacerlo un abogado especialista en materia familiar