Bonjour,
ni "propriétaire" depuis 1964, et encore moins "co-propriétaire (parce qu'il n'y a pas de "copropriété = division par lots)
Hypothèse classique :
En 1964 vous avez probablement hérité d'un quart de cette maison en nu-propriété (la moitié de la moitié de votre père) de même que votre frère, votre mère restant plein propriétaire de sa moitié et devenant usufruitière de l'autre moitié.
Mais il faudra vérifier auprès de votre notaire (ou du SPF :
https://www.service-public.fr/particuliers/vosdroits/F17759
Et cette propriété que vous avez maintenant a des limites définies par un bornage (est-ce le cas) que vous pouvez faire valoir au tribunal. Votre voisin n'a aucun droit sur le terrain qu'il occupe (à vérifier selon la position des bornes) et la durée de 30 ans pourrait éventuellement LUI profiter n'est pas écoulée.