contrato privado de compraventa

He comprado mi casa por contrato privado al propietario en octubre de 2003 en la Comunidad de Madrid. Como yo me hice cargo de la hipoteca, para no tener problemas con el banco, decidimos no elevar a público el contrato, lo hicimos en abril de 2016. Este año pagué el impuesto para inscribir la propiedad, cuando yo compré la casa en el 2003 tenía construidos 238,19 metros pero yo a lo largo de los años la he ido ampliando, construí una cochera, porches y un cenador, en total la casa ahora tiene unos 500 metros, tengo la factura de la empresa que me hizo estos trabajos, además el catastro subió a partir del año 2006 donde la casa tenía construidos 480 metros y siguió subiendo en cuanto subían los metros construidos.
El caso es que me reclaman en relación a los metros actuales de la casa y no de cuando la compré y no me parece lógico que tenga que pagar una transmisión por metros que yo le construí a la casa después de comprarla, al que me la vendió también le reclaman la diferencia y le computan los 500 metros construidos y no los 238,19 que me vendió.
Tengo treinta día para hacer alegaciones, le ruego que me aconseje ya que soy extranjero y no entiendo de estas cosas