亲戚擅自做主把我地给别人建房,称两三年后拆还给我家。我家不同意,要建房的现在拆掉以后才不会有纠纷?

亲戚擅自做主把我地给别人建房,称两三年后拆还给我家。我家不同意,要建房的现在拆掉,或者亲戚以相同的地转换,补偿给我家,亲戚同意了。但要求自留地双方私自写“土地转换协议书”,不经过村委会登记变更,和盖章,协议书是否具有法律效力?这事该如何处理才合法,以后才不会有纠纷?