各位大神帮忙出个主意！

公婆有两个儿子，我们是传说中吃香，但实际上没什么的二儿子家。
因为家在农村结婚时家里没给盖房子，口头上承诺现在老人住的房子是我们的。
还有一块空地是老人的，未来是兄弟俩平分的。

现在是哥哥那边因为有小工厂，场地不够，想用那块地盖房子，到时候他们可以用。
因为地是两家的，但是他一家使用，他提出他们多出钱，我们少拿钱，盖起来给他们用。

盖起来之后如果农村有什么政策，这个地方被改造了，我们也是两家平分。

但是现在面临的问题是，未来会怎样我们不得而知，而原本现在老人都在口头承诺的房子里住，孩子在农村上学，我们偶尔回来就五口人住在一起。
如果盖房子，我们除了出钱还是不给用。
现在问题摆在这，我们不知道该怎么办了？

蒽蒽。。。