目前跟老公住外面，老公要我存錢買一棟4層

目前跟老公住外面，老公要我存錢買一棟4層樓的房子，計劃一樓公公住，二樓當公共空間，三樓婆婆跟小孩住，四樓給我們住，公婆是離婚的狀態，所以不能住同層樓。現在每個月生活費一人一半，還說因為我沒車貸所以會存比較多的錢，如果我存100萬，他存50萬，100萬要通通拿出來，我說不是一人一半嗎？這個時候他就不要一人一半了。我說以我的賺錢能力只夠買一層公寓，而且還要貸款買，因為娘家也要重蓋房子，屋齡30年，我要拿錢回家幫忙，老公ggyy說妳拿錢回娘家蓋房子，你父母會把一部分的房子給妳嗎？我說，我不在乎會不會把房子的一部分給我，現在我只想幫家裡蓋房子讓父母住得舒服點。老公卻說你這樣拿錢回家又拿不到房子，你會損害我們小孩的權利，就少了花在小孩身上，原本可以給小孩更好的生活，我說那你拿錢回去給妳媽就不會損害小孩的權利嗎？他說不一樣，因為我媽會把她的房子留給我，我們的付出是有代價的。我到底嫁了什麼人，覺得他好自私～