結婚買房子

我跟老公婚後ㄧ起買房子，ㄧ人出一半，只是房子登記在我名下，先生也自己說房子就是要給我的。這些都是雙方當初都心甘情願同意的，然後婆家ㄧ直說妳在騙他們兒子的錢，請問誰能接受？
因為種種原因，先生很少過來住，婆家又說不要傻傻幫別人繳房貸，於是，先生又被家人洗腦，也不繳房貸了，全部我1個人吃下來。他說房子是我的，當然是我付。
好的，那麼三不五時先生來過夜，在這邊用水用電，還有鑰匙可以自由進出，他覺得老婆的房子老婆付錢，但他本來就可以要來就來，這樣合理？
因為老公在搞投資，為了保障自己我要求做財產分割，但先生卻不高興覺得跟離婚差不多....他只使用不付費，然後要劃分權利還該該叫....

到底為什麼可以這麼自私？