目前住娘家，因為婆家太吵（火車鐵軌旁），

目前住娘家，因為婆家太吵（火車鐵軌旁），兒子都睡不好，所以回娘家住。
老公自己住婆家，因為在婆家工作，六日才會來娘家。
最近工作很忙常常加班到凌晨，我就跟老公說，超過9都沒辦法到就不要來了～明早睡飽再來～
結果昨天晚上凌晨3點回到娘家，我就很生氣，別人都不用睡了嗎？可以不要這麼自私嗎？你可以不要每次都吵醒我和你兒子嗎？

我這樣錯了嗎？他一早生氣就回婆家了，真的有差這幾小時嗎？來我們也是再睡覺，這樣吵醒我們有比較好嗎？早上睡飽精神好不是比較好嗎？