寄人籬下or搬到外縣市

我們一家目前住在板橋，從婆家搬出來，暫住在娘家，想要自己搬出去，有考慮到桃園定居，但依照目前的經濟狀況如果是留在板橋，邊租房子邊存錢可能需要6年，所以在考慮是否要繼續寄人籬下，抓緊時間工作存錢？或是直接搬到桃園租房子？

現在孩子都還小，大的剛上幼兒園，小的滿一歲，我跟先生本來是覺得先忍耐點，住到老大要上小學再搬到桃園。但最近在娘家一直被找碴，而婆家是希望我們回去，卻事事都想干預，先生認為兩害相權取其輕，要我考慮一下。

我想來想去實在不知道怎麼做比較好？
1.繼續寄人籬下存錢是比較快，但心情上不太愉快
2.在板橋租屋，能存到的錢非常有限，拉長定居桃園的計畫
3.直接到桃園租屋，全部從頭來，但人生地不熟，未知數多

希望有經驗的前輩們賜教，先謝謝大家了！