حكم بقاء الزوجة تحت زوجها التارك للصلاة

السلام عليكم و رحمة الله و بركاته
أنا والحمد لله قد تبت والتزمت منذ 3 أشهر، و كان زوجي مسافراً وقد أخبرته وتقبل الموضوع، و لكن المشكلة أنه لا يصلي وقد تناقشنا كثيراً، وأنا قد سمعت أنه يجب علي أن أترك المنزل إن هو لم يصلي وأن أفارقه في الجماع، أما سؤالي فهو: أنني بصراحة عندي أبناء ولا أريد أن أتركهم وكذلك فإن حالة أهلي المادية لا تسمح، فإني أريد أن أعرف ماذا علي أن أفعل في هذه الحالة؟ وهل أنا مذنبة إذا رفضت الجماع معه علما بأنني إذا عاندته ورفضت زاد عناده في عدم الصلاة فماذا عساي أن أعمل؟ وكذلك أريد أن أعرف أنا أعلم أنه يبذر الأموال وينفقها في غير مكانها الصحيح (و نحن ولله الحمد حالتنا من المتوسط وما فوق) فهل أستطيع أن أسأل من ورائه أو ماذا أستطيع أن أفعل؟
أفيدونا جزاكم الله خيراً.