¿Está mal dejar a tus padres?

No. Eres un adulto. Los adultos dejan a sus padres. Parece que tu madre ha elegido que salgas con malos términos. Si estás en una casa abusiva, es un error quedarse.