精准扶贫不作为

我是精准扶贫户，家里有4口人。我开出租车，我的工作不是稳定的，而且我们这里的人口比较少，一天有时候连100元都挣不到，很多时候连给车主交的钱都挣不够。我妈是个残疾人没有劳动能力。我衣服要看孩子，孩子4岁，每天孩子晚上上学下午5点左右放学，这样的时间不好找工作，人家也不可能让你晚来早去。扶贫工作开展一年多了，家里没有什么改变。我要求取消我的扶贫名额。不扶贫我还有个健全的家，扶贫以后我衣服看不到未来跟我离婚了，有没有人告诉我，我该怎么办？