新我能偷偷把孩子带走吗

我跟老公在一起没多久就怀孕了，当初因为种种原因差点打胎了，，后来因为舍不得孩子就留下来了，我们没有办结婚证，孩子现在3岁了，我从孩子8个月就出去打工挣钱，孩子让爷爷奶奶带，我每个月给一千多块钱，每个月都给，但是他天天不上班不说，还找各种借口找我要钱，后来不给他了，他就趁我睡着了拿去我钱包里直接拿，或者直接拿银行卡去取钱。然后我就离开他了，不为别的，只是想存点钱，不想让他把我钱折腾完了，结果，两年了，他一分钱没挣不说，还让他父母找我拿了5万左右，说让我看在孩子面上给他钱做本钱做生意，结果却是他拿去花掉了我被他骗的一无所有了，我就说不跟他过了，他说我没有钱了就让我净身出户，孩子也不给我，这段时间我也有给他父母打电话，想把孩子带出来上学，把孩子上我户口上，毕竟孩子现在还没上户口呢，孩子爷爷奶奶也想把孩子给我，因为他们年龄大了，只是种了几亩地，没有啥收入，但是他不同意，我知道他是想拿孩子当借口可以找我要钱，但是我不会给他钱，我想把孩子偷偷带走带我身边上学，不知道可以不，毕竟我有稳定的收入，他是天天游手好闲找人借钱花，我害怕他以后报复我，毕竟他以前因为跟人打架坐过牢，他说他什么都不怕