想請教以下狀況是否能達到不撫養父親的標準
因為父親不是典型那種會肢體暴力或欠債的情形所以想請教下各位
我小時候最困擾的問題就是別人問我爸爸是做什麼的，我從來不曉得我爸是做什麼的，從小三後我的記憶裡家裡每天都在為了錢吵架，我幾乎沒印象他有拿錢給我媽過
小時候家裡每天都有一群我爸的狐群狗友在家泡茶喝酒喇豬屎，這群人也沒有鬧過任何事，只不過我爸每過一陣子會換一群朋友，因為他過一陣子說的謊就會被戳破，而這群人就會離開，他會再說另一些謊吸引另一群人，而是的，我爸有錢花用買酒買茶，但沒錢養家
在小時候父母吵架是家常便飯，媽媽拿刀想砍我爸也是見怪不怪，總之所有的原因就是沒拿錢回家，但要說他完全不好也不是，他還是會接送我們，叫我們吃藥，基本還是正常人
就這樣一直到大學畢業，我親戚把爺爺奶奶的積蓄全部敗光，所以我們搬出爺爺奶奶的房子和土地到我媽買的公寓住，然後我爸也跟著我們一起住，並聲稱自己斷絕與爺奶的關係，爺奶也搬離原本的房子，自此我爸拒絕告訴我們爺奶住哪裡，當然他也從沒奉養自己的父母，他怨恨自己的父母
就這樣一直過日子，過了好幾年，我爸其實是不菸不酒不跟我媽拿錢的人，雖然有少許偷我們錢的行逕，但其實也不是很常發生，金額也是很少，他每天就是在家裡，看電視，冰箱有什麼就吃什麼，我平常對他是採無視的態度，他有錢繳手機費用和加油騎車出去玩，當然他為什麼有錢繳費用我也不清楚，問他，他會有10種答案，或是他會不說話
總之，我爸賺錢是他的娛樂用，吃家裡的，用家裡的，他不會付錢，從小到大都是這樣，他對我們沒有不好，頂多偶爾言語攻擊，但我們也攻擊回去，家裡沒東西吃會稍埋怨，但也沒有太誇張，一切都是在一個還算可以忍受的狀況下，簡言之，一個很會說謊但言行有點克制的吃軟飯的男人或說是陌生人，已一輩子都是這樣了
但隨著年齡漸長，將來他勢必會有醫療花費，這種狀況若小孩老婆不想照顧他，會有法律問題嗎？會有棄養的狀況發生嗎？
這真的是很難判定的問題，我們可以因為他不算太誇張就讓他吃用，但如果從小到大都沒有花費在我們身上，那未來要我們花費在他身上，這樣是合理的嗎？
因為在網路上找到的案例都不會是這種溫水煮青蛙的案例，像這樣我要如何面對？
謝謝