父親從來沒有盡過責任，子女也是要養他的。根據法律規定，成年子女對父母有贍養義務，子女不履行贍養義務的，無勞動能力或生活困難的父母，有權去法院起訴子女支付贍養費等權利。

法律依據

《民法典》第一千零六十七條

父母不履行撫養義務的，未成年子女或者不能獨立生活的成年子女，有要求父母給付撫養費的權利。

成年子女不履行贍養義務的，缺乏勞動能力或者生活困難的父母，有要求成年子女給付贍養費的權利。

《老年人權益保障法》第十四條

贍養人應當履行對老年人經濟上供養、生活上照料和精神上慰藉的義務，照顧老年人的特殊需要。

贍養人是指老年人的子女以及其他依法負有贍養義務的人。

贍養人的配偶應當協助贍養人履行贍養義務。

關鍵詞： 子女不履行贍養義務 父親從來沒有盡過