养老金问题

一对70多岁老夫妻，男方瘫痪，女方照顾一年后，带着两人的养老金投靠了亲戚，对男方不闻不问，请问男方可以打官司要回自己的养老钱吗？