起诉遗弃罪可以要回抚养费。本罪侵犯的客体是被害人在家庭成员中的平等权利。本罪在客观方面表现为对年老、年幼、患病或者其他没有独立生活能力的家庭成员，应当扶养而拒不扶养，情节恶劣的行为。本罪的主体为特殊主体，必须是对被遗弃者负有法律上的扶养义务而且具有抚养能力的人。本罪在主观方面表现为故意。

父亲拒不支付抚养费是遗弃罪吗？

父亲拒不支付抚养费不构成遗弃罪。但可以到法院起诉对方支付抚养费。抚养费是父母或其他对未成年人负有抚养义务的人，为未成年人承担的生活、教育等费用。我国法律上的抚养费，是指当这些人不能充分履行或不履行抚养义务时，支付给未成年人的费用。

《中华人民共和国刑法》第二百六十一条对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的，处五年以下有期徒刑、拘役或者管制。