1、不直接抚养子女的一方拒绝支付抚养费的，一般不会构成遗弃罪，直接抚养子女的一方，可以向法院起诉主张抚养费。

2、父母对子女有遗弃行为，情节恶劣的，才会构成遗弃罪。

3、法律依据：

《中华人民共和国刑法》

第二百六十一条【遗弃罪】对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的，处五年以下有期徒刑、拘役或者管制。

《中华人民共和国民法典》

第一千零六十七条【父母的抚养义务和子女的赡养义务】父母不履行抚养义务的，未成年子女或者不能独立生活的成年子女，有要求父母给付抚养费的权利。

成年子女不履行赡养义务的，缺乏劳动能力或者生活困难的父母，有要求成年子女给付赡养费的权利。

一、遗弃罪与虐待罪的界限

1、客体要件不同。遗弃罪侵犯的客体，是家庭成员之间相互扶养的权利义务关系；而虐待罪侵犯的客体则是复杂客体，既侵犯共同生活的家庭成员在家庭生活中享有合法权益，也侵犯了被害人的身体健康。

2、犯罪客观方面不同。遗弃罪的客观方面，表现为对没有独立生活能力的家庭成员，具有扶养义务而拒绝扶养的行为；而虐待罪的客观方面，则表现为经常或连续折磨、摧残家庭成员身心健康的行为。

3、主体要件不同。遗弃罪的主体，必须是对被遗弃者负有法律扶养义务而且具有履行义务能力的人；而虐待罪的主体，必须是在一个家庭内部共同生活的成员。

4、犯罪主观方面不同。两罪在主观方面虽均是故意，但其故意的内容不同。遗弃罪的故意，即行为人明知自己应当履行扶养义务，也有实际履行扶养义务能力而拒绝扶养；而虐待罪的故意是行为人有意识地对被害人进行肉体摧残和精神折磨。

5、犯罪侵犯的对象不同。遗弃罪的犯罪对象，只限于年老、年幼、患病或者其他没有独立生活能力的人；而故意伤害罪的犯罪对象可以是任何人。

对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的，构成遗弃罪。所以，父母不给付抚养费的，一般不构成遗弃罪，子女可以向人民法院起诉，主张给付抚养费。