想要变更抱养小孩的监护人，可由其所在单位或者住所地的居民委员会、村民委员会在近亲属中指定。对指定不服的也可以提起诉讼，由人民法院裁决。根据法律规定，监护人有下列情形之一的，人民法院根据有关个人或者组织的申请，撤销其监护人资格，安排必要的临时监护措施，并按照最有利于被监护人的原则依法指定监护人：（一）实施严重损害被监护人身心健康的行为；（二）怠于履行监护职责，或者无法履行监护职责且拒绝将监护职责部分或者全部委托给他人，导致被监护人处于危困状态；（三）实施严重侵害被监护人合法权益的其他行为。

《民法典》27条关于未成年人的监护人的规定

第二十七条【未成年人的监护人及其监护顺序】父母是未成年子女的监护人。

未成年人的父母已经死亡或者没有监护能力的，由下列有监护能力的人按顺序担任监护人：

（一）、祖父母、外祖父母；

（二）、兄、姐；

（三）、其他愿意担任监护人的个人或者组织，但是须经未成年人住所地的居民委员会、村民委员会或者民政部门同意。

《中华人民共和国民法典》

第二十七条父母是未成年子女的监护人。

未成年人的父母已经死亡或者没有监护能力的，由下列有监护能力的人按顺序担任监护人：

（一）祖父母、外祖父母；

（二）兄、姐；

（三）其他愿意担任监护人的个人或者组织，但是须经未成年人住所地的居民委员会、村民委员会或者民政部门同意。