用人单位安排加班劳动者可以拒绝，知会主管即可。根据《劳动法》第四十一条规定，用人单位因为生产经营工作需要，安排劳动者加班，应当与工会和劳动者协商，且每天不超过3小时，每月不超过36小时，并应依法支付加班工资。劳动者有权拒绝加班，知会主管或者安排加班的管理人员即可。用人单位安排加班，劳动者拒绝是依法行使自己的权利，用人单位不得因此对劳动者进行处罚。但用人单位按照《劳动法》第四十二条规定安排加班的，劳动者不得拒绝。《劳动法》第四十一条用人单位由于生产经营需要，经与工会和劳动者协商后可以延长工作时间，一般每日不得超过1小时;因特殊原因需要延长工作时间的在保障劳动者身体健康的条件下延长工作时间每日不得超过3小时，但是每月不得超过36小时。第四十二条有下列情形之一的，延长工作时间不受本法第四十一条规定的限制：

(一)发生自然灾害、事故或者因其他原因，威胁劳动者生命健康和财产安全，需要紧急处理的;

(二)生产设备、交通运输线路、公共设施发生故障，影响生产和公众利益，必须及时抢修的;

(三)法律、行政法规规定的其他情形。第四十四条有下列情形之一的，用人单位应当按照下列标准支付高于劳动者正常工作时间工资的工资报酬：

(一)安排劳动者延长时间的，支付不低于工资的百分之一百五十的工资报酬;

(二)休息日安排劳动者工作又不能安排补休的，支付不低于工资的百分之二百的工资报酬;

(三)法定休假日安排劳动者工作的，支付不低于工资的百分之三百的工资报酬。国务院《劳动保障监察条例》第二十五条用人单位违反劳动保障法律、法规或者规章延长劳动者工作时间的，由劳动保障行政部门给予警告，责令限期改正，并可以按照受侵害的劳动者每人100元以上500元以下的标准计算，处以罚款。