晚上挖机扰民由生态环境主管部门管理，对方扰民你可以选择报警或者向工程所在地县级以上地方人民政府生态环境主管部门投诉的。

根据《中华人民共和国治安管理处罚法》

第五十八条

违反关于社会生活噪声污染防治的法律规定，制造噪声干扰他人正常生活的，处警告；警告后不改正的，处200元以上500元以下罚款。

根据《中华人民共和国环境噪声污染防治法》

第六十一条

受到环境噪声污染危害的单位和个人，有权要求加害人排除危害；造成损失的，依法赔偿损失。赔偿责任和赔偿金额的纠纷，可以根据当事人的请求，由生态环境主管部门或者其他环境噪声污染防治工作的监督管理部门、机构调解处理；调解不成的，当事人可以向人民法院起诉。当事人也可以直接向人民法院起诉。