需要负责任。

《劳动合同法》第三十九条

劳动者有下列情形之一的，用人单位可以解除劳动合同：

(一)在试用期间被证明不符合录用条件的;

(二)严重违反用人单位的规章制度的;

(三)严重失职，营私舞弊，给用人单位造成重大损害的;

(四)劳动者同时与其他用人单位建立劳动关系，对完成本单位的工作任务造成严重影响，或者经用人单位提出，拒不改正的;

(五)因本法第二十六条第一款第一项规定的情形致使劳动合同无效的;

(六)被依法追究刑事责任的。

《劳动合同法》第39条第2项规定，劳动者严重违反用人单位的规章制度的，用人单位可以解除劳动合同。——重要前提是，用人单位的规章制度必须合法有效。表现在：

(1)规章制度的内容必须符合法律、法规的规定;

(2)规章制度必须通过民主程序制定，并且已经向劳动者公示。

只有符合这两个条件，用人单位才可依据规章制度解除劳动合同。结合上述，用人单位应当根据劳动法律法规所规定的限度和本单位的客观情况在规章制度中予以明确，并需要做到公平合理。

《劳动合同法》第五条

用人单位在制定、修改或者决定有关劳动报酬、工作时间、休息休假、劳动安全卫生、保险福利、职工培训、劳动纪律以及劳动定额管理等直接涉及劳动者切身利益的规章制度或者重大事项时，应当经职工代表大会或者全体职工讨论，提出方案和意见，与工会或者职工代表平等协商确定。

在规章制度和重大事项决定实施过程中，工会或者职工认为不适当的，有权向用人单位提出，通过协商予以修改完善。

用人单位应当将直接涉及劳动者切身利益的规章制度和重大事项决定公示，或者告知劳动者。

《最高人民法院关于审理劳动争议案件适用法律若干问题的解释》第十三条规定，因用人单位作出的开除、除名、辞退、解除劳动合同、减少劳动报酬、计算劳动者工作年限等决定而发生的劳动争议，用人单位负举证责任。

虽然擅离职守在法律上并没有明确的规定，可以在用人制度上都有明确规定。如果如果给用人单位带来严重的损失，那么需要按照情节承担刑事责任，严重的情况可以进行坐牢。所以擅离职守是不是大事，具体要根据有没有给单位造成损失为主。