按照法律规定，除了以下两种情形之外，用人单位不得与劳动者约定由劳动者承担违约金：

1、用人单位为劳动者提供专项培训费用，对其进行专业技术培训的；

2、对单位负有保密义务劳动者，用人单位可以与该劳动者约定竞业限制条款，劳动者违反竞业限制条款的。所谓竞业限制条款，是指劳动者在解除或者终止劳动合同后，不得到与本单位生产或者经营同类产品、从事同类业务的有竞争关系的其他用人单位工作，也不得自己开业生产或者经营同类产品、从事同类业务。

如果你不属于上述两类人员之一，你所在的单位与你签订的劳动合同中违约金条款就是无效的。

一、竞业限制可以指定竟业单位吗？

竞业限制可指定竟业单位。我国法律规定，竞业限制的人员限于用人单位的高级管理人员、高级技术人员和其他负有保密义务的人员。竞业限制的范围、地域、期限由用人单位与劳动者约定，竞业限制的约定不得违反法律、法规的规定。在解除或者终止劳动合同后，前款规定的人员到与本单位生产或者经营同类产品、从事同类业务的有竞争关系的其他用人单位，或者自己开业生产或者经营同类产品、从事同类业务的竞业限制期限，不得超过二年。

二、竞业协议的法律问题

竞业限制的人员限于用人单位的高级管理人员、高级技术人员和其他知悉用人单位商业秘密的人员。竞业限制的范围、地域、期限由用人单位与劳动者约定，竞业限制的约定不得违反法律、法规的规定。在解除或者终止劳动合同后，限制前款规定的人员到与本单位生产或者经营同类产品、业务的有竞争关系的其他用人单位，或者自己开业生产或者经营与本单位有竞争关系的同类产品、业务的期限不得超过二年。用人单位可以与知悉其商业秘密的劳动者在劳动合同中约定，在劳动合同终止或者解除后的一定期限内，劳动者不得到生产与本单位同类产品或者经营同类业务的有竞争关系的其他用人单位任职，也不得自己开业生产或者经营与用人单位有竞争关系的同类产品或者业务。