用人单位违反劳动合同的责任主要是三方面的，包括民事责任、行政责任以及刑事责任。在不同的违法行为下，所要承担的法律责任是不同的。
1、民事责任
(1)违约责任
劳动合同法只是禁止用人单位与劳动者约定除法律规定的两类违约责任之外的、由劳动者承担责任的违约责任，至于双方约定由用人单位承担的违约责任未做限制。所以，在不违反法律、行政法规的强制性规定的情形下，双方可以约定由用人单位承担的违约责任，用人单位若违反此约定，则应依照合同约定向劳动者支付违约金。
(2)其他法定责任
支付两倍工资：依据《劳动合同法》第八十二条规定，用人单位自用工之日起超过一个月不满一年未与劳动者订立书面劳动合同的，应当向劳动者每月支付二倍的工资。用人单位未依法与劳动者订立无固定期限劳动合同的，自应当订立无固定期限劳动合同之日起向劳动者每月支付二倍的工资。
相关损害赔偿：《劳动合同法》第八十六条、第八十九条规定、第八十条规定、第八十一条、第八十三条、第八十四条规定对此有明确的规定。
违法解除、终止劳动合同赔偿金：依据《劳动合同法》第八十七条规定，用人单位违反本法规定解除或者终止劳动合同的，应当依照法定经济补偿标准的二倍向劳动者支付赔偿金。
2、行政责任
用人单位违反劳动合同法所应承担的行政责任较多，这也是为了保护劳动者的合法权益而设定的。
3、刑事责任
《劳动合同法》第八十八条规定，用人单位有下列情形之一的，构成犯罪的，依法追究刑事责任：
以暴力、威胁或者非法限制人身自由的手段强迫劳动的;违章指挥或者强令冒险作业危及劳动者人身安全的;侮辱、体罚、殴打、非法搜查或者拘禁劳动者的;劳动条件恶劣、环境污染严重，给劳动者身心健康造成严重损害的。
以转移财产、逃匿等方法逃避支付劳动者的劳动报酬或者有能力支付而不支付劳动者的劳动报酬，数额较大，经政府有关部门责令支付仍不支付的，处三年以下有期徒刑或者拘役，并处或者单处罚金;造成严重后果的，处三年以上七年以下有期徒刑，并处罚金。单位犯前款罪的，对单位判处罚金，并对其直接负责的主管人员和其他直接责任人员，依照前款的规定处罚。
