根据相关法律的规定，以下两种情形，用人单位可与劳动者约定由劳动者承担违约金，如下：

1、用人单位为劳动者提供专项培训费用，对其进行专业技术培训的，可以与该劳动者订立协议，约定服务期。劳动者违反服务期约定的，应当按照约定向用人单位支付违约金。

2、用人单位与劳动者可以在劳动合同中约定保守用人单位的商业秘密和与知识产权相关的保密事项。劳动者违反竞业限制约定的，应当按照约定向用人单位支付违约金。