关于贯彻执行《中华人民共和国劳动法》若干问题的意见第二十九条规定，劳动者被依法追究刑事责任的，用人单位可依据劳动法第25条解除合同。“被依法追究刑事责任”包括：被人民检察院免于起诉的、被人民法院判处处罚的、被人民法院依据刑法第三十二条免于刑事处分的。因此，单位可以和你解除劳动关系。