遗赠抚养协议甲方与乙方签订遗赠抚养协…

遗赠抚养协议甲方与乙方签订遗赠抚养协议，根据协议规定里面有一条，乙方如果单方面撕毁协议离开甲方，应向甲方赔偿2万的保证金，现在乙方和甲方相处时间不长，但双方有矛盾，乙方也没用甲方任何经济，这种情况乙方想离开，还应向甲方赔偿2万吗