老公曾追求过我的同事，为避免尴尬我要换工作吗？