我跟一个有家庭的男人相爱，导致这个男人想跟他老婆离婚。我虽然不打算跟他结婚，而且已离开那男人。但是他老婆现在到处放出风声要打我，并且来找过我一次只是没找到。我，我现在已经到了另外一个城市，离开那男人。他老婆现在如果找人打了我，我能怎么样用法律保护自己。她现在到处说我坏话，我可以怎么样制止。