Как расстаться с коллегой

Ситуация такая(не знаю в то ли сообщество пишу,но очень хочется выговориться)где то год назад закрутился роман с коллегой(Безумная любовь и т.п.)сама в момент начала отношений находилась в стадии развода с мужем(с мужем не жила уже,сейчас официально в разводе),он в гражданском браке,но говорил что с женой не живет(она в другом городе) и ездит видеться раз в месяц ради детей.отлично ладит с моими детьми,во всем поддерживает,всегда рядом и на работе и после нее.

забеременела от него,он рад,уговаривает оставить, до этого уговаривал чтобы с детьми переехала к нему.я вроде согласилась,планы строила и тут узнаю что жена у него уже сильно беременная,скоро рожать. Я сразу на аборт(прошу без тапок,одна троих не потянула бы,младший грудной еще, я работаю с ним няня). И вот теперь не знаю как прекратить с ним все общение тк вместе на работе.он за мной по пятам ходит. Говорит что любит,что со мной быть хочет,что там случайно вышло по пьяни и т.п.Посоветуйте как поступить (работу менять не вариант)