На будущее: либо сразу честно говорите "нет", либо, накрайняк, "ой, как неожиданно, мне надо подумать"...
Он сейчас обрадован, всерьёз считает, что у него уже началась новая веха в жизни, что вы его искренне любите, строит планы и тд, и даже не подозревает, какая душевная боль ему предстоит в самое ближайшее время. И всё из-за вашей трусости.
И, внимание, вопрос: зачем вам продолжать с ним отношения, если вы его не любите и не хотите с ним семью?)