Конечно ему будет больно, вы же изначально не договаривались на такие отношения, в которых допустимы измены, но если вы попробуете с ним в открытую поговорить о том, что вам не хочется с ним секса, это будет менее больно, чем новость об измене.
Может получится что-то придумать вместе, может в вас еще можно всколыхнуть влечение к нему ухаживаниями с его стороны, цветы, еще какими-либо проявлениями нежности к вам, может вам нужно просто отдохнуть одной,съездить на море, перезагрузиться, часто бывает когда одна и та же обстановка, или бытовуха угнетает, соскучиться успеете заодно может.
Если он не захочет сам ничего делать, то лучше уж расстаться , чем быть с человеком, которому все равно на вас