Я не часто еду к отцу. Что мне делать?

Здравствуйте.Я не часто еду к отцу.Родители в разводе.Я могу с папой сходить в кино,в боулинг,на шашлыки.Но к самому отцу ехать не очень хочется.Не знаю почему.Такое чувство что что-то не успею.Вчера отец сказал что я еду к ним только ради подарков.Ведь последний раз я к нему ездил на новый год.Но я еду не из-за подарков а из-за того что если я не поеду это будет неприлично.И с днём рождения такая же история.Когда у меня он спрашивает поеду ли я к нему на выходные,то я говорю что не знаю.Хотя на самом деле знаю что не поеду.Почему-то не могу сразу сказать.Вообщем,что делать в данном случае?