Я думаю, вы очень не уверены в себе. Поэтому и не можете расслабиться, а только думаете о том, как выглядите в глазах окружающих и что они думают о вас. Вы не должны никого развлекать. Если человек вам подходит, то с ним сразу будет легко, непринуждённо и приятно. Если нет - то будет так, как вы описали - невыносимое молчание. И не надо под них подстраиваться.