Боритесь дальше как раньше с его хамством убеждением. Только говорите ему прямо, без намёков и сразу на месте, что эта его шутка не смешная, а глупая. Если он так "шутит" при посторонних, то и отвечать ему нужно при посторонних. При этом ваш тон самое главное - спокойным тоном стыдить его как ребёнка. Может ещё и удасться вам его под себя перевоспитать, капля за каплей, чтобы дошло наконец, что смешно, а что обидно. Капля ведь и камень точит. Но всё же старайтесь не превышать барьер его терпимости к критике при этом и соблюдайте меры предосторожности, чтобы не доводить до скандалов (и не не дай бог рукоприкладства). Реакция хама часто бывает непредсказуема.