Как человек находящийся по другую сторону барьера, причем в настоящее время, скорее всего Вы его действительно просто "пугаете", наверняка при каждой встрече пытаетесь образумить, повлиять на увеличение частоты посещения сына, но вполне возможно что он просто Вас не желает видеть, тут много про это уже написали, постарайтесь вместо слов "приходи чаще" просто промолчать, посмотрите его реакцию. Мне например мать моего ребенка даже издали видеть неохото, но приезжая к ребенку я просто вынужден с ней общаться, кстати такое общение для Вашего ребенка, тоже ничем хорошим не отзовется, может действительно проще не встречаться отцу с сыном, чем через скандалы и разборки.
Я например после 8-го марта которое закончилось опять на глазах у ребенка "Ледяным побоищем" принял решение больше не показываться в том доме, сердце кровью обливается, но так будет лучше прежде всего моему ребенку и пусть для дочки я буду последним м@dakoм, но нервы ей сохраню, во всяком случае избавлю от процесса просмотра маминых истерик и драк по отношению к отцу.

пы сы: женщин ни когда не бил, поэтому хожу весь изцарапаный после международного женского дня,

так что уважаемые дамы в себе тоже причины ищите