Надо искать истоки этого поведения(зрите в корень). Какая у него семья, родители? Возможно, причина - эмоциональная травма нанесенная ему в детстве.
Личность мужчины описанная в вопросе- эмоционально незрелая, он неспособен принимать и отдавать , не способен на взаимность, это тупиковая ветвь -по моему мнению, но оно может быть и ошибочным. Хорошо, что вы заметили такую черту характера этого мужчины.
Возможно, поможет знание о его семье, отношениях родителей между собой, их отношение к своему сыну.Ваш мужчина своим поведением может воспроизводит модель поведения своего отца. То есть модель взаимоотношений в его семье с родителями теперь активно проецируется на ваши с уже этим мужчиной отношения... Представьте, что у вас родились общие дети - будут ли они счастливы, как вы, как их папа?То, что человек представляет из себя во взрослой жизни является результатом совокупности самых разных факторов, повлиявших на его личность и его судьбу с раннего детства.
Результаты такой совокупности могут быть подвержены изменению. Но какой ценой? И хватит ли времени и сил у женщины на исправление его искажений, недостатков?
Иногда стоит подумать- как и почему женщина выбирает именно такого мужчину в качестве супруга, спутника. В психологи принято считать, что женщина может осуществить выбор такого спутника подсознательно. В таком случае мужчина может походить на ее отца. Например,повториться ситуация когда женщина занимает в семье положение жертвы ( как у ее матери). Если разорвать эту порочную цепочку, посмотреть на свой "выбор" по-новому, переоценить ситуацию, в которой находиться женщина, изменить отношение к себе, то и спутник у вас появиться соответствующий. И будет вам счастье.
p.s.
Насчет гармонии в отношениях, исходя из поставленного вопроса - ее не видно. Также, можно подумать-продолжать ли их? И, к примеру, начать создавать гармонию внутри себя, постепенно расширяя ее границы - создавать гармонию вокруг себя. Есть поговорка : "Что посеешь-то и пожнешь". Подобное притянет подобное... Как вариант.