Вариантов много.
Можно обратиться к семейному психологу.
Можно постараться через проговаривание чувств донести до него свои потребности.
Можно выстроить границы и не допускать претензий в свой адрес.
Ситуация слишком расплывчата, сложно сказать однозначно.