Ну вообще всегда надо думать перед тем, как сказать. Будут ли приятны человеку эти слова, какой смысл вы в них вкладываете и как может понять фразу он?
Очень многие люди не умеют спорить конструктивно и вместо выражения того, что их не устраивает в данной ситуации, начинают нападать, обвинять, стараться сделать неприятное человеку, пусть даже и бессознательно. И зачастую у них это получается.
Только вы можете знать, например, каким человеком был бывший - возможно, он прекрасно готовил, но в то же время имел массу отрицательных качеств? Вашему нынешнему супругу это неизвестно и возникают мысли типа "почему тогда ты со мной, а не с бывшим сейчас"?
Никогда не стоит пытаться задеть близкого человека, а стоит разъяснить, что именно вас не устраивает. Или, если вы не чувствуете в себе способности это сделать, скажите: "Всё, что я сейчас скажу, не воспринимай в свою сторону, я выражу эмоции, а потом уже будем общаться конструктивно".
Конечно, тяжело обговаривать такие моменты, так как у нас это пока что не принято, но если заданы некие правила общения, то всем будет со временем легче.