Vreemdgaan, een onbesproken onderwerp