שולחן ערוך אורח חיים סימן ג סעיף ו

וכן אסור לישן בין מזרח למערב אם אשתו עמו ונכון להזהר אפילו כשאין אשתו עמו: