שולחן ערוך אורח חיים סימן קמו סעיף א

שלא לדבר בשעת הקריאה. ובו ד סעיפים:אסור לצאת ולהניח ס"ת כשהוא פתוח אבל בין גברא לגברא שפיר דמי: