子供の就寝中、飲み会から帰宅した夫が大きな物音を立てるのでビンタしたら思い切り叩き返された

寝かしつけしてる私の横に来て、しつこく話しかけてくるから（小声ではない）、
子供を叱る調子で「うるさい！」とつい頬を叩いたら、思い切り叩き返された上、
子供の寝ているそばで「なんで叩くんだ！」と興奮し、繰り返し怒鳴った。 
2歳児で頻繁な夜泣きもあり、寝かしつけも大変なので、
何度も「静かにして！」と繰り返し言ったが変わらず。 
仕方がないので、「（外に）出てって！」と行ったら、外に出てった。 

1度帰宅し、また出て行ったみたい。 
私はどうすれば良かったんだろうか。 
既婚男性の方、何か意見をいただければ幸いです。