この漫画描かれている本は、アスペルガーについて描かれた本らしいです。
アスペルガー云々無しにしても、帰ろうとする男性の方が正しいと思うんですが…。
確かに会社の勤務時間の中に、男性がこなすべき仕事は終わらせています。

そもそも、「残業がある」ということ自体おかしいんじゃないでしょうか。
仕方なく残業があるのならともかく、「これからまだまだ仕事が山積み!」という状態は変です。
この漫画では、もしかしたら早く帰ろうとする男性が悪いのかもしれませんが、仕事のこなし方的に間違っているのは残業する方だと思います。