相談です

私の家は、私21歳旦那25歳娘5歳の３人家族なんですが、
お互い仕事をしていて朝は
７時半までに出勤。夜は7時半に私が帰宅。旦那は不規則です。
娘はその間保育園に預けています。ちなみに休みは私は土曜日の午後から日曜祝日。旦那は第２、４土曜日、日曜祝日です。

毎朝お弁当二人分を作り帰宅後は夕飯の準備と普通の主婦業をしているんですが、段取りというか手際が悪いのか思っている以上に時間がかかってしまいます。
土曜日の午後買い出しに行き、日曜日は午前中掃除をして午後からはおかずを作り置きしたりしてほとんど動きっぱなしです。
家事は好きだし休みの日は昼寝もできているので私自身は何も問題は無いんですが。。
昨夜、旦那に
『休みの日くらいゆっくりして、バタバタされると落ち着かない。そんなんだったら家にいたくなくなる』
と言われてしまいました。
私はできるだけ後からバタバタしないようにと思ってしているんですが。逆効果だったみたいで。。
娘もまだ小さいので9時半までに寝かせるように前もって準備したりしちゃいます。

何を言いたいのか何をどうしたらいいのかわかりません。
真剣に悩んでるんですが、助けてください