カテゴリ単位で表示日時の設定はできますか？

できます。

【管理画面での設定】
① [商品管理]-[カテゴリ一覧]から表示日時を設定したいカテゴリをタップします

② 「表示する日時設定」の[＋表示する時間帯を追加]をタップします

③ 日時を指定し、[保存する]をタップします

祝日などの特別日の表示設定も可能です。「特別日カレンダー」の設定方法は以下をご参照ください。
（関連記事）祝日や連休などに、特定の商品（またはカテゴリ、放題）を表示・非表示することはできますか？