放課後デイサービスについて

いつもお世話になります。
長文になりますが、悩みあるので聞いて下さい。

今息子は放課後デイサービスを２か所通っています。（今週からさらに個別療育を週１回追加）
メインのデイは低学年用の学童に近い感じで、みんなで遊んだりお買いものをしたり楽しく過ごしています。
個別訓練の時間もあります。
外出も多いし、無料・有料イベントも多く、いろんな経験ができるし、本人も喜んで通っています。
ここは２歳から小学３年生くらいを対象にした内容だと聞いています。
こちらは何の問題もありません。

土曜日はそこと別のデイに通っています。
こちらが質問したいデイです。
朝９時から昼２時まで、土曜日は送迎がないけれど、給食はあります。
そこは就労支援やグループホーム等の運営もしていて、障碍者の生活訓練や就労訓練のノウハウと経験があります。

私としては本当はこのデイは高学年からでも良かったかなと思ったのですが、高学年になって楽しいデイから急に変更ができるか心配で、１年生から週１回くらい通って慣れさせた方がいいのかなと思って、４月の入学時からお願いしました。
けれどやはり厳しくて、本人が嫌がっています。
昨日は「先生から、家に帰りなさい。」と言われた、と私に言いました。
「ふざけてたんじゃないの？」と聞いたけど、本人は「ふざけてない。」と。
このことについては、今日の午後に施設に電話する予定です。（午後でないと担当がいない恐れがあり）

夏にも「行きたくない」発言があり、とりあえず３月までは頑張ろうと本人には言ってきました。
２年生から平日に週１回（３時半から５時）に減らそうかな、というのは施設には伝えました。
その時点で、息子の担当が変わりました。
私としては担当者のせいではなく、施設の課題設定が厳しいので、この子が嫌になっていると思っていましたので、担当を変えなくてもよかったのですが。

例えば課題は口頭でなくてメモだけ渡されるのですが、あらかじめ用意された道具をわざと足りないようにわたされ、課題を始める前にそれに気づいて聞いてこなかったと言われました。
しかし息子はその時６歳半に満たない自閉症の子どもで、先生から道具をわたされたら足りるようにしてくれているはずと思うだろうし、それでも課題の途中で気づいたらよしとしてくれないと、見ただけでこれが足りないと把握し、本人の苦手な報告まで求められるのは、厳しすぎるのではないかと私は思いました。

その他は皿ふき、洗濯物たたみ、そうじ（ほうき、雑巾で机をふく）等もしていました。
それはいいんですけど。
他はある日のスケジュールを見せてくれた時は、ダンスと書いていたので、そういう時間もあるみたいです。
学習もしているようです。
一度国語のプリントを見せてもらいました。
唯一ハロウィンパーティの時だけ「楽しかった。」と息子は言っていました。

で本題の質問ですが、来年から平日週１で時間を減らして続けるか、一度やめて小学４年生になって再チャレンジするかどうか、迷っているところです。
一度やめてしまうと、高学年で戻れるのか。
その頃反抗期で言うことを聞いてくれなくなってしまうのでは、という心配があります。
かといって無理に続けさせるのもどうかと、私も心苦しいです。

習い事ならこんなに悩まずにやめさせますが、療育だし、この施設でしていることは厳しいとしても、将来仕事をする上ではできなくてはならないことを教えており、息子が就労することを目標にしている私としては、完全にやめる決断もできません。
ですので、皆様の意見をお聞きしたいです。
よろしくお願いします。

追記）
夕方、デイの責任者の方から電話があって、「家に帰りなさい。」とは言ってないそうです。
この前はいつもよりボーっとした感じはあって、注意したのは給食の時に皆が座っているのに、1人だけお盆を持って片付けようとして、「どうしたの？」と聞かれて返事ができず固まったと聞きました。
他は特に注意することはなかったので、誰かの会話を勘違いして聞いたのでは？という話でした。
別のメインのデイではすごくよくしゃべっているらしいし、この前個別療育のデイでは、若干なれなれしいくらいしゃべっていたので、このデイと小学校で時々固まるという話にとまどいがあります。
今日は電話だったので言えなかったけど、息子は２月いっぱいで辞めると言っているので、今度行った時に話をしてみようと思います。
たぶん引き留められそうなので、断るのが下手な私にはうまくできるか自信がないです。
相手を傷つけずうまく断る方法も教えていただけると助かります。
よろしくお願いします。