Amazonの配達が速すぎる

プライム会員なのでお急ぎ便がタダなので必要なときは使ってるが、いまの賃貸マンションは宅配ボックスがあるのでたいていのものは急いでもらう必要はない。
AmazonはAmazonでいろいろセールをやってるのでいつ来ようがどうでもいいのでもたくさん注文している。ひやむぎ600円とか。
配達の人が大変そうなので、そういうのはわざわざお急ぎ便指定を解除して注文している。
ところが、お急ぎ便じゃないのでも結局お急ぎ便扱いになるのか、翌日に配達されてしまう。今日もかなり遅い時間にヤマトの人が持ってきてくれた。配達が遅れたという認識らしく「申し訳ありません」と言いながら。こっちのほうが申し訳ない。。。
明示的に外してるお急ぎ便はお急ぎしないようにしてほしいものである。。。　あるいは日付指定ししてしまうしかないのか。