红豆西米露可以过夜保存，但是建议尽量不要喝。由于红豆西米露含有糖分，过夜后糖分会发酵产生微生物。虽然这些微生物通常并不会对健康产生直接的影响，但它们会使得饮品变质，口感也会有所不同。所以，建议在制作红豆西米露时尽可能控制好分量，避免剩余过多。