芋泥麻薯盒子应该冷藏保存，以保持其口感和风味，并且可以延长其保质期。

冷藏后的芋泥麻薯盒子可以在2-3天内食用完毕，如需长时间保存，可以考虑将其冷冻保存。

需要注意的是，在冷藏过程中，芋泥麻薯盒子可能会变得硬和干燥，可以在食用前将其取出回温或者加热，以保持其口感和风味。

另外，如果发现芋泥麻薯盒子有异味或者变质现象，应立即停止食用。