红豆薏米茶颜色很黄是色素吗？

不是。

正常情况下泡出来的红豆薏米茶应该是浅红色的，因为红豆是深红色的，薏米是白色的，两者泡饮出来的颜色即为浅红色，但如果红豆放的少，颜色将更淡一些，如果出现很黄的红豆薏米茶，一方面可能是添加了一些其他的配料，如：菊花等颜色偏黄的材料；另一方面很可能是红豆薏米茶过期变质的表现，可以闻一闻其中有无异味，如带有异味的话，说明是变质的现象，应尽快扔掉，以防误食，对健康不利。