主要有以下禁忌：
体质虚寒者适量吃
中医认为其味甘、淡，性偏凉，体质虚寒者食用后会加剧体内的寒气，导致原本的虚寒症状加重，如：手足冰凉、面色苍白、倦怠乏力、大便溏薄等。
津枯便秘者慎食
津枯便秘主要是指自身胃液、唾液等津液亏虚而引起的大便干结、便秘等症状；而薏米具有较好的利水作用，津枯便秘者食用后更会加剧其利水之效，会导致便秘症状更为严重。
孕妇忌食
薏米性寒，孕妇体质虚脱，适量后可能会加重肠胃负担，其次就是薏米某些营养成分具有一定的兴奋子宫平滑肌的作用，孕妇吃后促使子宫收缩，对胎儿的健康造成威胁，因此孕妇是不宜吃薏米的。