1. 经常接触铅的人：牛奶中的乳糖可促使铅在人体内吸收积蓄，容易引起铅中毒，因此，经常接触铅的人不宜饮用牛奶，可以改饮酸牛奶，因为酸牛奶中乳糖极少，多已变成了乳酸。
2. 乳糖不耐者：有些人的体内严重缺乏乳糖酶，因而使摄入人体内的牛奶中的乳糖无法转化为半乳糖和葡萄糖供小肠吸收利用，而是直接进入大肠，使肠腔渗透压升高，使大肠粘膜吸入大量水分，此外，乳糖在肠内经细菌发酵可产生乳酸，使肠道PH值下降到6以下，从而刺激大肠，造成腹胀、腹痛、排气和腹泻等症状。
3. 牛奶过敏者：有人喝牛奶后会出现腹痛、腹泻等症状，个别严重过敏的人，甚至会出现鼻炎、哮喘或荨麻疹等。