1、消化功能不好的人
如果胃肠不好的人，或者患有消化性溃疡的人，再吃粗粮无疑是自找苦吃，粗粮里面富含纤维素，对人体肠胃有一定的刺激，但对健康人来说是有益处的，对严重胃炎或胃酸过多的人来说，加重肠胃的负担在所难免，更有甚者可能会产生胃胀的情况，而且，如果是患有肝硬化或胃溃疡的人吃了粗粮，还可能会诱发出血。另外，一些长期缺乏钙、铁等元素的人群，也最好不要多吃粗粮食物，因为粗粮中含有丰富的植酸和食物纤维，这些会与钙等物质结合形成沉淀，以致阻碍人体对矿物质的吸收，建议有肠胃疾病的人，不要吃太多荞麦类和大豆类食品。
2、营养不良、免疫力低下的人
有专家表示，粗粮会让人吸收营养的速度放缓，这就说明，粗粮并不适合本身就营养不良的人群；还有，因为粗粮富含纤维素，这会降低人体对蛋白质和脂肪等营养成分的吸收，因此对免疫力低下的人也是不适合多吃的。另外，贫血、少钙的人也不建议吃粗粮，粗粮谷物的植酸、草酸含量都比较高，这会抑制钙质，尤其是铁质的吸收。
3、处于生长发育阶段的青少年
处于成长发育阶段的青少年，正是需要大量营养物质的时候，常吃粗粮容易阻碍营养物质的吸收，甚至会影响到生殖能力，建议青少年每周吃粗粮不超过3次，每次也不要超过50克。
4、3岁以下儿童不宜过食粗粮
儿童的消化吸收功能等都还未完全发育好，过食粗粮容易造成消化不良，另外，粗粮对儿童身体对钙、铁、锌等矿物质的消化吸收也会产生一定的影响，这对孩子的生长发育极其不利。如果一定要给孩子吃点粗粮的话，可以选择“粗粮细做”的食物，比如加工得很细的玉米面熬粥，但要注意每周给孩子吃粗粮的次数不要超过两次，且每次的量也要控制在25克左右。
5、老年人不宜过食粗粮
老年人机体各方面的功能都处于向下趋势，当然也包括代谢能力，以及消化系统的调节适应能力也有所下降，长期食用粗粮则会阻碍老年人的蛋白质补充，自然就会造成脂肪、微量元素等的摄入量也会相应减少，就容易导致脏器功能、造血功能等受到影响。
6、其他疾病
比如肾脏患者要吃精致的白米；比如糖尿病人要控制淀粉糖类的摄入，即使吃五谷杂粮，也要控制一个量；比如痛风病人过食豆类，会引起尿酸增高。