罗布麻茶对于肝肾有毒副作用，造成一定的损害。因此肝肾功能不全的患者不宜饮用罗布麻茶。
罗布麻茶是凉性的，因此产后还有月经期的女性不适宜喝罗布麻茶，喝了会引起血液淤滞，痛经等症状。
由于是凉性的茶，所以肠胃功能不好的人也不要喝太多罗布麻茶，还有就是体虚的老人。
罗布麻茶有降压的作用，因此低血压的患者最好不要饮用罗布麻茶了。