1.孕妇：孕妇需要特别小心饮食，任何植物性的茶饮都需要少量饮用，而桂花茶则慎重为佳。

2.服用某些药物的人：桂花茶中含有丰富的营养成分，这些成分与某些药物有相互作用，影响药效。比如减肥或降血脂的药物，和桂花茶中的糖分和蜜需要慎重考虑。

3.胃肠疾病患者：桂花茶含有挥发性油脂，具有一定的刺激性，对已经受到刺激的胃肠黏膜会产生不适。所以胃肠疾病患者尽量少喝。

4.过敏体质的人：桂花茶可口可思，但是不是每个人在饮用后都适得其所。个别人对桂花花粉过敏，或者体质敏感不适合饮用。

5.经常头晕或低血糖的人：桂花茶有促进血液循环以及提高血糖的作用，但这对于低血糖和血压偏低的人来说却并不是好事情。如果经常头晕或低血糖，就不建议饮用桂花茶。