白茶属于比较温和的茶类，因此一般来说适合大部分人群，但以下人群应慎重喝白茶或避免饮用：

1. 阳虚体质的人：阳虚体质的人体内阳气不足，而白茶是属于寒凉性质的茶类，会加重身体阳气不足的情况。

2. 脾胃虚寒的人：白茶寒凉，不适合脾胃虚寒的人饮用，否则会导致腹泻、腹痛等症状。

3. 怀孕、哺乳期妇女：白茶中含有咖啡因和茶碱等成分，过量饮用会对胎儿或新生儿产生影响，应避免或控制饮用量。

4. 孕妇：白茶中含有茶多酚等物质，过多饮用会影响孕妇的吸收和利尿。

5. 年幼儿童：白茶中含有咖啡因等成分，孩子的身体无法有效代谢和排泄，容易导致神经负荷过大，因此应避免给孩子饮用。

总之，每个人的体质不同，饮茶时应因人而异，不适合饮用白茶的人应选择其他适合自己体质的茶品。