清洗桶装水器中的水垢确实需要采用合适的方法，以确保水质的纯净和设备的正常使用。你提到的四种方法都是常见且有效的除垢方式。

食用柠檬酸除垢剂因其强酸性，可以迅速分解水垢，但使用时需要注意稀释比例和浸泡时间，避免对桶装水器造成腐蚀。白醋除垢则利用醋酸的酸性，与水垢发生化学反应，达到除垢的目的。白醋是家中常见的调料，因此这种方法简单易行。

小苏打除垢则是利用小苏打的碱性，与水垢中的酸性物质发生中和反应，从而使水垢溶解。这种方法相对温和，对设备损伤较小。牙膏除垢则是利用牙膏中的摩擦剂，通过物理摩擦的方式去除水垢。这种方法虽然效果可能不如其他化学方法明显，但适用于轻微水垢的清理，且对设备无损伤。无论选择哪种方法，都需要注意安全，避免使用过于暴力或危险的方式。清洗完毕后，务必用清水将桶装水器冲洗干净，确保无残留物。此外，为了保持水质的纯净和设备的正常使用，建议定期清洗桶装水器，并避免将硬物或尖锐物品放入其中，以免划伤内壁导致水垢更容易附着。