桔皮可以过夜泡水喝，但是建议不要过夜。桔皮的外层含有苦味物质和挥发油，过夜后容易氧化，增加苦味，降低口感，并且挥发油也会逐渐减少，影响香味。如果过夜后发现有异味或者变质，请不要饮用。

至于是否有毒，桔皮本身是食用安全的，但是由于常用农药等处理，可能存在残留物，因此建议购买有机的或者经过认证的桔皮。如果有过敏体质或者身体不适，请停止饮用桔皮泡水。