Trước khi trở thành dinh thự của vua Bảo Đại, Bạch Dinh còn gắn liền với vị vua thứ 10 của triều Nguyễn là Thành Thái, sau đó được dùng làm nơi nghỉ mát cho Toàn quyền Đông Dương, thời Pháp thuộc
Cà phê, quán nhậu thi nhau chiếm dụng di tích Bạch Dinh