白公馆原是白驹修建的别墅。白驹是四川广安人，在四川军阀混战时期，先后任熊克武部、杨森部团长，旅长，师长等职。1924年被北洋政府授予"将军"名衔，后曾入国名党中央军官学校高等教育班第三期学习。