白崇禧的祖先可能是移居中国的阿拉伯人，祖居于南京一带。后来移居广西，原本是世代书香门第，父亲白志书弃文从商，在桂林开永泰林店经营粮油，让白家有了殷实的家境。