大伯是个倔脾气，他一气之下决定辞职不干。我记得很清楚，有一天大伯回家跟我妈妈说：“三嫂，交代大家一下，我们回家去了！”我妈妈一听有些糊涂：“大哥，回家？这不就是我们的家吗？”大伯有些生气地回答：“三嫂！听不懂啊？我们回老家去啊！”我从来没有见过大伯对我妈妈讲话那么大声过，很显然他当时的心情很不好。那天吃晚饭时，我印象也非常深刻：他们大人一桌，我们小孩子一桌，那天的气氛有些沉闷，我们小孩子就在一旁嘀咕纳闷：大伯究竟是怎么了？

　　我们薛家从来不分家，一向是同进同退的，所以离开上海的时候，我们家包了一节车厢，挂在火车头后面，我还记得我们这些小孩子都非常好奇，而对外面纷乱的时局、对身边心事重重的大人们也毫无体会。我们一大家子人就这样回到了广东乐昌的老家。

　　可是在老家还不到两周，上面又来了新命令：任命薛岳出任广东省政府主席兼保安司令。那时已是1949年初，蒋介石已经下野，上了台的李宗仁也没有能力收拾残局。宋子文、陈诚一再来信苦劝大伯出山，还有广州当地的一些人士上门劝说，大伯无奈之下只好应允。他乘粤汉铁路离开乐昌、南下广州的晚上，乐昌当地舞狮舞龙、燃放鞭炮热烈欢送。可是对于这一次的前途，大伯心里多少是清楚的，在火车上，他对自己的老师说：“这一次是去跳火坑的，前途未卜，还不知道能不能再回家乡。”说罢掉了眼泪，听者也跟着黯然落泪。

　　此时的国民党大势已去，他这个省主席也是当得有责无权，有心无力，孤掌难鸣，身边的人也是各自在为自己打算。1949年10月，解放大军入粤；12月，他转到海口，被任命为海南防卫总司令，实际上麾下已无国民党正规军一兵一卒。大伯派船把原来广东省的6个保安师运到海南，编成了第4军、第63军和第64军，每军各两个师，又利用军舰和飞机在海南构筑了一道“伯陵防线”。据说毛泽东知道薛岳在守海南岛时，还特地嘱咐海南岛的前线将领：“你们遭遇薛伯陵务必持重。”

　　大伯是1950年5月从海南撤退的。因为解放军当时无制空权和制海权，所以他把在海南的部队完整撤退到台湾。其实大伯当初没打算撤到台湾，他准备和蒋介石谈：“你守台湾，我守海南岛。”因为带到海南的，很多都是他自己的人。而且当时海南岛与大陆是隔绝的，琼州海峡又并不是很宽，所以他想以海南为基地，从这里“反攻大陆”。现在还有一些资料说陈济棠与薛岳在海南闹翻了，这是根本不可能的事情，他们俩都是“老广”，从来不会互相扯后腿的，就算是桂系的人见到“老广”，也要“见面三分礼”的。其实大伯最终从海南岛撤出，是美国人的主意，因为美国只能帮助蒋介石协防台湾，所以国民党最终只能放弃海南岛。