鼓浪嶼，一個美麗而迷人的海島，二十世紀初幾成為黃氏家族的天下。1919年，童年的黃萱隨父來到鼓浪嶼定居，枕著鼓浪嶼的濤聲，和著終日縈繞不斷的音樂聲，過著富足的生活。其父黃奕住，福建南安縣人，是二十世紀初印度尼西亞赫赫有名的華僑富商。黃奕住一生的奮斗史，可以說是海外華人艱苦拼搏發家致富的縮影。他18歲從福建孤身走南洋再轉至中爪哇，用了三十年時間成為三寶壟市的華人巨富，名字載入《世界商業名人錄》。

第一次世界大戰結束后，荷蘭殖民政府欲用減免稅率相誘，讓黃奕住入荷蘭籍，而具有強烈愛國意識的黃奕住寧愿放棄在印尼打下的大好基礎，在1919年結束了印尼的大部分生意，將價值三、四千萬銀元的資金匯回國內，他選定了全國著名，風光旖旎的鼓浪嶼作為固定居所，成了鼓浪嶼的首富，1910年出生的女兒黃萱時年九歲。

回閩后的黃奕住繼續在銀行、鐵路及廈門市政建設、房地建筑等方面投資，一躍成為廈門首富。黃萱從小就生活在這樣的家庭里，過著富裕的生活。從懂事起，她先后在鼓浪嶼小學、廈門女子師范學校念書，但傳統意識很濃的黃奕住不想再讓十多歲的女兒出外拋頭露面，便以在家中設私塾的方式繼續讓女兒接受國學教育。他聘請四位老師教授女兒國文、英文、音樂等。其中國文老師名叫鄢耀樞，號鐵香，是一個在當年略有名氣的晚清舉人。鄢舉人最大的功勞是令深閨少女從此對線裝書產生了濃厚的興趣，并改變了她的一生。其時，黃奕住可以捐贈十數萬元給廈門大學等學校，卻堅決反對女兒渡海念書。在鼓浪嶼小島的別墅，黃萱猶能隱約望見對岸叢林中井然的廈大校舍，卻只能徒呼奈何。這件事成為黃萱一生的遺憾。