日本時代人們曾在公會堂內參加崁津吟社活動、借閱圖書、參加國語講習等。而包含公會堂、神社、涼亭、崖線、深潭及防空洞在內的的大溪公園一帶，也是大溪孩童重要的生活場景。
老蔣還沒有搬進公會堂以前，那個時候小孩子都可以自由進去玩。我常常下課沒有事就跑到裡面去玩，發現裡面有一塊石頭，那塊石頭的造型大概是一個小孩子的高度。很自然的石頭，洞很小，那個時候我還是幼稚園，竟然可以從這個洞裡面穿過去，在那邊躲迷藏。（楊國斌口述/大溪公會堂暨蔣公行館展示研究及規劃設計案結案報告書）
在戰爭剛結束、蔣中正總統還未遷至大溪使用公會堂的過渡期，林清圖就讀的大溪初中曾借用公會堂空間上課，學生甚至曾利用該處發動罷課。
我們曾經有在那邊罷課，當時就是有一個學長，在掃地時拿的掃把，裝著好像關公耍刀……結果學校要記那個同學一個大過，我們都為他抱不平，認為他沒有什麼惡意，只是好玩，這個學生就到公會堂去那邊躲起來，我們大家就不到教室上課，就集體地到公會堂罷課。（林清圖口述/大溪公會堂暨蔣公行館展示研究及規劃設計案結案報告書）
上個地點 日本時代公會堂
下個地點 戰後的總統行館
