1920年,霍東閣應新創辦的廣州精武體育會之邀,離開上海,前往廣州任技擊教練。是時,孫中山也定居廣州。孫中山掌握著廣州軍閥陳炯明,陳炯明手下有海軍,溫樹德任海軍司令。溫司令統領著戰艦十餘艘,艦上官兵加陸戰隊、警衛營共一萬多人。
溫樹德早就知道霍元甲和精武體育會的大名,當他得知霍元甲的兒子霍東閣就在廣州精武體育會時,立刻派人去請,希望他能到海軍總部去當技擊教練,教授他的海軍官兵武術,以提高軍隊的戰鬥力。霍東閣欣然應允,於是,便去了海軍總部。
霍東閣初到海軍總部,警衛營有些將士不太服氣,商量好在歡迎儀式上,趁握手之機輪流運足氣力,給霍東閣一個下馬威。霍東閣自然能感覺得到,但沒理會,使對方沒能得逞。霍東閣知道那幾個人很有功夫,他們是袁世緒、孫祥福、王永泰、孫勇、孫懷福、蒲春亮等,這幾個人十分了得,曾趁夜潛入敵軍艦,一戰而奪數艘軍艦。霍東閣愛惜他們,因此沒計較。
哪知,他們並不死心,繼續挑釁,非要見個高低不可。霍東閣明白自己是遇上了硬漢子,不走不打不成交的路子還真不行,便成全了他們。在一次走夜路回家的道上,幾個蒙麵人突然出現,圍攻上來,霍東閣使出真功,將他們一一製服,並使他們現了原形。這些人才真正佩服霍東閣,從此開始唯命是從。
由於海軍官兵上下一心,霍東閣又經驗豐富教授得當,沒多久,便幾乎人人都會打一套拳,或者能練一套兵刃了。海軍司令溫樹德非常高興,在陳炯明和孫中山麵前連連誇耀霍東閣。
孫中山自然十分高興,他表示技擊術早就應該引入軍隊,這樣能大大提高軍人的戰鬥力,他對溫樹德的這一做法特別讚賞。
霍東閣到海軍總部不到一年,突然出現了變故。
那是1922年6月15日的夜間,廣州軍閥陳炯明突然發動政變,令叛軍包圍總統府,並懸賞20萬元刺殺孫中山。在這萬分危急關頭,孫中山和秘書林直勉從側門逃離總統府,混入馬路上的人群中,進入了溫樹德的海軍總部。溫樹德立即安排孫中山上軍艦商量對策。軍艦駛離廣州城後,便有人傳說陳炯明已經用重金收買了溫樹德。誰知傳說竟成了事實,溫樹德為了錢財,果然背叛了孫中山。那一次,孫中山幾乎是死裏逃生。
霍東閣為此事十分懊喪,自己辛辛苦苦教授的官兵,居然背叛了中山先生。回想孫中山對精武事業的大力支持,他隻能仰天長歎,後悔莫及。他決心立刻離開灰暗的廣州城,到南洋去闖一闖。他將自己的想法向妻子說明,哪知妻子卻無論如何都不同意。
霍東閣的妻子是家鄉小南河村人,姓於。於氏隨霍東閣來到廣州,已經吃盡了苦頭,語言不通,習慣不同,也沒個認識的熟人,丈夫天天忙得不著家,連個說話的人都沒有。她早已厭倦了這裏的生活,非常想念家鄉,做夢都是已經上了回家的路。她萬沒想到,丈夫卻要走得更遠,要漂洋過海到什麽南洋去,她哪裏肯依,哭著喊著非要回家。霍東閣萬般無奈,隻好先走一趟天津,把妻子和兒子雅亭送回家。