自幼過繼給劉家良、劉家榮之父劉湛,由于劉湛是洪拳名家林世榮(師承黃飛鴻)的弟子,劉家輝在8歲時(shí)拜劉湛為師(但是實(shí)際上大多是受劉家良的教導(dǎo)),開始接受嚴(yán)格的正統(tǒng)武術(shù)訓(xùn)練。1971年,中學(xué)畢業(yè)后,劉家輝在日本公司當(dāng)辦公室助理,之后在朋友介紹下到連卡佛任月薪五百元的會(huì)計(jì)員,期間他繼續(xù)到武館做助教,幫忙教導(dǎo)師弟妹。他的平凡白領(lǐng)生活,一做便兩年,直到一天亦師亦友的劉家良,邀請(qǐng)他拍攝執(zhí)導(dǎo)的電影,出于對(duì)對(duì)方的尊重,他二話不說便答應(yīng)了。