岳飞将周侗传给他的少林武术运用到战场上,久经战阵,逐渐形成了自身武艺的风格特征和技术特点,后人便称他传下来的武艺为岳家拳。岳震、岳霆、岳霖继承了父亲的武艺并将它传授给后人,岳家拳便一直在岳飞的后裔中流传。另外,跟随岳飞征战的随从,例如张保也将岳家拳传给了后人。他们的后裔也将这门武学传给值得托付的人。
清嘉庆年间,香山员峰村人、广东少林弟子胡惠乾之孙胡连观在广州结识了朝廷派驻广州的山东沥城籍武官高昭明。精通岳家拳的高将军便将它传授给胡连观。胡连观再将岳家拳传给儿子胡润,胡润传给自己的十三个子女。期间,岳家拳只在胡氏家族内传承,直至民国初年,大名鼎鼎的胡十二除了教儿子胡道兴,还选择良材将这门武艺对外传授,有据可考者,有张溪村人蔡毓球和石岐镇人汪伟达。