大宝(梁家仁)和小宝(元彪)在镇上无依无靠，哥俩功夫平平，时常混迹于市井间，凭点滑头小骗术过着有上顿没下顿的糊口日子。 

话说这日，二人来赌场捞偏门未遂，被人识破遭一顿海扁。二人求饶得以脱身，来酒馆混饭又遇得一位慈颜善目的外乡人(刘家荣)，哥俩再施行骗伎俩，反被其捉弄。二人不服遂与之动武，出手后方知遇上了高人。被打得鼻青脸肿的哥俩迅速改变战略，腆起脸皮陪着讪笑，:D:D死死缠住外乡人拜师学艺。殊不知江湖险恶，这个表面祥和的师傅实乃衙门通缉多时的江湖要犯——贾午刀。

贾“师傅”收了两个便宜徒弟并传授独门功夫，自然有其打算。果不其然，一日，被其出卖过的另两江湖兄弟(李海生、王光裕)前来寻仇，贾午刀师徒三人联手得以将两人解决。又一日，衙门捕快(火星饰)上门缉凶，被老贾出手消灭。小宝无意目睹了这一过程，却招至大宝的杀身之祸。
逃出生天的小宝幸得乞丐神探(三毛饰)相助，并拜其为师习得猴拳。两人最后联手破了贾午刀，小宝报了兄仇，而神探也完成了除暴安良的使命。
大宝和小宝在赌场被众打手围攻，此时二人功夫尚浅，动作设计上也相应是一来二去、直来直往的桥手短交。小宝显然比大宝机灵，他用还未精习的南拳蔡李佛对付众人，大宝在一旁依葫芦画瓢。镜头更多给了元彪，彪的身手也许谈不上刚猛或飘逸，但扎实的柔韧功底使得他的招式颇显灵动。
哥俩有眼不识泰山，妄图半路教训贾午刀。大宝梁家仁先上，被刘起手冲拳打成熊猫眼@_O 小宝元彪侧步转身后踹，刘挂挡接扫勾，彪失去重心侧旋180 倒地。梁起，另一只眼被打黑@_@ 彪改用蔡李佛的穿、刨、挂拳，刘右手背包袱，仅用左手三下五除二便破之，再一冲拳彪前翻270 摔倒。梁再起身，再被刘外摆拳放倒#_% 彪接上，改连环扫攻下三路，刘避过；彪弓步叉拳又被刘遏住，换起脚侧踢反被刘格开回敬一脚，刘一招进步吊手彪后翻270 跌趴在地。
这场打戏前后一分来钟，梁家仁的角色被有意卡通化，一来起诙谐作用，二来反衬刘家荣的厉害。所以给梁的镜头是近景快速切接，造成刘出手迅速，而梁被一击命中后的严重(搞笑)后果。给元彪的镜头则是写实的全远景，动态视角是由近(拉)接远，真实展示元彪的拳脚和翻摔。
哥俩拜贾午刀为师开始学习独门功夫，大宝练“花拳”，小宝习“绣腿”。这显然是三毛为配合剧情而杜撰的功夫，但从梁家仁的腰马、步法和手法来看，似乎是将“二字钳羊马”放宽了，“前箭后弓马”变阔了，掌招换成了手抡太极球的短距曲线拳法，实属咏春。而元彪本就是京班北派，他在对练中的腿法虽缺点狠劲，但踢得伸展有型、收放自如。所谓“花拳绣腿”，实乃“南拳北腿”；看似信手捻来，实则巧妙设计万变不离其宗。
学艺小成的哥俩技痒，找人练靶，分别与街头无赖、赌档打手和乞丐神探有三场交手。三毛和梁家仁扮演捧哏搞笑的角色，而元彪则得以在镜头前充分施展腿法。这一时期，香港银幕的腿功形象几乎被韩国军团和精习跆拳道的好手把持，而元彪的表现无疑让人眼前一亮。彪在动作上结合了武术腿法、跆拳道还有京剧中翻腾摔打的基本功。无论是侧踢、横扫、内合、外摆、连环、旋风，抑或是单脚连踢、连旋，还是空中控腿的姿态彪都能驾熟若轻、灵巧活泼。彪的腿法似乎从来没有被如此更好的“开发”利用过。就以彪的腿法基本功而论，其潜力决不在任何一个“银幕腿王”之下。
贾午刀利用哥俩对付漆友(李海生)，自己全力解决说菇(王光裕)。同一时空中两段并行打斗的交叉呈现是三毛动作片后期剪辑的一大手法。这种化整为零的手法虽然没有将打斗在同一镜头平面内全程展现，但却能够营造出１＋１＞２的立体化视听效果，而且局部细节能刻画得更真切入微。应该说这是一种主观镜头表现方法，观众在视觉上没有选择余地，只要镜头表现稍有懈怠就容易让人产生逆反心理而失败。但三毛完全清楚我们的眼睛需要什么样的运动镜头，短短两分钟的打戏用了近四十个非均匀分布的剪辑点。这种反传统长镜头的快切手法非但没有破坏性的跳跃感（每一拳每一脚依然清晰呈现），而且营造出了令人目不暇接的爽快动作体验。三毛不仅能设计出干脆凌厉的动作，他更能魔术般地将看似零碎的镜头组接得严丝合缝。
元彪再次出脚不凡，配合梁的“花拳”，二人以你方战罢我方上的车轮战术联合攻击李海生。彪的几记横踢、旋风和腾空单飞将李踢得满地找牙。刘家荣得以轻松搞定王光裕后，再将晕头转向的李解决。
火星饰的衙门捕快上门缉拿贾午刀，以蔡李佛对刘家荣的洪拳。拳掌交锋不几回合便被刘一招蛇手锁吼击毙。这一过程被小宝窥到，贾午刀欲杀之灭口。兄弟二人联手对师傅的蛇拳。大宝为掩护弟弟逃跑，自己毙命老贾手下。
两场打戏前后发生在二十平米见方的小庭院内，摄影机在最远端用广角刚够拉出一个全景。打斗和镜头表现都很紧凑，三毛在动作设计上较之古装功夫惯用的“一、二、三、挡；二、二、三、倒”的段落节拍式手法有所不同，招数错落有致，一个回合短则一招半式、长则十数招，并采用动态多视角呈现。演员不仅要熟记动作，而且要求套招近距实打，虽然苦了武师，但换来的是扎扎实实的高质效果。
逃出魔掌的小宝又拜乞丐神探为师学习功夫。这段师傅授徒的戏完全就是对元彪扎实功底的全方位展示，其翻滚腾挪的弹跳和腰腿功法的韧劲让肥胖的三毛和壮实的成龙两位大哥都只能甘拜下风。三毛将杜撰的“垃圾拳”和独门猴拳传授给彪，另三毛给彪练气的那段“空中跳绳”真是格外精彩。看完这段训练，俺只有一个感受：元彪是香港动作影坛的一把瑞士军刀！他可谓样样皆能、少有局限。
影片的最后，元彪、三毛和刘家荣联合打造了一段长达12分钟而没有丝毫乏味的对决。彪先与刘在野外遭遇，报仇心切的彪二话没说上前便一脚腾空单飞，接着连续踢出十脚，再以垃圾拳和螳螂拳与刘交手。一个回合近二三十招的拳脚快攻加上彪满场翻飞，镜头表现采用主镜运动全景加近景正反打，无比过瘾啊！刘技高一筹，彪不敌，撒腿逃窜。来野外小酒馆与三毛会合，二人用猴拳对付刘的蛇手和一根烟枪。老刘打得很卖力，几乎没用替身；三毛与彪并非象《贊先生与找钱華》中与卡萨伐的那种无间配合，二人不时跳跃翻腾并扮着猴脸以车轮战进攻刘。这场戏几乎每个回合都是精彩看点，三毛不愧是个身体力行的动作大师，他的速度似乎与其肥胖成正比，而他的肥躯腾空翻摔压碎桌椅板凳也毫不含糊，呵呵。元彪上蹿下蹦，在一张不足三尺见方的饭桌上连续五个后空翻的劲头毫不输于专业杂技运动员。三人打出屋外，三毛和彪用带刺的藤条收拾老刘，看来刘的跳绳技术不行，很快被彪放倒，三毛赶上跳跃腾空利用肥躯自由落体将其压毙。（三毛经常整这种让人没有心理准备的致命一击，无论压在身下的是老刘本人还是替身，估计绝不好受。小朋友千万不要自己在家模仿哦，呵呵）
《杂家小子》是一部每看必被娱乐且老少皆宜的谐趣功夫经典，轻松的故事、幽默的角色，逗趣的包袱，欢快的民俗小调和应有尽有五分钟一小战、十分钟一大战的精彩功夫，即使是在杀戮时刻也是无血腥的而不会让人感觉沉重。这一时期的三毛作品真可谓巧思妙琢、出手皆精啊。
三毛也借《杂》让小师弟元彪得以在动作影坛迅速出位。时年22岁、一脸灿烂笑容的彪以颇具亲和力的银幕形象和出众的全面功夫从众多武师中脱颖而出，一跃成为香港八十年代最有价值的一线动作明星。早在出道前彪就以武师身份与大哥们配演过不少功夫片中的小角色，而其灵活的杂耍身手也使他成为幕后的替身专业户。在70--90的二十年间，他为数不清的港台中外男女动作演员替过身，其中包括三毛和成龙。
三毛是那种思路明晰、乐于创新的导演，他的剧情与他的镜头一样多视角富于变化。而在闹趣搞笑的外表下，他对动作的写实要求异常严格，这种骨子里的动作暴力在其随后八十年代的作品中愈发突显。