广州旗下街有一恶霸叫奸人坚（黄子华 饰），他不学无术，却凭借着奸诈的头脑，多年来纠集了一众无赖，在旗下街横行霸道。这天，奸人坚打着“打败广东十虎黄麒英”的旗号招摇过市，恰好被初到广州的黄飞鸿（林嘉华 饰）撞见。为了替父亲出口气，飞鸿教训了奸人坚，让他颜面尽失。之后，奸人坚为了挽回面子，偷走了飞鸿父亲黄麒英的神位。再次挑战飞鸿时，他用神位作挡箭牌威胁飞鸿，最终打败了飞鸿，出了一口恶气，而飞鸿则被众人视为懦夫。 警察厅厅长觉得旗下街的一间姑婆屋阻碍了自己的官运，一心想要除掉它，便找来奸人坚帮忙收回姑婆屋。姑婆屋的主人是刚从南洋归来的阿翠（叶童 饰），这是她买来供一群姑婆养老的地方。奸人坚想尽办法与阿翠斗气，却始终没能拿到姑婆屋的屋契，于是，他又生出了一条毒计。