飞英塔为砖木混合结构楼阁式宝塔，七层八面，通高55米，雄浑古朴，端庄秀丽。其具有鲜明宋代建筑风格的是平伸舒展的翼角，简洁朴实的檐面，用材硕大的斗拱和寻杖望柱式栏杆。飞英塔是我国众多古塔之中唯一的“塔中塔”，其内为雕刻精致的石塔，外面笼罩着一座壮丽的砖木结构的塔。 飞英塔原在飞英寺西侧舍利石塔院内。寺院创建于唐咸通五年(864年)，中和五年 (885年)更名上乘寺，宋景德二年(1005年)改为今名。内塔创建于唐中和四年(884年)，后毁。

现存石塔重建于南宋绍兴年间。外塔始建地北宋开宝年间(968-976年)，绍兴二十二年遭雷击毁，南宋端平年间(1234-1236年)重建，此后经元、明、清几次维修。 石塔八面五层，残高14．55米，塔顶已毁。用白石按木构楼阁式塔的形式分段雕刻砌叠而成。塔基座上刻“九山八海”，上置须弥座，雕刻仰莲、覆莲、缠枝花卉。缠枝花卉间有“化生”，作童子状。束腰雕狮子，形态各异，极其生动。再上为塔身、平座和檐子。塔檐上的椽子、飞子、勾头、滴水、脊兽、角梁都雕刻得惟妙惟肖。 外塔为砖木结构，平面八边形，残高36．34米，分七层。沿内壁安装扶梯，盘旋而上。第二、三、四层铺设围廊，信佛人可环绕石塔礼拜，其上三层铺设楼板，围廊用斗*拱支跳。塔身外壁，每层都有塔檐和平座(廊子)，也为斗*拱支跳。 飞英塔为湖州著名的风景点。

传说飞英塔是陈武帝陈霸先为他心爱的飞英姑娘建造的。陈霸先是南北朝时期陈朝开国皇帝，湖州长兴人。他出身贫苦，从小是孤儿。长兴人喜习武，陈霸先从小也随大人练武，他勤学苦练，习得一身好武艺，且长得人高体壮，熊腰虎背。在他15岁那年，堂姐被邻村的一个小混混强抢去，陈霸先黑夜潜入纨绔子弟家门，将他杀死，然后连夜出逃。

陈霸先翻山越岭，逃到湖州。当时湖州城中有一家姓钱的员外，家富百万，正在建造府第，工程浩大，工匠数百，民工数千，陈霸先给钱员外家做小工。陈霸先身高体壮，力大无穷，别的小工两人抬一根木头，他一只臂膊挽一根，一人两根木头；别的小工挑砖50块，他能挑200块，干活很卖力。

钱员外已年过半百，家有一女，名飞英，不仅美貌，且赋诗抚琴，手工女红，件件皆能，年岁与陈霸先同庚。她有时也到建房工地上玩耍，一日见到陈霸先一人挽两根长木，行走如飞，不觉惊叹；又见陈霸先年轻英俊，顿生爱慕之情。有在凑巧相遇，飞英小姐对陈霸先说，你身手不凡，当求出人头地，希望陈霸先学习兵法，将来有所作为。陈霸先表示家贫无力读书，只能做工以维持生活。飞英小姐极为同情，表示愿意教陈霸先读书识字，陈霸先拱手相谢。于是相约，每晚在书房后院读书识字。飞英祖父原是武官，位至总兵，家有些兵书，飞英也偷来让陈霸先学习。陈霸先如饥似渴，如此三载，从未间歇。其间，二人互倾恋心，私订终身。

飞英小姐已长成18岁的大姑娘，钱员外准备择婿入赘。飞英小姐向父亲禀告与陈霸先已订终身之事。百万富翁，招个小工的女婿，钱员外的脸面往哪儿搁？为了斩断女儿的恋情，向知县密告陈霸先偷窃。知县受贿，将陈霸先收入监牢。陈霸先怒火满腔，越狱而逃，半夜进钱家，擒住钱员外。飞英小姐前来求情，她说家父就是有许多不是之处，究竟是父亲，望饶他一命，并希望陈霸先快离开此处，学业已有所成，速去从军，若有出人头地之日，前来娶亲，她一定老死相等。陈霸先依了飞英，一揖道：陈霸先决不辜负小姐的期望，出人头地之日，前来娶亲。

陈霸先投军，英勇善战，屡建巨功，官拜大将军，最后登上帝位。他立即命钦差，火速前往湖州，迎娶飞英小姐。谁知钦差回京禀报，飞英小姐早已谢世。原来，陈霸先一离开湖州，钱员外再三相逼飞英另择婚配，飞英小姐表示非陈霸先不嫁，父女反目。然而，陈霸先一去多年，音讯全无，飞英小姐相思成疾，卧床数年，在“陈郎，陈郎”的呼唤声中，闭上了眼睛。陈霸先白衣素服，亲临湖州，为飞英小姐吊唁三日。感念飞英小姐的恩情，特造塔以表世代纪念。为区别佛塔之塔，特造内外二塔，取塔名“飞英”。