现存蔚县城为明代所筑，城内古迹也多为明代遗构，但也有少量早期建筑，如城南关外西侧的释迦寺。经专家鉴定，其主体建筑大雄宝殿为元建明修，保留了较多元代特点，是蔚县辖区内现存最早的木构建筑。史料显示，释迦寺古代乃蔚州南关大刹，规模宏大，文革时期佛像惨遭捣毁。如今保存较好的中轴线建筑依次为天王殿、大雄宝殿和卧佛殿，两侧还有配殿，此外东侧院内也还有少量古迹。整座建筑格局规整，风格古朴。
释迦寺曾一度作为蔚县博物馆，后来不知何因撤掉展品，如今各殿都是大门深锁，庭院寥落，访客稀少，香火更无，倒也宁静自在。天王殿为三开间小型木构建筑，门前东侧蹲坐一石雕小狮，幼稚可爱，有点像小狗。天王殿背后出围廊抱厦，有木柱支撑，与大殿遥相呼应，这种结构较为少见。
大殿建于月台之上，为三开间单檐歇山顶建筑，每间均有补间铺作两朵，特别是中门开间较大，因此总体而言面阔尚可。歇山布瓦顶色彩简朴，飞檐起翘却较高，与平缓的屋顶形成鲜明对比，从正面看仍有“如鸟斯革，如翚斯飞”之感。其建筑语言如同平铺直叙，然后突然四面起飞，彰显抑扬顿挫之旋律，正所谓建筑是凝固的音乐。
大殿斗拱也厚重古朴，彩绘尽失，门窗也显出朴素的木构原色，唯有殿内类似灵岩寺的精美藻井。从门缝透过望去，沥粉贴金，小木作斗拱层叠，结构繁复却富有韵律，十分精巧灵动。在殿内昏暗的光线下，仍异彩纷呈。
释迦寺古代曾为百姓出城祭拜祈福之地，抗战还作为国军的临时指挥所发挥过作用。如今东侧院内尚有石槽、石池等古物留存，也是当时寺院生活的见证。
南安寺塔为蔚县城内最古老的建筑，依其风格为典型的辽代密檐砖塔。塔置身于寻常巷陌之间，显得鹤立鸡群。据说黄昏时在蔚县西南城墙上眺望辽塔，其古朴的光影之美令人叹为观止。
南安寺塔为8面13级密檐塔，基座各面均有兽头出挑，面相古拙生动，仿佛被镇在塔基囚笼中，也可能有承受塔之沉重、保障塔基稳定的象征意义。
底层被朵朵绽开的莲瓣托住，各面出门窗，均为砖雕装饰。门窗为较繁密的格子窗，门上有半圆形门券，浮雕二龙戏珠。各面转角处还浮雕出颇具立体感的密檐小塔，有护住转角避免破损的作用，也增加了美学效果。底层还有忠实仿木斗拱，支撑上部十三层密檐相轮。以上各层叠涩出檐，不施斗拱，结构紧凑。塔高仅24米，但在民居低矮的蔚县城内，仍显得挺拔俊秀。
南安寺塔是典型的辽塔，当时蔚州是燕云十六州之一，自后晋割让以来，一直是辽国领土。辽代崇尚佛教，但现金仅存此砖塔。比起其同期生，有天宫楼阁浮雕的河北昌黎源影寺塔而言，其特点并不突出，且蔚县还是木构建筑更精彩。前几年南安寺塔发生了地宫被盗的丑闻，幸而大部分文物被追回。狭小的塔院内，尚有工匠在制造传统灯笼，也是蔚县代表性民俗之一。