五塔寺原名慈灯寺，位于呼和浩特旧城东南，五塔只是慈灯寺内的一座佛塔。曾经寺院建筑全都坍塌只剩下这座佛塔，因此才有后人得知此处有寺院，重建时便名为五塔寺。五塔寺是一座藏传佛教寺院，也是蒙古地区藏传佛教的发源地。

五塔寺的南面面对五塔寺广场，入口也在此处。五塔寺布局是典型的汉族的中轴线特色，中轴线南北走向，两边严格对称。寺内共分为三个院落，分别是南边的三世佛殿院，中间的文化展院和北边的慈灯寺院。五塔寺的面积不大，纵深仅有150米左右。

从五塔寺南门进入寺院，园内靠南处两边各有一座白色小塔，具有藏传佛教特色。正对面是三世佛殿，三世佛殿在建筑上既有汉族宫殿的特色，又有少数民族和藏传风范，这也是整个寺院建筑的大体风格。

穿过三世佛殿后来到中间的院子，对面的建筑上清晰大字写有“呼市召庙文化展”。在召庙文化展建筑内部，左侧的墙上挂有历史上的宗喀巴等人像，右侧列有我国现存金刚座舍利宝塔召庙图，体现了呼和浩特召庙文化的渊源流长。

然后来到北边的院子，院子中间是慈灯寺的大殿，大殿背后便是舍利宝塔。这座舍利塔始建于清雍正年间，高约16米，塔身均以琉璃砖砌成。参观五塔寺时不光可以在外面观看，还可以上到塔座顶上，俯视全寺，视野不错。

在舍利塔背后的北墙处有一座蒙文天文图石刻，天文图直径144.5厘米，画有二十八宿赤经位置的经线，还有五个同心圆。