远远看着，南寺就像一座碉堡。
南寺整体平面呈方形，东西长214米，南北宽210米，占地面积近5万平方米，非常宏伟。
传说起初选择南寺寺址时，僧众和信众一致认为建寺一定要有防守功能，于是才诞生了这座完全以城防为目的的寺院。
而且，因为最开始兴建之时，一些汉族工匠也参加了施工，所以建筑呈现出汉、印、藏融合的建筑风格，很是奇特。
南寺分内外城墙。
内城墙宽3米，高8米，四角有几层楼高的角楼，内城墙四面的中部建有敌楼。如果真的遭遇敌人，完全可以固守寺庙之中抵御。
内城墙的三面无门，仅东面正中开有城门。可谓固若金汤。
