北京碧云寺、苏州西园、湖北汉阳归元寺等处，都有五百罗汉堂。这五百尊罗汉是根据什么形象塑造出来的呢?唐代高僧玄奘写的《大唐西域记》中，记载着这样一则故事：
    摩揭陀国有一千个佛僧，其中，五百个是凡夫僧，五百是罗汉僧。国王无忧王对他们都很敬仰，一视同仁。所谓罗汉僧，是指那些断除了贪、欲之念，已得正果，不受生死轮回的佛僧。这五百罗汉僧平时不露真相，连无忧王也不知他们是罗汉僧。在五百凡夫僧中，有一个名叫摩诃捉婆的，经常发表一些违背教规的言论，影响了一大批佛僧。无忧王很生气，想把一千个佛僧全部淹死。这时五百罗汉僧才各显本相，腾云驾霉而去，在迦湿弥罗国的一个山谷里隐居起来。无忧王知道后，又悔恨又惧怕，亲自到罗汉僧隐居的地方向他们承认自己的过错，并请他们回去。罗汉僧们不肯，无忧王便在国都建起一座寺庙，按照五百罗汉僧的模样塑造了五百尊像，不时供奉。从此，五百罗汉像就流传下来，也传到了我国。