石室平面基本呈正方形，面阔5.7米，进深5.69米，高3.9米，占地面积32.43平方米。全石结构，室内有石柱16根，正中有砖砌神台。石室四面墙体均无窗，唯一大门朝西偏南，门高2.11米，宽1.54米，大门两侧青石板行书对联一副，文为“大梦梦中原是梦，此山山外更无山”，门前有3级石台阶。屋顶为六坡九脊歇山式，青石板铺垫，室内梁、柱、斗拱和墙基均用花岗岩石砌筑。1959年，列为第二批江西省文物保护单位，为保护该建筑，加用小青瓦、青砖盖顶，四周另外加砌砖墙。自山下公路到山顶石室有石台阶通达。

相传石室始建于晋代，原来位于山脚下。史载，晋朝炎兴元年(263年)，蜀国为晋吞灭后，刘备之孙刘护，携家眷自四川避难至此，此处地形险要隐蔽，决定在此结寨踞守。刘护的母亲罗氏，见大势所趋，劝刘护归顺于晋，后刘护得封为广惠王，其母罗氏封为协庆夫人。

太康元年(280年)，东吴又被晋所灭，残军败将逃避新建西山藩源，与地方匪盗勾结作乱，后为刘护所灭，被当朝封为罕王，原所居住的山峰也赐名罕王峰。后晋兵来攻，刘护于农历九月初一战死，后人将这天作为祭祀罕王刘护之日。又传刘护之母能用山果感人入梦，民众信其灵验，信徒趋之若鹜，小庙香火鼎盛，人们尊称刘母为“梦娘娘”，并将此山改称“梦山”。

南北朝梁代天监年间，云游僧李月鉴在梦山结庐并报请江洲都督王茂为刘护建庙塑像，从此罕王峰便有了罕王庙。

罕王庙建立以来，香火一直很盛。唐宪宗时，有一进士姓施名肩吾，弃官隐居梅岭，常邀友人同登梦山游玩，一次偶见罕王庙后有一石洞，洞的面积恰好只容一人，为此将洞命名为施先生石室。

明嘉靖年间，因嫌其庙太小而由山脚迁至山顶现址，现存主体建筑为明代所建，石室内原有宁王朱权石像。清同治年间进行局部修葺，总体格局未变。

该建筑整体为石质架构，石梁石瓦，巧夺天工，所有结构均用花岗岩石砌筑。且顶部为六坡九脊歇山式，四面墙体均无窗，仅西开一门，造型独特，是研究明清石构建筑和宗教建筑艺术的重要的实物资料。

1959年，列为第二批江西省文物保护单位。1987年，江西省人民政府将其重新公布为江西省文物保护单位。