여지 승람에 의하면 천관사는 창부로 천대받던 여자가 어엿한 부처님이 되어 그 집 터가 절이 되었다는 유래가 있다.
 사천왕 절터엔 두 개의 귀부(龜趺)만 남았고 재매정(財買井)을 찾아드니 김유신의 옛 집터는 말목으로 알아차릴 뿐 박혁거세의 발상지 나정(蘿井), 그의 비 알영 부인의 발상지 알영정(閼英井), 그들이 임금 노릇하시던 숭덕 전(崇德殿), 그들을 위시로 그 자손이 돌아가 묻히신 오릉(五陵)은 전설 이 외에 별로 이렇다 할 감흥을 일으키지 않는다.
천관사(天官寺) 전설 천관사(天官寺) 자리도 주추밖에 남지 않았는데"여지 승람"에 의지하면 그 절의 유래가 재미있다. 삼국을 통일한 김유신 같은 위인으로도 타오르는 청춘의 불길은 걷잡을 수 없었던 것이다. 우연히 꽃거리에 발을 들여 놓게 되고 어여쁜 이성의 품에 서 세월 가는 줄 잊었던 모양이다. 꼬리가 길면 밟히는 격으로 필경 그 대 부인에게 들키게 되고, 김유신 같은 아들을 두신 만큼 그 대부인도 매우 엄 격하셨던지, 깊이 훈계하시되 “내가 아비 없이 너를 길러 하로 바삐 장성을 하여 나라를 위해 공명을 세워 가정을 빛내기 바랐더니 주사청루에서 헤어 날 줄 모르니 이런 기막힐 노릇이 어데 있느냐!”하시고 울기를 마지 않으 매 유신이 이에 느낀 바 있어 그 계집의 문앞도 지나지 않겠다고 굳게 맹서 를 하였는데, 하로는 술이 몹시 취하여 말을 타고 돌아갈 새 말이 옛날 길을 좇아 그 여자의 집에 이르렀다. 그 여자는 일변 기뻐하고 일변 원망하며 울 면서 유신을 맞아 들였는데 유신이 술이 깨자, 한칼에 탔던 말을 베고 안장 도 버린 채 옷소매를 뿌리치고 돌아왔다. 이 절은 곧 그 여자의 집터요, 천 관(天官)이라 함은 그 여자의 호라 하였다. 김유신의 결심도 물론 놀랍다 하겠거니와 당시의 창부로 천대를 받던 여자가 어엿한 부처님이 되고 그 집 터가 절이 된 것은 실로 흥미 있는 사실이 아닌가.
