자장은 문수보살이 머문다는 청량산과 같은 느낌을 받은 이 산에서 7일간 기도를 올렸는데, 꿈에서 문수보살을 본 후 문수보살 입상을 발견하여 문수사를 창건하였다. 
문수사 「사적기(事跡記)」에 나오는 창건 설화에 따르면 자장이 당나라에서 귀국하는 길에 이 산을 지나게 됐는데 묘하게도 당나라에서 수행했던 청량산과 같은 느낌을 받았다고 한다. 당나라의 청량산은 문수보살이 머무는 상주처(常住處)로 알려져 있다. 문수보살은 『반야경』을 편찬한 이로 불교에서 지혜의 상징이다. 자장은 혹여나 이 산에서 문수보살을 만날 수 있을까 하는 마음에 산속 암굴에 들어가서 7일 동안 정성껏 기도를 올렸다. 그러자 꿈에 문수보살이 나타나 그자리를 파보니 문수보살 입상이 나왔다. 이에 644년(의자왕 4) 문수전을 짓고 이름은 문수사라 했다고 한다.