하목정은 임진왜란 때 의병장 이종문이 선조 37년에 세운 정자로 전해진다. 인조가 능양군 시절 유숙한 적 있는데 훗날 장자 이지영이 어전에 입시하자 하목정에 부연이 없음을 말하며 200냥을 하사해 부연을 달았고 인조는 하목정이란 정호를 내려 써 주었다는 내용이 전해 내려온다.
하목정은 임진왜란 때 의병장이었던 낙포(洛浦) 이종문(李宗文)이 조선 선조 37년 (1604)에 세운 정자로 전해진다. 여지승람(輿地勝覽) 개초본에 의하면 ‘낙포 이종문은 만년에 정사를 지어 하목당(霞鶩堂)이라 현판하고는 벼슬에서 물러나 유람하며 생을 마쳤다.’고 기록되어 있다. 또한, 전의이씨 전성세고(全城世稿) 권2와 낙포집 2에 의하면, 인조가 능양군이던 시절에 유숙하고 간 적이 있었는데 훗날 장자인 이지영(李之英 : 1585-1639)이 어전에 입시하자 인조가 하교하기를 “너희 집 하목정은 좋은 강산에 점지한 훌륭한 정자인데 어찌하여 부연이 없는가”라고 하자 이지영이 사서인은 사가에 부연을 달 수 없는 것이 나라의 제도입니다“라고 대답하였다. 그러자 인조는 “정자는 사가와는 다르니 고쳐서 부연을 달게 하라”하고 은 200냥을 하사하였다. 이지영이 “하명을 하시니 부연을 달고 자물쇠로 봉한 후 사처로는 사용치 않겠습니다.”라고 하자 인조는 “거처를 폐하지 말고 내가 유숙한 표적을 남기면 되지 않겠느냐”하면서 하목정이란 정호를 써 주었다 한다.