거창 갈계리 임씨고가는 갈천 임훈(1500~1584)선생이 살던 집으로 부친인 임득번이 1507년에 건립한 주택이다. 임훈선생은 생원시에 합격하여 광주목사를 역임하였고 장례원 판결사에 임명되었으나 사퇴 후 낙향하여 후학 양성에 힘썼으며 효행으로 정려를 받았다. 부역제도와 군정의 폐단을 바로잡으려고 노력하는 등 백성을 사랑하는 목민관으로서 추앙받았다.
가옥의 구조는 솟을대문채, 사랑채, 안채, 장판각, 사당으로 구성되어 있다. 대문채에는 정려가 걸려 있고, 홍문의 초석이 거북머리로 되어 있는데 작품성이 뛰어나다. 안채는 선생의 호를 따 자이당이라 부르며, 정면 5칸, 측면 2칸에 맞배지붕이다. 안채 옆에 갈천 선생과 동생 임운 선생의 문집책판을 보관한 장판각과 사당이 있다.
고가는 솟을삼문을 한 대문채, 사랑채, 안채가 각각 독립적인 일자형 건물을 이루어, 전체적으로 三자형으로 배치되었다. 이러한 배치는 경남 지방의 옛 주택에서 자주 나타나는 독특한 방식이다. 안채와 장판각, 사당 등의 건물은 최근에 신축되었다. 이 집의 서쪽 담장과 경계를 이루고 있는 집은 선생의 동생인 임운이 살던 곳이며, 임운 역시 효자로 이름 높았다. 이 집은 살림채가 없이 대문채와 사랑채로 이루어져, 본래 임씨 고가의 한 영역이었던 것으로 추정된다.