Istana ini pada keseluruhannya diperbuat daripada kayu dan dikenali juga dengan nama Istana Lembah atau kadangkala disebut juga Istana Tepas. Letaknya Istana ini berhampiran dengan Istana Iskandariah, iaitu di sebelah tenggaranya. Istana yang berdinding kelarai dan berbumbung perabung pisang sesikat ini telah dirancangkan pembinaannya selepas berlaku banjir besar yang melanda Negeri Perak pada tahun 1926.
Tukang yang membuat Istana ini ialah Haji Suffian dan anak-anaknya yang berasal dari Seberang Perai. Melihat pada pelannya, konsep binaan Istana ini adalah berdasarkan pada bentuk sebilah pedang. Ragam hias dan seni pertukangannya memperlihatkan keindahan seni pertukangan Melayu Perak.
Apabila siap pembinaanya pada tahun 1931, Almarhum Sultan Iskandar Shah, Sulatn Perak yang ke-30 (1918-1938) telah berpindah bersemayam di istana tersebut kerana Istana Negara iaitu istana rasmi Sultan Perak yang terletak di Changkat Negara, Bukit Chandan akan dirobohkan untuk dibina sebuah istana yang baru (Istana Iskandariah sekarang).
Setelah sempurna pembinaan Istana Iskandariah pada tahun 1933, Sultan Iskandar Shah telah berangkat pindah pula ke istana tersebut. Istana Lembah atau Istana Tepas ini diduduki pula oleh keluarga di-Raja Perak. Nama Istana Kenangan ini hanya diberikan pada tahun 1960an setelah ianya diperbaiki semula dengan daya usaha Yang Teramat Mulia Tunku Abdul Rahman Putra, Perdana Menteri Malaysia yang petama.
Sekarang istana ini dijadikan Muzium di-Raja, Perak.