Latar belakang Candi Palosan adalah candi buddha tetapi  punya keunikan arsitektur bangunan campuran dengan candi hindu di Indonesia.  Ini karena sejarah yang melatari belakang yaitu Rakai Pikatan dan istrinya yang punya latar belakang agama yang beda.
Sejarahnya:Â
Candi Plaosan Lor:
Pembangunan candi itu sebagai lambang cinta Rakai Pikatan kepada istrinya dan adanya simbol toleransi umat beragama.
Perasaan cinta itu digambarkan dalam relief yang bentuknya laki-laki yaitu sebagai kekaguman Pramodhawardani terhadap suami, yaitu Rakai Pikatan. Â Sedangkan relief perempuan adalah dirinya sendiri.
Ada dua pendapat arkelogo yang berbeda tentang pembangunan candi yaitu J.G. De Casparis yang berpegang kepada prasasti Cri Kahulunan 842M sedang Anggraeni, sejarawan mengatakan pembangunan dimulai oleh Ibu Sri Kahlunan yaitu ibu Rakai Garung sebelum Rakai Pikatan.
Skema bangunan sangat sistematis, pintu utamanya menghdap ke Barat. Kiblat seperti ini biasanya terdapat pada candi di Jawa Timur.
Candi Plaosan Kidul: