Setelah itu, PM yang menjabat pada 2001-2006, Junichiro Koizumi, dilaporkan memanggil seorang pendeta Shinto untuk mengusir hantu-hantu yang menganggunya di rumah dinas tersebut. Tak disebutkan apakah langkah itu berhasil.
Berdasarkan catatan sejarah, pada 1932 PM Tsuyoshi Inukai ditembak mati oleh 11 perwira angkatan laut dalam kudeta militer di kompleks rumah dinas tersebut. Tragedi ini dikenal sebagai Insiden 15 Mei.
Empat tahun kemudian, saudara ipar perdana menteri Keisuke Okada dan empat pria lainnya ditembak mati di lokasi yang sama dalam upaya pengambil alihan militer, dalam Insiden 26 Februari.