Chùa có tên chính thức là Higashiyama Jisho-ji, là một trong những phật đường nhỏ của Shokoku-ji. Tên Ginkaku-ji được bắt nguồn do từ thời Edo đã có ngôi chùa Kinkaku-ji (chùa vàng) nên người ta gọi ngôi chùa này là Ginkaku-ji (chùa bạc) để đối lại với Kinkaku-ji. Lúc đầu cứ tưởng nó liên quan gì đến nghề bạc, vì ngay đầu vào có ông lão làm nghề thủ công. Chót chụp phát mà lão ấy hét như kiểu muốn ăn tươi nuốt sống, ngại quá nên té mất!
Vào khu chùa bạc này có cảm giác như vào khu trồng Bonsai ở Nhật vậy, cả một khu chùa ẩn lấp cạnh những cây bonsai xanh mướt
Điểm tham quan nổi bật nhất không gì khác chính là cung điện Ginkakuji Kannon, một bảo vật quốc gia. Ngoài ra còn có Koygtsudai - ụ cát trắng ở trước đền chính,và Ginshadan - tượng trưng cho những con sóng (có hình dáng giống khu ruộng hơn nếu không phải là cát)