Quán Sứ được xây dựng vào thế kỷ XV nằm trên địa phận thôn An Tập, phường Cổ Vũ, tổng Tiền Nghiêm (sau đổi là tổng Vĩnh Xương), huyện Thọ Xương; ngày nay là phố Quán Sứ, quận Hoàn Kiếm, thủ đô Hà Nội. Nguyên xưa ở phường này chưa có chùa, chỉ có mấy gian nhà tranh ở phía Nam, dân làng dùng làm chỗ tế thần cầu yên gọi là xóm An Tập. Theo sách Hoàng Lê Nhất Thống Chí, vào thời vua Lê Thế Tông, các nước Chiêm Thành, Ai Lao thường cử sứ giả sang triều cống.