รัชกาลที่ ๕ ทรงพระกรุณาโปรดเกล้าฯ ให้สร้างวังที่ประทับใกล้พระราชวังสวนดุสิต โดยทรงพระราชทานพระตำหนักสวนจิตรลดาแด่พระบรมโอรสาธิราชเจ้าฟ้ามหาวชิราวุธ ส่วนพระตำหนักสวนปารุสกวันทรงพระราชทานแด่จอมพลสมเด็จฯ เจ้าฟ้ากรมหลวงพิษณุโลกประชานาถ
เมื่อรัชกาลที่ ๖ เสด็จขึ้นครองราชย์ทรงย้ายไปประทับที่พระราชวังดุสิต ทรงพระราชทานตำหนักสวนจิตรลดาแลกเปลี่ยนกับที่บริเวณท่าวาสุกรีของจอมพล สมเด็จฯ เจ้าฟ้าจักรพงศภูวนาถ กรมหลวงพิษณุโลกประชานาถ และโปรดฯ ให้รวมตำหนักทั้งสองเข้าด้วยกันและรื้อกำพงที่คั่นกลาง ออกส่วนกำแพงที่สร้างใหม่ทรงให้ประดับรูปจักรและกระบองซึ่งเป็นตราประจำพระองค์ของจอมพล สมเด็จฯ เจ้าฟ้าจักรพงศภูวนาถ กรมหลวงพิษณุโลกประชานาถไว้ที่ประตูกำแพง ปัจจุบันอยู่ในความดูแลของสำนักงานตำรวจแห่งชาติส่วนพิพิธภัณฑ์กรมตำรวจ ที่เคยมีอยู่เดิมนั้นได้ย้ายไปอยู่ที่โรงเรียนนักเรียนนายร้อยสามพรานที่จ. นครปฐม
ที่อยู่ วังปารุสกวัน :323 ถ. ศรีอยุธยา แขวงดุสิต เขตดุสิต กรุงเทพฯ 10300 โทรศัพท์ : (662) 280-3193 รถประจำทาง : 16 23 70 72 99 รถปรับอากาศ : 3 505 509 ขึ้นทะเบียนโบราณสถาน : ปี 2532 รางวัลสถาปนิกสยาม : ปี 2536 ที่จอดรถ : กองบัญชาการตำรวจนครบาล