พิพิธภัณฑ์ จ่าง แซ่ตั้ง ตั้งชื่อตามผู้สร้างสรรค์ผลงานศิลปะที่จัดแสดงภายในพิพิธภัณฑ์ แต่ก่อนนั้นพิพิธภัณฑ์ไม่ได้อยู่ ณ ที่ตั้งปัจจุบัน หากตั้งอยู่ ณ บ้านเดิมของศิลปินและครอบครัวแถบฝั่งธนบุรี แต่ด้วยข้อพิพาทเรื่องที่ดินทำให้ศิลปินและครอบครัวย้ายพิพิธภัณฑ์และที่พักมายังสถานที่ปัจจุบัน ในพื้นที่ จึงประกอบด้วยบ้านที่เป็นที่พำนักอาศัยและพิพิธภัณฑ์ รวมทั้งบริเวณว่างด้านในที่คุณทิพย์ แซ่ตั้ง บุตรชายของจ่าง แซ่ตั้ง ตั้งใจไว้ว่าจะสร้างเป็นอาคารพิพิธภัณฑ์เพิ่มเติมในอนาคต พิพิธภัณฑ์ประกอบด้วยอาคาร 2 ชั้น กึ