本园区的诞生源於白色恐怖时代两个「政治犯监狱」拘禁许多「政治犯」，第一个是台湾省保安司令部新生训导处(1951年─1965年)丶第二个是国防部绿岛感训监狱(1972年─1987年，绿洲山庄)，一段历史变迁的时间长廊和监禁政治犯的监狱空间，深刻了解人权的重要性。

绿岛人权文化园区总面积约32公顷，从绿岛乡公馆村公馆鼻开始，包括将军岩丶人权纪念公园丶绿洲山庄丶庄敬营区（新生训导处）丶 绿岛技能训练所，直至燕子洞等。。

1951年，台湾省警备总司令部在绿岛成立「新生训导处」，监管丶改造思想或政治上有问题的犯人 。1970年2月8日泰源事件後，当时的国民党政府在绿岛新生训导处旧址西侧兴建国防部绿岛感训监狱，称「绿洲山庄」，1972年并将泰源监狱和各地军事监狱的政治犯集中送到绿岛监禁。

1997年，当时的立法委员施明德等16人向行政院提案，要求将绿洲山庄改为史迹馆或纪念馆。1999年3月29日，行政院核定将绿洲山庄规划成立史迹馆或纪念馆。2000年11月，绿岛绿洲山庄由法务部移交交通部观光局接办，2001年2月23日行政院核定名称改为「绿岛人权纪念园区」，范围从绿洲山庄扩充至庄敬营区丶国防部医务所丶行政院海岸巡防署岸巡及安检兵力驻用厅舍丶人权纪念碑丶公馆渔港及周边海岸地区。

2002年12月10日世界人权日，「绿岛人权纪念园区」正式启用。2006年1月1日，绿岛人权纪念园区管理单位由交通部观光东部海岸国家风景区管理处移交给行政院文化建设委员会，2007年并更名为「绿岛文化园区」。2009年6月与景美文化园区同时第三次更名为「绿岛人权文化园区」。2014年1月27日，依《文化资产保存法》公告登录为文化景观类文化资产。

园区还原人权侵害无民主自由的历史，从建物丶牢房及一个个的政治受难者故事中，亲自体会监禁无自由生活，让参观的 旅人可以体验人权的发展史及了解时代背景下的故事。