相传在明朝永历年间，郑成功驱走荷兰人，顺利光复台湾与澎湖，而当时被荷兰人运送来台当做奴役的部分黑奴，却被遗弃在小琉球，这些黑奴后来陆续逃往此处的洞穴中躲藏；经过几年之后，有艘载送英军的船艇由蛤板登陆，居住此处的黑奴不但乘隙抢夺财物，还几乎杀尽所有英军，不久之后，被英军的支持部队发现这桩惨剧，使得居住在洞穴里的黑奴，最后遭到引火焚烧的无情报复，后人遂定名为「乌鬼洞」。 在黑奴深居洞穴这段期间，遗留许多石碗、石椅、石桌、石床等文物，甚至珠宝、银器也被发现过，可惜的是，因为发生崩塌情况，导致洞口被完全堵住，现今已无法进入。

乌鬼洞风景区位在小琉球西南端，区内景点包括浩然亭、碧涛亭、甘泉、怡桥、冽池、幽情谷、别有天等，最盛名的景观地形就是珊瑚礁洞穴了。隐藏坡地的礁岩洞穴彷佛建造于风景区的迷宫，穴内空间狭窄曲折，光线也很难透进，洞里幽幽暗暗的几乎伸手不见五指，若要进入探险，必须携带手电筒才能确保行走安全。 而在乌鬼洞附近的珊瑚礁石岩壁上，深印两只大蚌化石遗迹，据研究已有数十万年历史，其直径大约有一公尺左右，化石表面的纹路还相当清晰，这也是乌鬼洞风景区最具价值的参观景点了。