虽不是位于怡保市内，但这离怡保市40公里外一座未完成的古堡——凯里古堡是到怡保游客都可顺道一游的地方。古堡由威廉凯利史密斯于1915年策划和兴建，城堡气势非凡，六层高楼巍峨耸立，罗马式立柱及摩里西斯式拱门豪华靓丽，内部设有庄严的圆柱及奢华的酒窖，古堡里甚至设置了马来西亚第一部电梯。然而，这座城堡却并没有建成。第一次世界大战后，威廉下令在古堡附近兴建一座印度庙，并以隧道贯穿两座建筑。但是，在建筑完成之前，威廉就去世了，工程因此搁置。自此，古堡沦为鬼屋，流传各种诡异传说，直到近年，当地政府清理后开放给有胆量的游客去探险。古堡中有很多秘室和秘密地道，而通往古堡的道路顺着地形轮廓呈现出迷宫式的通路，使这个地方更增添神秘和浪漫的色彩。当地人表示，关于凯利古堡的鬼故事传闻不断，但独特的建筑外观连马来西亚人都喜欢在白天时到此参观、拍照取景。