位于港岛西营盘的旧精神病院，可以说是香港比较出名的古蹟之一，但出名并不是因为它的建筑独特，而是因为它背后的传闻，很多人都会把它跟一些灵异事件拉上关系，所以这座建筑物有另一个名称—高街鬼屋。
至一九四一年，建筑物不再作员工宿舍之用。第二次世界大战后，大楼改作精神病院。一九六一年，青山精神病院落成，院舍遂改作日间精神科门诊部。一九七一年以后，建筑物被闲置，直至九十年代，政FU决定保存其外墙，建筑物则改建成社区中心。
以上一段是根据官方记载的，但以方间流传来说，就会有更多的资料。闻说二次大战时，香港沦陷，日军以此建筑物作为刑场，而位于病院前面的佐治五世公园则曾经是一个乱葬岗，因此在这里不时会有一些灵异传闻。后来成为精神病院，而当时医术没有今天那麽先进，精神病人通常都是进院「等死」的，促使这座建筑物变得更为可怕。
当中其最为多人流传的是，在七十年代，很多驾车人士，当经过这里时，都会听到里面传出一些惨叫声，但是七十年代，这建筑物已经是空置的，那麽他们听到的声音就成了人们「讲鬼故」的题材了。
但又有人说，惨叫声是由前华人精神病院发出的，这座建筑物不曾空置，而且已改为戒毒所，戒毒所使我想起早期人们的戒毒方法，把戒毒人士绑着，反锁在室内，任他辗转反侧、哭叫不得，难道那些怪声也只是一场误会吧?
当大家在考虑这问题时，我们又听到另一些传闻，政FU有意把它拆卸重建，但是在工程进行时，发生了很多怪事，里面有东西倒塌、有工业意外、有工人工具离奇失踪?但都听不到有人亲眼见鬼。
结果，这座建筑物真的拆了，但并不是真的完全拆掉，而剩下了他的外墙和走廊，理由是它这个部份已被列为发定古蹟，不过，以中国人的传统思想，又会一厢情愿地为它想理由，他们说因为这一段是整座建筑物最猛的，所以很难清拆?还是信不信由你吧。
改建系，有不少电影也是在这里取景的，加上建筑物本身也成了西区的社区综合大楼，里面还设有安老院，人流多了，不知会不会减少这个地方的怪异传闻呢?
另外，长辈们说，其实在高街鬼屋后面，般咸道再向上走，有一座貌似古堡的古老大屋(已拆了)，闻说二次大战时，曾为日军驻港高层占了，此大屋更是生人勿近呢。