幸福樓當年發生一宗駭人聽聞的桃色兇殺案，有作家曾大肆報道。（劉凱輝攝）  
幸福樓荒廢40多年來，之所以屢傳鬼怪故事，實與發生在上世紀60年代初的一宗殘酷兇殺案有關，兇徒手法之殘忍，較之其後發生的「八仙飯店」，不遑多讓。

資料顯示，當時一對夫婦居於幸福樓一單位，男子以「敏人」筆名任某狗經狗評家，夫婦兩人育有一子女，一家三口在當時算是中上家庭。

「敏人」與兇徒羅江情同手足，羅江當時有妻又有妾，據說「敏人」對羅江的小妾動了心，兩人且曾通姦，羅江聞悉兄弟「勾義嫂」後怒不可遏，衝上幸福樓找霉氣時「敏人」剛巧不在，只得「敏人」的妻子在家，羅江一時火遮眼，告知「敏人」的惡行後，遂以其人之道，還施其人之身，即時在「敏人」家裡，將他妻子強暴，有同屋租客見狀，嚇得返回房間不予理會！

未幾「敏人」返回，羅江先用刀銼將他重創，然後更在他面對，第三度強暴其妻子，羅江得嘗獸慾後，再用刀銼猛插「敏人」。據法醫事後證實，「敏人」身上共有40處傷口，司警接報到場時，「敏人」已氣絕身亡，當時在司法警察司的土生葡人警察歐萬奴，迅速拘捕羅江歸案。（歐萬奴就是之後偵破總統酒店「煎皮拆骨案」的名警）

羅江之後被判處24年有期徒刑，但據坊間消息，羅江入獄後竟能成功逃獄，之後潛往香港「洗底」，更成為一名成功商人？

不過，事件至此還未完結，自從幸福樓發生兇殘的殺人案後，據悉租客抵受不住「陰魂」陣陣的驚恐，陸續搬離上址，有兩個小時候在上址住過的老街坊透露，曾一夜之間，屋內的雞隻和花貓，全部死清，兩人的父母嚇得連夜帶同小孩遷走。

幸福樓雖位處雅廉訪的黃金地段，且樓房寬敞，但自此卻一直凋零下去，只有幾戶業主，放租給獨身人士居住，2003年，一名獨居幸福樓四樓板間房的76歲姓李男子，猝死上址多日無人理會，直至房東上門收租才揭發，死後其遺體亦無人認領。