當印度仍屬英國殖民地時，相當多印度人來港謀生，除了富裕的商人之外，更多的是當兵、當警察、做看更、做海員和開設小食店。開埠初期，來當警察的印度人需要宿舍居住，便在警署旁邊興建警察宿舍。1857年，新的宿舍隨警署在奧卑利街啟用，原址則由發展商建成街道，中下階層的印度人大多聚居於這條街上。觸目都是纏頭的白衣人，自然被稱為「摩羅街」。