现时香港有不少人称西区警署为「七号差馆」。这个称呼可以追溯至1870年代。当时
香港岛曾有九间在中央警署(今旧中区警署)落成后,根据落成日期而顺序编号的警署。而「差馆」则为粤语中警署的俗称。
多年来七号差馆曾经过数次搬迁。第一代的七号差馆于1858年启用,位于皇后大道西与
薄扶林道交界。1902年,第二代的七号差馆迁往附近建于德辅道西的海员宿舍旧址。第三代,即现时的西区警署,是在1952年落成的。该处邻近第二代的七号差馆,原为圣彼得教堂。第二代的七号差馆则被改建为西区警察宿舍,现位于西区警署内。