據說早年香港島上有壹溪水自山間流出入海，水質甘香清甜，為附近居民與過往船只供應淡水，稱為香江。由香江出海的港口也就稱為香港。香江故址在今薄扶林附近，早已不存，但香江卻成了香港的別名。
另壹說香港名稱來自香姑。香姑是傳說中的女海盜，盤踞香港島，後該島被稱為香姑島，簡稱香島，再演變成香港。
還有壹說香港之名源於紅香爐。傳說很久以前從海上飄來壹個紅香爐，泊於天後廟前，居民以為天後顯聖，便把紅香爐供奉在廟中。島上有個山也稱為紅香爐山。後來把這地方叫做紅香爐港，筒稱香港。