早在6000年前的新石器时代,香港地区已有人类居住。有文字可考的内地向香港移民,大约是在东晋时期。此后,较大规模的移民是在宋代。徐姓移人较晚,直到明朝末年,方才有徐姓移人。早期移人的徐姓之人原籍为江西南昌,经广州、新安(今宝安)、深圳进入香港地区。主要居住在大屿山的石壁、梅窝,新界的攸田村等处。
清朝初年,为了切断东南沿海人民与郑成功、张煌言等反清队伍的联系,清政府先后颁布了严厉的“禁海令”和“迁界令”,不仅不准沿海居民出海捕鱼与贸易,还必须内迁50里,香港地区基本属于迁界范围,村庄田宅,悉被焚弃。直到康熙二十二年 (1683)清政府平定台湾之后,方才宣布废止“迁界令”。第二年,朝廷下诏鼓励农民人迁垦殖,迁入者大多为广东、福建、江西等地农民,部分原住民和前代居民也相继迁回故土,重建家园。随着人口增加,也有分迁邻近地区,开村立业。徐姓之人仍然迁入较晚,直到乾隆二十三年(1758)方才有人迁人,迁入路线与明末相同,仍然在大屿山梅窝居住。
近代以来,尤其是抗战以后,香港发展很快,目前已在世界经济中占有非常重要的位置,这其中自然离不开大陆历代移民的辛勤努力,当然也包括徐姓移民的功劳。在香港的徐姓成功者很多,其中最著名的当推香港立法院主席范徐丽泰,其他著名的有香港三水同乡会永远名誉会长的徐侠飞、佛山市港澳委员徐克海、企业家徐影三等。