约2000年前，在汉朝时，中国把香港纳入版图。坐落于九龙李郑屋的汉墓就建于此时。十四世纪，许多广东人纷纷来香港定居，还有从中国中部南迁至香港的(客家人)。许多现代香港人至今依旧向当日地主的后代支付(佃租)，这些族群习称为(新界五大族)。

根据一些最早的史册纪录，香港认定要成为一个经济重镇。官方史实中记载，军队最早驻守在屯门和大埔，目的是为了确保吐露港蜒另外，来自广东东部的鹤佬渔民也到香港定居。十七世纪，满清入主中国，为了剿平反对者及海盗，清廷严禁老百姓在沿海定居。最后，禁令废除，新的移民又陆续到香港定居，即(客族)或(客家人)。

原本务农的客家人以后就开始种稻米、栽茶树，亦出产莞香及凤梨。家采收珍珠的利益；现在，屯门和大埔已摇身一变成为新界的两个主要市镇。

香港早期的生活方式，可在一些小渔村和小田庄里找到历史证据。这些早期村落，许多至今仍有访御墙、护城河及守卫室保护着。