葡萄牙人于是转而向北，销声匿迹于广东沿海。

    1540～1548年，葡萄牙人与日本人，以及明朝以徽州人为主的海盗商人结伙，一同纠集在舟山群岛上的双屿岛；1549年在明朝东南沿海抗倭斗争中葡萄牙人又被逐出福建海界；在1550～1553年，葡萄牙人完成了上川—浪白澳—澳门的贸易基地的过渡。

    澳门当时叫壕镜澳，归香山县管辖，是南海诸国贡舶贸易船的临时停泊点之一。像这样的临时停泊点，广东沿海有将近10个，来朝贡的番船入珠江口前，必须先在各澳接受澳官检查。

    1552年，第一个耶稣会传教士到达澳门，未能进入中国内地便病死。1553年，葡萄牙买通广东海道副史汪柏，“托言舟触风涛缝裂，水湿贡物，愿暂借地晾晒”，从而得以入居澳门。葡萄牙人初时也是搭建暂住式草棚，后澳官因受贿赂，不仅不命其撤去，而且默允他们运砖瓦木石，修建永久性的住房。如此房屋越建越多，在四五年时间内，澳门便初具城市规模。

    葡萄牙商人因控制了日本、马尼拉和欧洲的贸易航线而趾高气扬，无视广东政府的法令，从事走私活动，许多葡萄牙的船只到处在沿海停泊，全不理会中国官吏一再提出的反对抗议，中国对这些船只无法征收船钞和关税，但偶有船只被拿获，这些葡萄牙人便嚣张地反对地方长官，诡辩说他无权惩罚私商。这种争吵的结果是中国封闭了广州（1631年），不许葡萄牙船只入口，崇祯十三年（1640年），明政府正式宣布禁止葡萄牙人进入广州贸易。

    尽管浙江宁波，福建漳州、厦门等闽浙地区的商人，曾在明末的一个世纪内与葡萄牙、西班牙、荷兰等国家商人，或以合法身份或以走私形式打过交道，但这种交道因明政府与海盗持续不断的战争而断断续续。虽然买办也在这期间出现过，但并没有形成足以传承和延续的空间和环境。

    1577～1842年，葡萄牙除1685～1717年和1724～1760年外，大部分时间都以其租借澳门的独特优势，以澳门作为广东外贸的中转港身份，独揽着中国对外的贸易往来。1842年，中英《南京条约》签订，香港被英国占领，中国开放广州、福州、厦门、宁波、上海五口通商。从此以后，澳门的外贸完全衰落。1887年，葡萄牙通过中葡《北京条约》攫取了对澳门的“永驻管理”权，直到1999年12月20日澳门回归。

    葡萄牙依托澳门的200多年的合法而较为稳定的垄断贸易，使得广州府理所应当地成为中国最早出现买办群体的地区。广帮买办又以香山人居多，这与葡萄牙先于西班牙、荷兰、英国等国与中国贸易有关。当时澳门归香山管辖，香山与澳门这种先天的联系，决定了香山是中国最先接受欧风美雨洗礼的地方。

    容闳，1828年11月出生于香山县南屏乡，幼入澳门西塾读书，14岁入读澳门马礼逊学校，后随校迁香港就读。1847年该校校长布朗带他就读于美国马萨诸塞州孟松学校。1850年，容闳考入耶鲁大学，1854年毕业，获文学学士学位，成为该校有史以来第一位毕业于美国高等学府的中国留学生。

    容闳以留学事业先驱的角色而在中国历史上占有一席之地。1870年他与曾国藩、李鸿章第二次联名上奏，选送幼童赴美留学。这一计划在第二年获得清政府批准。1872～1875年，清政府先后送了4批共120名学童赴美留学。其中，40名为香山县幼童。

    在当时的社会观念下，官员不愿把自家子弟送到国外去，民间更有关于西洋的种种不祥传说，以至于第一年容闳在上海竟凑不足第一批30个名额的学生，他只好回老家香山去动员乡亲，最终成行。这第一批30名幼童中包括后来任北洋大学校长的蔡绍基、沪宁铁路