最早的黑人是居住在撒哈拉以南的地区，过着虽然贫穷但也还算安定的日子。但是后来欧洲的国家看中了他们的廉价劳动力，就对他们实行了奴隶贸易，将大量的黑人贩运到美洲等地，后来慢慢的黑人就散布在美洲各地了。又随着社会经济的发展，一些经济富裕的黑人，不愿在贫穷落后的非洲发展，于是很多非洲人移民至其他发达国家。
日本则是非洲黑人移民的一个热门国家，有一部分黑人是通过合法途径移民到日本的，他们做着小本生意，在当地充当农业、工业劳动力，也逐渐的发展起来，生活过着也是有滋有味。但这也仅限于不作乱、不作恶、不违反的黑人，有些则是完全完全不同的。
当时日本经济发展迅猛，需要大量的劳动力，很多黑人就想尽办法偷渡到日本，通过非法途径进入，希望能在日本找到一份工作，能安定下来。但也只是少数人的想法，有不少黑人仍是不改掉之前的坏习惯，在日本进行抢劫、盗窃、侵扰女性的行为，给当地治安、社会秩序带来了很大影响。
在上个世纪90年代，当时非法滞留在日本的黑人达到50万人，就算是一半的黑人是勤勤恳恳，热爱工作，不扰乱治安的，但也还有一半的人做着扰乱治安的事情，这让日本感到很有危机感，并且日本民众也强烈谴责黑人，并对日本当局施压，请求驱逐这些非法滞留的黑人，让他们离开日本。日本政府为了社会治安以及民众的安全着想，后来付了几千万美元给莫桑比克，将这些黑人遣返该国。
此外，每个黑人还另外给了一千美元的安家费。虽然莫桑比克同意了日本遣返回黑人回来，但是黑人仍不愿就此生活在贫穷的莫桑比克，这时候拿着遣散费的黑人，想去其他经济发达的国家，但是无人肯接收，为此他们就将目光投向了我国广州，这也就有了“广州黑人”这一说法。
据统计，巅峰时期，广州黑人数量超过30万人。他们居住在广州几个固定的地区，也是亚洲最大的黑人团体，跟日本相同的情况，一部分黑人来到广州是做小本生意，又或者留学工作的，他们遵纪守法，没有做过危害当地安全的事情。但是数量多了，总有一些游手好闲之人。
特别是一些非法滞留的黑人，他们受教育程度低，又不肯老实工作，于是也做了不少违法犯罪之时，这无疑给当地治安带来影响。曾经一度，随着黑人的增多，他们的犯罪率增加，也引起了当地的密切关注，为了保护当地民众的安全，广州采取了行动，对非法入境、非法就业的黑人进行了遣返。并且违法犯罪的也抓了不少，如今生活在广州的黑人少了很多，不足十万人。
