苏丹诸帝国的另一个弱点是，易受北方柏柏尔人的攻击；这些柏柏尔人或是寻找非洲黄金的发源地，或是企图将其特殊形式的信仰强加于别人。1076年，狂热的阿尔摩拉维德人推翻了加纳帝国。同样，1591年，摩洛哥的入侵摧毁了桑海帝国。桑海帝国的灭亡，标志着苏丹帝国时代的结束。用17世纪廷巴克图一位历史学家的话来说："从那时起，一切都改变了。危险代替了安全，贫穷代替了富裕，不幸、灾难和暴力代替了和平。……"oi