Ursprünglich belegte der Volksmund mit diesem Spottnamen hanseatische Händler, die durch den Gewürzhandel reich geworden waren. Im 15. Jahrhundert waren damit auch die großen Handelshäuser der Fugger, Tucher und Welser gemeint, die ebenfalls im Gewürzhandel mitmischten.
Bis weit ins 15. Jahrhundert hinein unterhielten sie einen Handelsstützpunkt in Venedig, der Drehscheibe des internationalen Gewürzhandels. Man ersteigerte die wertvollen Güter, um sie über die Alpen ins östliche und nördliche Europa oder weiter per Schiff nach Westen über Gibraltar bis nach England zu transportieren und sie mit großen Gewinnspannen weiterzuverkaufen. Der gewaltige Reichtum der großen süddeutschen Handelsunternehmen, allen voran der Fugger mit Sitzen in Augsburg und Nürnberg, resultierte aus vielerlei Aktivitäten, doch stets spielte der Gewürzhandel dabei eine große Rolle. Sie überrundeten schließlich auch die Hanse, den äußerst erfolgreichen Bund norddeutscher Kaufleute, und übernahmen von jenen unfreiwillig das Attribut "Pfeffersäcke".