Die Familie Baron von Papius entstammt dem zu den Erbsälzern zu Werl gehörenden westfälischen Geschlecht der Herren von Papen zu Scheidingen und Westrich. Albertus dictus Papa et Hermannus filius, Sälzer zu Werl, wird erstmals 1289 urkundlich erwähnt.

Im 17. Jahrhundert wurde eine Linie des Geschlechtes in Bayern ansässig und nannte sich im Zuge der Latinisierung "von Papen gen. Papius". Im Jahre 1868 wurde Dr. Philipp Heinrich von Papen gen. Papius, Mitglied des Reichs- und Landtages, päpstlicher Geheimkämmerer di spada e capa, in den Freiherrenstand erhoben.

Die Familie Baron von Papius ist bis heute in Baden-Württemberg und Bayern ansässig.