Le Banker Horse vit sur les îles de Caroline du Nord depuis des siècles. Les ancêtres du poney Banker sont probablement les poneys espagnols qui arrivèrent à bord du navire Hispaniola qui fit naufrage au XVIème siècle. Ces poneys auraient nagé depuis les bateaux naufragés pour atteindre les îles. En 1957, un appel fut lancé par le gouvernement pour permettre à ces poneys sauvages de rester dans les îles de Caroline du Nord. En 1998, l’acte de protection des poneys Banker fut annoncé comme une loi publique. Cet acte de protection est appelé le “Shackleford Banks Wild Horses Protection Act” dont la mission est de protéger tous les poneys Banker dans les îles de Hatteras, Shackleford, et Ocracoke. Actuellement, dus aux différents problèmes environnementaux et certaines négligences, la population de la race est en déclin.

Le Banker Horse est différent des autres chevaux sauvages car il est généralement calme.