Rasa de ponei Banker este originara din Insulele Outer Bank din Carolina de Nord. Stramosii acestor ponei au fost caii Spanioli, care au ajuns in aceasta zona in timpul Hispaniolei din secolul XVI. Acesti ponei salbatici si-au facut aparitia pe insula cu mult timp inainte de colonizarea britanica. Cu un instinc de supravietuire bine dezvoltat, poneii Banker sunt capabili sa manance ierburile aspre care cresc pe langa mlastini si sa sape gropi in nisip in cautare de apa proaspata. In 1957, o pledoarie a fost adresata Guvernului pentru a permite acestor ponei salbatici sa continue sa traiasca pe aceste insule. Pana in 1980, interesul public fata de acesti ponei a crescut considerabil. In urma uneor teste genetice, specialistii au hotarat ca foarte multi dintre acesti ponei erau destul de "puri" din punct de vedere genetic pentru a fi recunoscuti oficial. In prezent, mai exista cateva sute de ponei Banker, acestia fiind protejati prin lege.