Francis Brinley, un immigrant anglais, construit le bâtiment original sur le site en 1652. En 1673, il vendit le terrain à William Mayes qui agrandit le bâtiment pour en faire une taverne. Le bâtiment a également été utilisé pour de grandes réunions, notamment comme lieu de réunion de l’assemblée générale du Rhode Island, comme palais de justice et comme hôtel de ville. William Mayes a obtenu une licence de taverne en 1687, et son fils William Mayes, Jr. l’a exploitée jusqu’au début du XVIIIe siècle. L’exploitation a été baptisée « The White Horse Tavern » en 1730 par le propriétaire Jonathan Nichols.
Des tories et des troupes britanniques y ont été cantonnés pendant l’occupation britannique de Newport lors de la Révolution américaine, à peu près au moment de la bataille de Rhode Island. La famille Van Bueren de Newport a donné de l’argent à la société privée Preservation Society of Newport pour restaurer le bâtiment en 1952, après des années de négligence en tant que pension de famille. Après la restauration, le bâtiment a été vendu et à nouveau exploité comme une taverne et un restaurant privés, et il reste aujourd’hui un lieu populaire pour boire et manger.