Původní budovu na tomto místě postavil v roce 1652 anglický přistěhovalec Francis Brinley. V roce 1673 prodal pozemek Williamu Mayesovi, který budovu rozšířil na hostinec. Budova sloužila také k pořádání velkých shromáždění, mimo jiné jako místo zasedání generálního shromáždění Rhode Islandu, soudní budova a radnice. William Mayes získal licenci na provozování hostince v roce 1687 a jeho syn William Mayes mladší jej provozoval až do počátku 18. století. V roce 1730 byl provoz majitelem Jonathanem Nicholsem pojmenován „The White Horse Tavern“.
Během britské okupace Newportu za americké revoluce, přibližně v době bitvy o Rhode Island, zde byli ubytováni toryové a britští vojáci. Newportská rodina Van Buerenů věnovala v roce 1952 soukromé společnosti Preservation Society of Newport peníze na obnovu budovy, která byla po letech zanedbávání využívána jako penzion. Po obnově byla budova prodána a opět provozována jako soukromý hostinec a restaurace a dodnes je oblíbeným místem pro pití a stravování.