Hotel Ullensvang har en av de mest bemerkelsesverdige opprinnelseshistoriene i norsk hotellbransje. I 1846 roet en 14 år gammel gutt ved navn Hans Utne over fjorden fra Utne og kjøpte et lite stykke kystlinje. Han bygde et båthus og leide ut sin egen halmseng på loftet over. Året etter satte han inn en seng til. Det var begynnelsen.
Hans giftet seg med Brita, datter av Johannes Johannessen Aga, en av Norges første stortingsrepresentanter. Sammen bygde de hotellet, og Utne-familien drev det i fem generasjoner frem til det ble solgt i 2021.
Den mest berømte gjesten var komponisten Edvard Grieg. Han kom første gang i 1877 og tilbrakte mange somre her, pluss én vinter. Da han ikke kunne arbeide i det travle hotellet, fikk han bygget en liten trehytte i åssiden. Lokalbefolkningen kalte den spøkefullt«Komposten». Inne i den lille hytta, med plass til bare et piano, en ovn og seg selv, komponerte Grieg noen av Norges mest elskede musikkverk: «Våren», Strykekvartetten i g-moll, «Den Bergtekne» og deler av Holberg-suiten. Hytta står fortsatt i hotellhagen.
Skandinaviske konger og keiser Wilhelm II har overnattet her. Dronning Sonja er en fast gjest.
Hver generasjon reinvesterte hele overskuddet i utvidelsen av hotellet – fra to senger til 168 rom med spa, bassenger og en 88 meter lang svømmebane.