Cet édifice est représenté sur le cadastre de 1831 selon une emprise similaire à l'actuel bâti. Selon le registre des constructions nouvelles, en 1906, Raymond Olazabal, originaire de Montevideo (Urruguay), agrandit la maison d'habitation et construisit un four à pain. D'après le registre des débits de boisson et des hôtels-restaurants, en 1928, il transforma la maison en une auberge.

Selon une carte postale datant du début des années 1930, l'auberge se composait d'un volume principal de plan rectangulaire. Sa façade principale était divisée en trois travées régulières et comportait un rez-de-chaussée, un étage carré et un grenier. Le nom était inscrit sur un panneau de bois fixé au dessus de la travée centrale. Un second volume de plus petite taille attenant à la façade nord abritait la buvette. D'après l'encart publicitaire du guide touristique datant des années 1930, c'était une pension de famille avec une terrasse offrant des vues sur l'océan et la montagne et des chambres à des prix très modérés.

D'après le registre des dommages de guerre, l'auberge fut réquisitionnée par l'armée allemande de juin 1944 à août 1944. L'auberge comportait alors une salle de restaurant et six chambres sans eau courante. D'après une photographie des années 1950, ce fut à cette période que l'on retira le panneau de bois pour le remplacer par un bandeau peint mentionnant "Auberge Raymond Pension".