Dès le 16e siècle, la grève de Pont-Scorff était utilisée par la Marine pour débarquer vivres et matériel destinés aux troupes qui stationnaient sur la côte. La grève de Pont-Scorff desservait les magasins militaires situés en bordure de l´anse. L´armée possédait les maisons qui, fin 18e siècle, abritaient le commandant de Quélern et le service des fermes (impôt). La fontaine qui donne sur la mer, indispensable pour le ravitaillement en eau, existait déjà au 17e siècle. Au milieu du 19e siècle, une proposition de construction d´une cale dans la continuité du mur de soutènement de la falaise fut faite mais le choix se porta finalement sur le site du port actuel, dans le bourg. C´est dans les anciens magasins occupés par la Marine que la famille Lecoeur installa la nouvelle auberge de jeunesse en 1945 ainsi que la poste après la Libération.