O Cais Pharoux recebeu este nome por causa do francês Luís Adolfo Pharoux, que veio para o Brasil na época da Santa Aliança e instalou um hotel na rua Fresca (depois rua Clapp e, com o hotel, rua Pharoux), na esquina do Largo do Paço, com janelas que davam para o mar e uma ponte própria para o desembarque de passageiros. Na praia do Largo do Paço o vice-rei Luís Vasconcelos mandou construir, em 1779, um cais semelhante ao que havia em Lisboa. Acabou sendo parcialmente destruído pela violência das ondas que nele batiam. Sua primeira remodelação foi no reinado de D. João VI, em que novos aterros fizeram com que fosse para frente, e ganhou definitivamente o nome de Pharoux. Era da ponte do Hotel Pharoux que saíam as barcas que faziam a travessia do Rio para Niterói.