香港游艇会的前身是“维多利亚赛舟会”（Victoria Regatta Club），于1849年10月首次举办赛事。1889年，“香港科林斯式航海会”（Hong Kong Corinthian Sailing Club）成立。1893年，会所董事会向英国海军申请把会所易名为“皇家香港游艇会”（The Royal Hong Kong Yacht Club）。1997年香港主权移交，香港游艇会删除“皇家”一词，但英文名称的“Royal”则得以保留。

位于油街的前香港皇家游艇会会所

会址早期设在香港北角油街的游艇会会所。1938年，会所迁至维多利亚港中间的小岛奇力岛。二次大战后，1945年9月17日会所重开。1951年在会址建设一条堤坝，与香港岛连线起来。1972年，随着香港海底隧道启用，位于隧道出口侧的奇力岛在填海后成为香港岛的一部份。