L'hôtel Waverly est un site patrimonial désigné pour son lien avec un meurtre célèbre, ainsi que pour son architecture de style Second Empire.

En 1887, Timothy McCarthy, un riche homme d'affaires et marchand de chevaux qui avait visité l'hôtel, disparaît dans la ville voisine de Pointe-du-Chêne. Son cadavre est retrouvé dans la rivière Scoudouc l'année suivante. Le meurtre a provoqué un tollé et l'on a soupçonné Harry Osbourne, dont le père dirigeait l'hôtel Waverly, de l'avoir volé et assassiné. Ce dernier est jugé et finalement acquitté des charges retenues contre lui, laissant le crime non résolu. Annie Parker, une femme de chambre qui travaillait à l'hôtel, a affirmé que la famille Osbourne avait bel et bien assassiné M. McCarthy pour son argent et qu'elle avait été témoin de l'événement. Cette tragédie a inspiré au chanteur folk Georges Arsenault une célèbre ballade de deuil qui décrit l'assassinat de M. McCarthy du point de vue d'Annie Parker : « Le Meurtre de Timothy McCarthy: Une Complainte Acadienne » .

L'hôtel est également un exemple du Second Empire, un style architectural qui, à l'époque, dominait les bâtiments, en particulier les hôtels, dans la région.