La Cache se situe près de l'immeuble Walter Benny.
Le maître boulanger Walter Benny fait construire cet immeuble en 1834-1835. Benny acquiert en décembre 1833 l’emplacement avec une maison, une boutique et ses dépendances, la maison donnant sur la rue du Saint-Sacrement devant être enlevée par l’ancien propriétaire. Lorsque Benny loue l’emplacement en novembre 1835 pour le mois de mai suivant, il y a fait bâtir un nouvel immeuble en pierre de trois étages, incluant le rez-de-chaussée. Les épiciers de gros George D. Watson et John Black occupent les lieux jusqu’en 1847. Un autre épicier de gros, des commissaires-priseurs et des marchands leur succèdent. Possédant au départ une double vocation commerciale et résidentielle, comme le démontre le rôle foncier de 1849, l’immeuble ne sert plus qu’au commerce dès 1855.
Walter Benny décède en décembre 1870 et sa succession demeure en possession du bâtiment pendant plus d’un siècle. L’immeuble est occupé par des marchands de vin au cours des décennies 1870 à 1890. Au tournant du siècle, il sert de bureaux à des agents et des importateurs et est aussi utilisé à des fins d’entreposage. L’entreprise Provincial Cotton & Fibre Company Limited, spécialisée dans la vente de textiles et de cordages, et la compagnie Canvas Equipment Limited, oeuvrant dans le commerce de la toile, marquent par la suite l’histoire du bâtiment pendant plus de soixante ans. Entre-temps, vers 1955, ce dernier est rehaussé d’un étage et est coiffé d’un toit plat.
À la fin des années 1990, l’immeuble fait l’objet d’importants travaux de rénovation : les dépendances à l’arrière sont rehaussées de deux étages, intégrées au bâtiment principal et l’ensemble est recyclé en logements en copropriété.