Budynek przy ulicy Gimnazjalnej 2 to zabytkowa kamienica. W pierwotnej formie wzniesiono ją w latach 70. XIX wieku. W kolejnych latach obiekt przebudowywano. W latach 1916-45 pełniła funkcję kliniki medycznej. Charakterystycznym elementem kamienicy jest wykusz w ściętym narożniku zwrócony na plac Wolności. Elewację frontową klasycyzującej kamienicy  zdobią między innymi gzymsy, naczółki i boniowanie na wysokości parteru. Elewację od strony południowej wieńczy płaski trójkątny szczyt.

Połowę zabudowań należących obecnie do Kujawsko-Pomorskiego Funduszu Pożyczkowego otwarto i udostępniono przedsiębiorcom w 2015 roku. Wówczas odnowiono przyległą do kamienicy willę z nr 2a. Teraz rozpoczął się remont drugiej części zabudowań z kamienicą. Budynek w trakcie przygotowań do remontu zabezpieczały plandeki z wizualizacjami.W pierwszej kolejności realizowane są między innymi roboty przy izolacjach, rozbiórki części ścian działowych i dachu.

Dzięki tej inwestycji powstanie około tysiąc metrów kwadratowych powierzchni biurowych. W obiekcie znajdzie się również sala konferencyjna z zapleczem oraz pomieszczenia przeznaczone na warsztaty rzemieślnicze i produkcyjne.  Zdecydowanie na estetyce zyska też plac Wolności. Zakończenie budowy przewidziane jest jeszcze w tym roku. Rozwój infrastruktury biznesowej zapewnić ma lepszy rozwój sektora małych i średnich przedsiębiorstw. Projekt otrzymał wsparcie z funduszy unijnych RPO w wysokości ponad 8 mln złotych. Wartość wszystkich prac projektowo-budowlanych to prawie 11 mln zł. Odpowiada za nie bydgoska firma „Kontbud”.

Ulica Gimnazjalna została wytyczona w II połowie XIX wieku. Początkowa prowadziła wyłącznie przez pola znajdujące się na zapleczu budynków stojących wzdłuż ul. Gdańskiej. W 1877 roku powstał gmach obecnego liceum. W Na przełomie XIX i XX wieku ten obszar miasta zaczął być intensywnie zabudowywany kamienicami.

Z tego okresu pochodzi między innymi elegancka pierzeja tworzona przez budynki z numerami 4,6 i 8. W ostatnich latach ulica Gimnazjalna stała się modnym miejscem, w którym odbywa się wiele ciekawych wydarzeń. Latem organizowane jest święto ulicy.