Na miejscu obecnego Pałacu Działyńskich znajdowały się początkowo dwie kamienice. Jako pierwszy w jego posiadanie wszedł Marszałek Wielki Litewski - Władysław Roch Gurowski. Dopiero od 1808 roku należał do rodu Działyńskich, jednak tylko na niecałe 80 lat, kiedy to Działyński zmarł bez potomstwa. Jako następny w jego posiadanie wszedł Władysław Zamoyski i włączył do Fundacji Zakłady Kórnickie w 1924 roku. Od 1887 roku mieszkał tu ginekolog oraz założyciel i pierwszy rektor Wszechnicy Piastowskiej - Heliodor Święcicki wraz z żoną, przenosząc swoją klinikę położniczą. W trakcie zaborów służył za ośrodek kulturalny, gdzie organizowane były spotkania dotyczące walk powstańczych. Pełnił także rolę nieoficjalnego uniwersytetu. Od 1934 roku organizowane tu były "czwartki literackie". Aktualnie znajdują się tu instytuty naukowe Polskiej Akademii Nauk oraz ekspozytura Biblioteki Kórnickiej.  W 1945 roku budynek spłonął podczas walk i został odbudowany w latach 1953-1957, jednak bez odtworzenia skrzydła zachodniego i ogrodu francuskiego. Zrezygnowano także z pomieszczeń na parterze, w których znajdowały się stajnia, wozownia i inne pomieszczenia gospodarcze.