Pierwsza wzmianka o wsi pochodzi z kronik z 1325 roku. Damno składało się niegdyś z dwóch części zwanych Wandisch Dammen i Gross Dammen. Pierwsza część zamieszkana była przez Kaszubów, a w drugiej mieszkali niemieccy koloniści. W 1419 roku Damno było częścią dóbr Zakonu Krzyżackiego. Gospodarzyli na nich von Schwavenowie, von Weiherowie i von Belowie. W 1696 roku Gard von Below sprzedał wieś Klausowi Heinrichowi von Lettow. Klaus posiadał wieś jeszcze w 1717 roku. W 1800 roku wieś należała do rodziny von Mitzlaff. W 1838 roku wieś zakupił Arnold za 40 tysięcy talarów. Księga adresowa wymienia kilku ostatnich właścicieli: rodzina Arnold (1884 rok), porucznik Fritze (1893 rok), A. von Livonius (1924/28 rok) oraz Dr E. von Livonius (do 1945 roku).
Dwór znajdujący się w Damnie został wybudowany w latach 30-tych XX wieku.