日本百名城にも選ばれている国指定史跡で、南北朝時代の高遠氏に始まり、武田氏、毛利氏、京極氏、保科氏、鳥居氏、内藤氏と城主が変遷。城の原形は武田氏に仕えた山本勘助が縄張りをしたと伝えられます。
廃藩後には公園となり、旧藩士たちの手で移植された桜は「天下第一の桜」として名高く、日本三大桜の名所のひとつにも。高遠固有種の「タカトオコヒガンザクラ」の樹林は、昭和35年（1960年）に長野県天然記念物にも指定されています。桜の花はやや小ぶりだが色が濃く、満開時は天を覆うように咲きます。
園内には高遠閣、無字の碑、新城藤原神社など見どころも多く、春はさくら祭り、秋には紅葉を愛でるもみじ祭りが行なわれ、四季を通じて散策が楽しめます。（さくら祭り期間中のみ入園有料）