Na idade Média Annecy foi capital a cidade de Genebra, do condado, e elevando-se no centro de Annecy, o castelo era a residência de grave das convenções de genebra de grafos. O castelo foi construído no século XII no local de uma fortaleza, que foi construída de quatro séculos antes. No século XIII tornou-se o local de residência dos membros графской sobrenome, mais tarde, mudou-se para a duques da sabóia.

Na idade Média, o castelo de várias vezes уничтожался fogo, mas ele cada vez restaurado, cada vez mais fortalecendo suas defesas. No entanto, apesar da espessura das paredes, um olhar ameaçador, e uma localização privilegiada no topo de uma colina, na primeira metade do século XVII, o castelo foi tomado o exército francês. No século XVII, o castelo abrigava o quartel e armazém, ao mesmo tempo, ele mesmo serviu como um refúgio para os moradores de rua. Somente em meados do século XX, o edifício foi atribuído o estatuto de monumento histórico, e hoje nele abrigar o museu, no qual é possível ver obras de arte e objetos de diferentes épocas.

Um dos famosos moradores do castelo foi Robert de Genebra - gerou aqui em 1342 filho do conde de Amadeus III. Robert de Genebra conhecido também pelo nome de антипапы Clemente VII – bastante marcial e cruel, cognominado o açougueiro e o carrasco, por seus métodos de trabalho com os rebeldes. Na segunda metade do século XIV, no mundo católico, havia dois papas – um oficialmente eleito Urbano VI e o segundo, eleito кардинальской "oposição" Clemente VII, que desejava tomar Roma o poder e derrubar o Urbano VI. Depois de sofrer um revés, антипапа Clemente estabeleceu-se em Avignon, que já foi residência papal.

Após a morte de Clemente VII em 1394 Annecy foi combinada com Савойей e perdeu o status de capital do condado, e sim o de Genebra, o condado também, não se tornou. Graças duques da sabóia castelo adquiriu a sua mais bela torre Перрьер.

Hoje, o castelo está rodeado de belas скверами e outros locais históricos. Com suas paredes visível a própria cidade e o lago de Annecy.