A L'Huillier-Coburg-kastély az ország egyik legnagyobb és legjelentősebb barokk kastélya, melyet Kelet-Magyarország Fertődjeként tartanak számon. Az 1727-28-ban épült együttest a lotharingiai származású L'Huillier Ferenc János egri várkapitány építtette. L'Huillier katonaként részt vett a török elleni küzdelemben, Buda visszafoglalásában, s e harcok során szerzett érdemeiért bárói címet kapott. A kastély terveit Giovanni Battista Carlone egri püspöki építész készítette. A cour d'honneur-ös, két saroktornyos épület egyéni megjelenésű, főhomlokzatánál a héttengelyes, négyszintes középrizalit dominál. Az 1770-es években alkotta meg Lieb Ferenc festő a kastély emeleti hét szobájának rokokó díszítőfestését, amely a legteljesebben fennmaradt világi falképegyütteseink közé tartozik. Külön érdekessége, hogy a falképek női figuráinak mindegyike Mária Terézia arcmását mutatja. A 19. században Edelény a Szász-Coburg-Gothai hercegi család birtokába került. A família életében nem számított jelentősnek a kastély, s egy részét 1861-ben Járásbíróság céljaira engedték át. 1928-ban az Igazságügyminisztérium tulajdonába került a kastély, melyben még börtönszárnyat is létesítettek. A második világháború után lakások, óvoda, Járási Ügyészség kapott helyet a kastélyban, parkjának jelentős részét pedig felszabdalták.
Az 1990-es években hosszú ideig üres álló és romló műemlékegyüttest 2001-ben vette át a Műemlékek Nemzeti Gondnoksága és elvégezte a legégetőbb állagvédelmi munkákat. 2004-2006 között egyes részek helyreállítására - például a középrizalit tetőszerkezete - is sor került.