Data fondarii castelului Rathfarnham este incerta, probabil in jurul anului 1583. A fost construit de catre Adam Loftus de Yorkshire. Castelul are o istorie interesanta si plina de culoare, cu interioare create in secolul XVIII de catre Sir William Chambers si James Athenian Stuart si a fost declarat monument national la mijlocul anilor 1980. Castelul este in prezent in curs de conservare activa. Vizitatorul poate vedea sclipiri ale existentei anterioare a castelului, descoperite in timpul cercetarilor.

Ramasitele scheletice ale unei femei tinere au fost descoperite intr-unul din golurile peretilor de la etajul de mijloc in 1880. Se crede ca ramasitele au stat acolo peste 130 de ani.

Legenda spune ca o tanara fata a fost inchisa intr-un compartiment secret in timpul uneuia dintre balurile celebre de la castel. Doi pretendenti se certau pentru dragostea ei si au decis sa-si rezolve diferentele prin intermediul unui duel. Supravietuitorul ar salva apoi fecioara din perete. Au murit insa amandoi, unul inecat, iar celelalt de pe urma ranilor primite in timpul duelului. Intreaga afacere fiind realizata in secret, frumoasa fata a ramas inchisa in perete, unde a murit.