Тируваннамалай упоминается в легенде ранневедических времён о споре между Брахмой и Вишну о превосходстве, который разрешил Шива, доказав своё превосходство как над Брахмой, так и над Вишну — история о том, как Шива принял облик колонны света. Как считается, священная гора Аруначала — символ той колонны света. Также в Тируваннамалае жили великий философ Бхагаван Шри Рамана Махарши, великий святой Шри Шешадри Свамигал, святой йог Рамсураткумар и другие мудрецы и йоги.