हिंदू धर्म का ऐसा ही एक पवित्र और प्रसिद्ध मंदिर पहाड़ियों की चोटी पर आता है और उस पहाड़ी को रत्नागिरी पहाड़ी के नाम से सभी जानते हैं। रत्नागिरी नाम की उस पहाड़ी का नाम क्यों था, इसके पीछे भी एक पुरानी कहानी है। ऐसा कहा जाता है कि एक बार पहाड़ियों के देवता मेरुवु और उनकी पत्नी मेनका ने मिलकर भगवान विष्णु के लिए घोर तपस्या की थी। उनकी कठोर तपस्या को देखकर भगवान विष्णु प्रसन्न हुए और उन दोनों को दो पुत्रों का वरदान दिया। उनमें से एक का भद्रा नाम का एक पुत्र था और दूसरे का रत्नाकर था। भद्रा ने भी कठोर तपस्या करके भगवान विष्णु को प्रसन्न किया और भगवान ने भी उनकी तपस्या से प्रसन्न होकर उन्हें भद्राचलम बनने का वरदान दिया।
उन पर भगवान श्री राम का रूप हमेशा के लिए स्थापित हो गया। अपने भाई के नक्शेकदम पर चलते हुए रत्नाकर ने भी तपस्या करके भगवान विष्णु को प्रसन्न किया। उनकी तपस्या से प्रसन्न होकर भगवान विष्णु ने उन्हें रत्नागिरी (पहाड़ी) बनने का वरदान दिया और भगवान विष्णु स्वयं उस रत्नागिरी पहाड़ी पर विराजमान हुए और वे जिस रूप में प्रकट हुए वह वीर वेंकट सत्यनारायण स्वामी का अवतार था। कुछ समय बाद, एक जमींदार श्री आई.वी. रामनारायण के सपने में आया और सपने में उनसे कहा कि मेरे लिए एक मंदिर बनवाओ। इसी के चलते उन्होंने 1891 में भगवान का मंदिर बनवाया।
आज हम जो मंदिर देखते हैं वह वही पुराना मंदिर है जिसे आज अन्नावरम मंदिर से सभी जानते हैं और हां उस मंदिर में भगवान की मूर्ति भी उसी पहाड़ी पर है। अन्नावरम मंदिर द्रविड़ शैली में बना है। यहां का मुख्य मंदिर एक रथ के रूप में बना है और इसके चार पैर हैं। मंदिर की संरचना अग्नि पुराण के अनुसार बनाई गई है ताकि यह प्रकृति की तरह दिखे। मंदिर को रथ के रूप में दिखाया गया है क्योंकि वह रथ दुनिया के सात लोकों का प्रतिनिधित्व करता है और सबसे ऊपर भगवान का गर्भगृह है, जहां ऐसा लगता है कि भगवान पूरी दुनिया को चला रहे हैं। अन्नावरम मंदिर के अलावा, और भी महत्वपूर्ण भगवान श्री राम मंदिर और वन दुर्गा देवी और कनक दुर्गा देवी के मंदिर हैं और उनकी बहुत श्रद्धा के साथ पूजा की जाती है।
यात्रियों की सुविधा के लिए मंदिर के सामने कल्याण मंडप और गौरी कल्याण मंडप की व्यवस्था की गई है। दोनों मंडप भी नई वास्तुकला में बने हैं। मंदिर की उत्तर दिशा में जुलाई 1943 में लोगों को समय का पता चल पाता था, इसीलिए दिल्ली के जंतर मंतर पर जो घड़ी है, वह यहां भी 'सूर्य डायल' के रूप में दिखाई देती है। परिसर में वेद पाठशाला की व्यवस्था की गई है ताकि ब्राह्मणों के सभी छात्र यहां पढ़ सकें। उनके रहने और खाने की भी सुविधा स्कूल में ही उपलब्ध है। कल्याण के दिनों में और त्योहारों के दिनों में, यहां धार्मिक मामलों पर चर्चाएं आयोजित की जाती हैं।