एआई की सुविधाओं की लागत, इस्तेमाल, और अन्य मेट्रिक पर नज़र रखना, प्रोडक्शन ऐप्लिकेशन को चलाने का एक अहम हिस्सा है. आपको यह जानना होगा कि आपके ऐप्लिकेशन के लिए, सामान्य इस्तेमाल के पैटर्न कैसे दिखते हैं. साथ ही, यह पक्का करना होगा कि आप उन थ्रेशोल्ड के अंदर रहें जो आपके लिए ज़रूरी हैं.
इस पेज पर, Firebase कंसोल और Google Cloud कंसोल, दोनों में लागत, इस्तेमाल, और अन्य मेट्रिक पर नज़र रखने के लिए, सुझाए गए कुछ विकल्पों के बारे में बताया गया है.
लागत पर नज़र रखना
Firebase कंसोल के इस्तेमाल और बिलिंग डैशबोर्ड में, Agent Platform Gemini API (formerly Vertex AI) और Gemini Developer API को कॉल करने के लिए अपने प्रोजेक्ट की लागत देखी जा सकती है. ऐसा तब किया जा सकता है, जब आपने ब्लेज़ प्लान की बिलिंग की जानकारी चुनी हो.
यह ज़रूरी नहीं है कि डैशबोर्ड पर दिखाई गई लागत, Firebase AI Logic क्लाइंट एसडीके का इस्तेमाल करके की गई कॉल के लिए ही हो. दिखाई गई लागत, "Gemini API" को किए गए किसी भी कॉल से जुड़ी होती है. भले ही, वे Firebase AI Logic क्लाइंट एसडीके, Google GenAI सर्वर एसडीके, Genkit, Gemini API के लिए Firebase Extensions, REST कॉल, किसी AI Studio या अन्य एपीआई क्लाइंट का इस्तेमाल कर रहे हों.
Firebase AI Logic के इस्तेमाल से जुड़े प्रॉडक्ट की कीमत के बारे में ज़्यादा जानें.
बजट से जुड़ी सूचनाएं और खर्च की सीमाएं सेट अप करना
ब्लेज़ प्लान की बिलिंग की जानकारी का इस्तेमाल करते समय, अचानक आने वाले बिल से बचने के लिए, बजट से जुड़ी चेतावनियां और खर्च की सीमाएं सेट अप करें.
ध्यान दें कि बजट से जुड़ी सूचनाएं, बजट की सीमाएं नहीं होती हैं. अलर्ट की मदद से, आपको चेतावनी वाले ईमेल भेजे जाएंगे. ये ईमेल तब भेजे जाएंगे, जब आपका खर्च आपके बजट की तय सीमाओं तक पहुंच जाएगा. इससे आपको अपने ऐप्लिकेशन या प्रोजेक्ट में कार्रवाई शुरू करने में मदद मिलेगी. अगर आपको बजट खत्म होने पर सेवा को रोकना है, तो आपको खर्च की सीमा वाला बजट सेट करना होगा.
Firebase कंसोल में, एआई की सुविधाओं के इस्तेमाल पर नज़र रखें
Firebase कंसोल के Firebase AI Logic पेज पर जाकर, एआई मॉनिटरिंग की सुविधा चालू की जा सकती है. इससे आपको ऐप्लिकेशन-लेवल की अलग-अलग मेट्रिक और इस्तेमाल से जुड़ी जानकारी देखने को मिलेगी. साथ ही, Firebase AI Logic क्लाइंट एसडीके से मिले अनुरोधों की पूरी जानकारी मिलेगी. ये डैशबोर्ड, Count Tokens API को कॉल करने पर मिलने वाले टोकन की बुनियादी संख्या की तुलना में ज़्यादा जानकारी देते हैं.
Firebase कंसोल में एआई मॉनिटरिंग की मुख्य सुविधाओं में ये शामिल हैं:
अपने हर ऐप्लिकेशन के लिए, अनुरोधों की संख्या, इंतज़ार का समय, गड़बड़ियां, और हर मोडैलिटी के लिए टोकन के इस्तेमाल जैसी संख्यात्मक मेट्रिक देखना.
ट्रेस की जांच करके, अपने अनुरोधों के एट्रिब्यूट, इनपुट, और आउटपुट देखना. इससे डीबग करने और क्वालिटी को बेहतर बनाने में मदद मिल सकती है.
अनुरोध की स्थिति, कम से कम इंतज़ार का समय, मॉडल का नाम वगैरह जैसे डाइमेंशन के हिसाब से डेटा को स्लाइस करना.
ये सभी सुविधाएं, Google Cloud Observability Suite का इस्तेमाल करके बनाई गई हैं. नीचे प्रॉडक्ट की ज़्यादा जानकारी देखें.
एआई मॉनिटरिंग की सुविधा चालू करना
Firebase कंसोल में एआई मॉनिटरिंग की सुविधा चालू करने के तरीके यहां दिए गए हैं:
जब एआई सेवाएं > Firebase AI Logic पेज पर जाकर, शुरुआती सेटअप वर्कफ़्लो को पूरा किया जाता है
एआई सेवाएं > एआई लॉजिक > सेटिंग टैब में जाकर, कभी भी
एआई मॉनिटरिंग की सुविधा को चालू और इस्तेमाल करने के लिए ज़रूरी शर्तें:
आपके पास प्रोजेक्ट के मालिक, एडिटर या Firebase Vertex AI एडमिन की भूमिका होनी चाहिए.
आपके ऐप्लिकेशन में Firebase लाइब्रेरी के कम से कम ये वर्शन इस्तेमाल होने चाहिए:
iOS+: v11.13.0+ | Android: v16.0.0+ (BoM: v33.14.0+) | वेब: v11.8.0+ | Flutter: v2.0.0+ (BoM: v3.11.0+) | Unity: v12.9.0+आपके ऐप्लिकेशन में, डेटा कलेक्शन के लिए ऑप्ट-इन करने की सुविधा चालू होनी चाहिए. यह सुविधा डिफ़ॉल्ट रूप से चालू होती है.
जब आपका ऐप्लिकेशन इन ज़रूरी शर्तों को पूरा कर लेता है और कंसोल में एआई मॉनिटरिंग की सुविधा चालू हो जाती है, तो आपको अपने ऐप्लिकेशन या कंसोल में कुछ और करने की ज़रूरत नहीं होती. इसके बाद, आपको एआई सेवाएं > एआई लॉजिक > एआई मॉनिटरिंग टैब में मौजूद डैशबोर्ड में डेटा दिखने लगेगा. Firebase कंसोल में किसी अनुरोध की टेलीमेट्री उपलब्ध होने में थोड़ा समय लग सकता है. कभी-कभी इसमें पांच मिनट तक लग सकते हैं.
बेहतर इस्तेमाल
इस सेक्शन में, सैंपलिंग रेट के कॉन्फ़िगरेशन के बारे में बताया गया है. साथ ही, डेटा को देखने और उसके साथ काम करने के अलग-अलग विकल्पों के बारे में बताया गया है.
सैंपलिंग रेट
अगर आपको बड़ी संख्या में अनुरोध करने हैं, तो हमारा सुझाव है कि आप सैंपलिंग रेट कॉन्फ़िगरेशन का फ़ायदा लें. सैंपलिंग रेट से पता चलता है कि कितने प्रतिशत अनुरोधों के लिए, ट्रेस की जानकारी इकट्ठा की गई है.
Firebase कंसोल के एआई की सेवाएं > एआई लॉजिक > सेटिंग टैब में जाकर, अपने प्रोजेक्ट के लिए सैंपलिंग रेट को 1 से 100% के बीच की किसी वैल्यू पर कॉन्फ़िगर किया जा सकता है. यहां 100% का मतलब है कि एआई मॉनिटरिंग की सुविधा, आपके सभी ट्रैफ़िक से ट्रेस इकट्ठा करेगी. डिफ़ॉल्ट रूप से, यह 100% पर सेट होता है. कम ट्रेस इकट्ठा करने से आपकी लागत कम होगी. हालांकि, इससे उन ट्रेस की संख्या भी कम हो जाएगी जिन्हें मॉनिटर किया जा सकता है. ध्यान दें कि आपके सैंपलिंग रेट के बावजूद, मॉनिटरिंग डैशबोर्ड में दिखाए गए ग्राफ़ हमेशा ट्रैफ़िक की सही संख्या दिखाएंगे.
Firebase कंसोल के बाहर मौजूद अन्य विकल्प
Firebase कंसोल में उपलब्ध एआई मॉनिटरिंग के अलावा, ये विकल्प भी आज़माएं:
Vertex AI Model Garden को एक्सप्लोर करें.
इन डैशबोर्ड से, मैनेज किए जा रहे मॉडल के लिए इंतज़ार के समय और थ्रूपुट के रुझानों के बारे में ज़्यादा जानकारी मिलती है. इससे आपको Firebase कंसोल में एआई मॉनिटरिंग से मिली अहम जानकारी को बेहतर तरीके से समझने में मदद मिलती है.Google Cloud Observability Suite
एआई मॉनिटरिंग के लिए टेलीमेट्री डेटा, आपके प्रोजेक्ट से जुड़े Google Cloud Observability Suite में सेव किया जाता है. इसलिए, आपके पास इसके डैशबोर्ड में अपना डेटा एक्सप्लोर करने का विकल्प होता है. इसमें Trace Explorer और Logs Explorer शामिल हैं. ये तब लिंक होते हैं, जब Firebase कंसोल में अलग-अलग ट्रेस की जांच की जाती है. अपने डेटा का इस्तेमाल करके, कस्टम डैशबोर्ड बनाए जा सकते हैं, सूचनाएं सेट अप की जा सकती हैं, और अन्य काम किए जा सकते हैं.
एआई मॉनिटरिंग के लिए इस्तेमाल किए जाने वाले प्रॉडक्ट के बारे में ज़्यादा जानकारी
एआई मॉनिटरिंग की सुविधा, आपके टेलीमेट्री डेटा को Google Cloud Observability Suite में उपलब्ध अलग-अलग प्रॉडक्ट में सेव करती है. इनमें Cloud Monitoring, Cloud Trace, और Cloud Logging शामिल हैं.
Cloud Monitoring: इसमें मेट्रिक सेव की जाती हैं. जैसे, अनुरोधों की संख्या, सक्सेस रेट, और अनुरोध में लगने वाला समय.
Cloud Trace: यह आपके हर अनुरोध के लिए ट्रेस सेव करता है, ताकि आप कुल जानकारी के बजाय, हर अनुरोध की जानकारी अलग-अलग देख सकें. ट्रेस को आम तौर पर लॉग से जोड़ा जाता है, ताकि हर इंटरैक्शन के कॉन्टेंट और समय की जांच की जा सके.
Cloud Logging: यह इनपुट, आउटपुट, और कॉन्फ़िगरेशन मेटाडेटा को कैप्चर करता है, ताकि आपके एआई अनुरोध के हर हिस्से के बारे में ज़्यादा जानकारी दी जा सके.
आपका टेलीमेट्री डेटा इन प्रॉडक्ट में सेव होता है. इसलिए, हर प्रॉडक्ट में डेटा के रखरखाव और ऐक्सेस की सेटिंग को सीधे तौर पर तय किया जा सकता है. इसके बारे में ज़्यादा जानने के लिए, Cloud Monitoring, Cloud Trace , और Cloud Logging का दस्तावेज़ देखें.
ध्यान दें कि एआई मॉनिटरिंग की सुविधा, Cloud Logging में सैंपल किए गए हर अनुरोध के असल प्रॉम्प्ट और जनरेट किए गए आउटपुट को सेव करती है. इससे इस डेटा को Firebase कंसोल में ऐक्सेस किया जा सकता है. आपके पास प्रॉम्प्ट और उनके जवाब सेव करने की सुविधा बंद करने का विकल्प भी है.
कीमत
बिना किसी शुल्क वाले स्पार्क प्लान के तहत आने वाले प्रोजेक्ट (यह सिर्फ़ Gemini Developer API का इस्तेमाल करने पर उपलब्ध होता है): एआई मॉनिटरिंग के लिए, मुख्य सेवाओं का इस्तेमाल बिना किसी शुल्क के किया जा सकता है.
इस्तेमाल के हिसाब से पैसे चुकाने वाले ब्लेज़ प्लान के तहत आने वाले प्रोजेक्ट: आपसे उन Google Cloud Observability Suite प्रॉडक्ट के इस्तेमाल के लिए शुल्क लिया जाएगा जिन्हें एआई मॉनिटरिंग की सुविधा इस्तेमाल करती है. भले ही, आपने कोई भी Gemini API प्रोवाइडर चुना हो. हालांकि, हर Google Cloud Observability Suite प्रॉडक्ट के लिए, बिना किसी शुल्क के इस्तेमाल किए जा सकने वाले टियर उपलब्ध हैं. ज़्यादा जानने के लिए, Google Cloud Observability Suite कीमत से जुड़ा दस्तावेज़ देखें.
(ज़रूरी नहीं) प्रॉम्प्ट और जवाबों को सेव करने की सुविधा बंद करना
डिफ़ॉल्ट रूप से, एआई मॉनिटरिंग की सुविधा, मॉडल को भेजे गए असल प्रॉम्प्ट और मॉडल से जनरेट हुए जवाबों को कैप्चर करती है. इसमें उन प्रॉम्प्ट और जवाबों में मौजूद संवेदनशील जानकारी (जैसे, व्यक्तिगत पहचान से जुड़ी जानकारी (पीआईआई)) भी शामिल होती है. यह सारा डेटा Cloud Logging में सेव किया जाता है, ताकि इसे Firebase कंसोल में ऐक्सेस किया जा सके.
प्रॉम्प्ट और जवाबों को सेव करने की सुविधा बंद करने के लिए, अपने Cloud Logging सिंक (आम तौर पर _Default सिंक) में यह बाहर रखने वाला फ़िल्टर जोड़ें: resource.type="firebasevertexai.googleapis.com/Model"
Google Cloud कंसोल में प्रोजेक्ट-लेवल की एपीआई मेट्रिक देखना
हर एपीआई के लिए, Google Cloud कंसोल में प्रोजेक्ट-लेवल की मेट्रिक देखी जा सकती हैं. जैसे, इस्तेमाल.
ध्यान दें कि इस सेक्शन में बताए गए Google Cloud कंसोल पेजों में, अनुरोध और जवाब के कॉन्टेंट और टोकन की संख्या जैसी जानकारी शामिल नहीं होती. इस तरह की जानकारी को मॉनिटर करने के लिए, Firebase कंसोल में एआई मॉनिटरिंग का इस्तेमाल करें (पिछला सेक्शन देखें).
Google Cloud कंसोल में, उस एपीआई के मेट्रिक पेज पर जाएं जिसे आपको देखना है:
Agent Platform एपीआई: Agent Platform Gemini API (formerly Vertex AI) को किए गए किसी भी अनुरोध से जुड़े इस्तेमाल को देखें.
- इसमें Firebase AI Logic क्लाइंट एसडीके, Google GenAI सर्वर एसडीके, Genkit, Firebase Extensions, Gemini API, REST API, Agent Studio वगैरह का इस्तेमाल करके किए गए अनुरोध शामिल हैं.
Gemini Developer API: Gemini Developer API के लिए किए गए किसी भी अनुरोध से जुड़े इस्तेमाल की जानकारी देखें.
- इसमें Firebase AI Logic क्लाइंट एसडीके, Google GenAI सर्वर एसडीके, Genkit, Gemini API के लिए Firebase Extensions, REST API, Google AI Studio वगैरह का इस्तेमाल करके किए गए अनुरोध शामिल हैं.
- Google Cloud कंसोल में इस एपीआई का डिसप्ले नेम "Generative Language API" है.
अगर आपको एपीआई के "खास जानकारी देने वाले पेज" पर रीडायरेक्ट किया जाता है, तो मैनेज करें पर क्लिक करें. इसके बाद, मेट्रिक टैब पर क्लिक करें.
अपनी पसंद की मेट्रिक देखने के लिए, ड्रॉप-डाउन मेन्यू का इस्तेमाल करें. जैसे, रिस्पॉन्स कोड के हिसाब से ट्रैफ़िक, एपीआई के तरीके के हिसाब से गड़बड़ियां, कुल इंतज़ार का समय, और एपीआई के तरीके के हिसाब से इंतज़ार का समय.