एकल चार्ट जो मॉडल चुनते समय मायने रखता है: प्रत्येक डॉलर के लिए आपको कितनी मापी गई बुद्धिमत्ता मिलती है। हम वास्तविक LMArena एलो के मुकाबले मिश्रित टोकन मूल्य की योजना बनाते हैं और कुशल सीमा का पता लगाते हैं - मॉडल कम कीमत पर गुणवत्ता से बेहतर कुछ नहीं है।
गुणवत्ता वास्तविक है LMArena एलो - आमने-सामने के वोटों से मानव-वरीयता रैंकिंग, हमारा अपना अनुमान नहीं। मूल्य प्रत्येक मॉडल के ट्रैक किए गए मूल्य निर्धारण से इनपुट और आउटपुट $/1M टोकन का मिश्रित औसत है।
एक मॉडल कुशल सीमा पर तब होता है जब किसी अन्य मॉडल में उच्च एलो और कम-या-बराबर कीमत दोनों नहीं होती हैं। कीमतों और रैंकिंग अपडेट के रूप में सीमांत की पुनर्गणना की जाती है।
हम जानबूझकर 'एलो प्रति डॉलर' अनुपात प्रकाशित नहीं करते हैं: एलो एक अंतराल पैमाना है, इसलिए इसे कीमत से विभाजित करना सांख्यिकीय रूप से सार्थक नहीं है। सीमांत लागत के विरुद्ध गुणवत्ता की तुलना करने का ईमानदार तरीका है।