METR ने Anthropic में AI विकास को तेज़ करने में AI की भूमिका पर अपना आकलन प्रकाशित किया

AI मूल्यांकन से जुड़ी गैर-लाभकारी संस्था METR ने जोखिम आकलन पर एक रिपोर्ट प्रकाशित की। METR की एक टीम ने अगस्त से Anthropic की आंतरिक जानकारी के साथ काम करके यह जांचा कि क्या AI खुद AI विकास को तेज़ कर रहा है। इसने Anthropic की अगस्त 2026 की जोखिम रिपोर्ट के AI R&D खंड की एक अलग समीक्षा भी प्रकाशित की।

METR के अनुसार, 12 अगस्त से 29 अक्टूबर तक उसके कर्मचारियों (लगभग 2.5 पूर्णकालिक समकक्ष) ने Anthropic के आंतरिक डेटा का आकलन किया। टीम के अधिकांश सदस्यों का अब मानना है कि अक्टूबर 2026 तक, अच्छी तरह से परिभाषित कार्यों पर Anthropic अपने मॉडलों की क्षमताओं में मार्च 2024 से अक्टूबर 2025 की अवधि की तुलना में लगभग दोगुनी गति से सुधार कर रहा है—हालाँकि अनिश्चितता बहुत अधिक है (उन्हें 1.3 गुना या 3 गुना होने पर भी आश्चर्य नहीं होगा)। METR का अनुमान है कि अक्टूबर 2025 से Anthropic के Epoch Capabilities Index संस्करण पर बेंचमार्क स्कोर में 1.9 गुना वृद्धि हुई है (95% अंतराल: 1.5–2.8 गुना), और उसका अनुमान है कि मौजूदा तेज़ी का लगभग 80% हिस्सा AI के कारण है। उसका कहना है कि यह तेज़ी प्रशिक्षण कंप्यूट में तेज़ वृद्धि के कारण नहीं थी और उसे आगे तेज़ी बढ़ने में कोई स्पष्ट बाधा नहीं मिली—हालाँकि इस निष्कर्ष पर उसे भरोसा नहीं है।

METR का कहना है कि Anthropic को गैर-सार्वजनिक जानकारी को संपादित करके हटाने का अधिकार था और उसने उन साक्ष्यों में से अधिकांश हटा दिए जिन्हें METR ने अपने निष्कर्षों के लिए सबसे अधिक जानकारीपूर्ण पाया था। 5 नवंबर तक X पर इस पोस्ट को 864 पॉइंट मिले थे।