ఇటీవల, మెటా లామా 4 ను విడుదల చేసిందిస్కౌట్, మావెరిక్ మరియు బెహెమోత్లతో కూడిన పెద్ద భాషా నమూనాల కొత్త కుటుంబం. బెంచ్ మార్క్ ఫలితాల నుండి, లామా 4 మావెరిక్ (లామా -4-మావెరిక్ -03-26-ఎక్స్‌పెరిమెంటల్) 2 వ స్థానంలో నిలిచింది, ఓపెనాయ్ యొక్క జిపిటి -4 ఓ మరియు గూగుల్ జెమిని 2.0 ఫ్లాష్ వంటి మోడళ్లను ఓడించి, జెమిని 2.5 ప్రో వెనుక మాత్రమే వెనుకబడి ఉంది.
కానీ చాలా త్వరగా, వినియోగదారులు బెంచ్‌మార్క్‌లలో ఉపయోగించిన మావెరిక్ మరియు ప్రజలకు అందుబాటులో ఉన్న వాటి మధ్య ప్రవర్తనలో తేడాలను గమనించడంతో పగుళ్లు ఏర్పడటం ప్రారంభమైంది. ఇది దారితీసింది మెటా మోసం చేస్తున్నట్లు ఆరోపణలుX పై మెటా ఎగ్జిక్యూటివ్ నుండి ప్రతిస్పందనను ప్రేరేపిస్తుంది:
మీ చేతుల్లో లామా 4 ను పొందడం ప్రారంభించడానికి మేము సంతోషిస్తున్నాము. ఈ మోడళ్లతో ప్రజలు పొందుతున్న గొప్ప ఫలితాలను మేము ఇప్పటికే వింటున్నాము.
వేర్వేరు సేవల్లో మిశ్రమ నాణ్యత గురించి కొన్ని నివేదికలను కూడా మేము వింటున్నాము. మేము మోడళ్లను వదిలివేసినప్పటి నుండి…
-అహ్మద్ అల్-డాహ్లే (@AHMAD_AL_DAHLE) ఏప్రిల్ 7, 2025
మెటా తన విధానాలకు కట్టుబడి ఉండటంలో విఫలమైందని, ప్రజలకు క్షమాపణలు చెప్పి, విధాన నవీకరణను జారీ చేసిందని ల్మరేనా అంగీకరించింది.
అరేనాలో లామా -4 యొక్క తాజా విడుదల గురించి మేము సంఘం నుండి ప్రశ్నలను చూశాము. పూర్తి పారదర్శకతను నిర్ధారించడానికి, మేము ప్రజల సమీక్ష కోసం 2,000+ హెడ్-టు-హెడ్ యుద్ధ ఫలితాలను విడుదల చేస్తున్నాము. ఇందులో వినియోగదారు ప్రాంప్ట్‌లు, మోడల్ స్పందనలు మరియు వినియోగదారు ప్రాధాన్యతలు ఉన్నాయి. (తదుపరి ట్వీట్‌లో లింక్)
ప్రారంభ…
– lmarena.ai (గతంలో lmsys.org) (@lmarena_ai) ఏప్రిల్ 8, 2025
ఇప్పుడు, మోడల్ యొక్క మార్పులేని విడుదల వెర్షన్ (లామా -4-మావెరిక్ -17 బి -128 ఇ-ఇన్స్ట్రక్ట్) LMarena కు జోడించబడింది మరియు ఇది 32 వ స్థానంలో ఉంది. రికార్డు కోసం, గత జూన్లో విడుదలైన క్లాడ్ 3.5 సోనెట్ వంటి పాత మోడల్స్ మరియు గత సెప్టెంబరులో విడుదలైన జెమిని -1.5-ప్రో -002, అధిక ర్యాంక్.
