Mixtral
תיאור
Mixtral 8x7B, מודל מומחים מעורב דליל (SMoE) באיכות גבוהה עם משקלים פתוחים. Mixtral עולה על Llama 2 70B ברוב מדדי ההשוואה עם אינפרנס מהיר פי 6. הוא תואם או עולה על GPT3.5 ברוב מדדי ההשוואה הסטנדרטיים.<br>נייר: https://arxiv.org/pdf/2401.04088.pdf<br>חדשות: https://mistral.ai/news/mixtral-of-experts/
כלים קשורים
DeepSeek-R1
מודלי ההיגיון מהדור הראשון של DeepSeek, DeepSeek-R1-Zero ו-DeepSeek-R1. DeepSeek-R1-Zero, מודל שאומן באמצעות למידת חיזוק (RL) בהיקף רחב ללא כוונון עדין מפוקח (SFT) כשלב מקדים, הראה ביצועים יוצאי דופן בהיגיון.
DeepSeek-V3
מודל שפה חזק מסוג Mixture-of-Experts (MoE) עם 671B פרמטרים בסך הכל, עם 37B מופעלים עבור כל טוקן.
Llama 3
Llama3 הוא מודל שפה גדול שפותח על ידי Meta AI. הוא היורש של מודל השפה Llama2 של Meta.<br>כתובת בדיקה מקוונת:<br>[huggingface.co/Meta-Llama-3-70B-Instruct](https://huggingface.co/chat/models/meta-llama/Meta-Llama-3-70B-Instruct)
grok-1
מודל שפה גדול בקוד פתוח של xAI
Phi-3
Phi-3 היא משפחה של מודלי AI פתוחים שפותחה על ידי מיקרוסופט. מודלי Phi-3 הם מודלי השפה הקטנים (SLM) המסוגלים והחסכוניים ביותר הקיימים, ומתעלים על מודלים באותו גודל ובגודל הבא במגוון מדדי שפה, חשיבה, קוד ומתמטיקה.
Gemma 4
Gemma 4 היא סדרת מודלי השפה הגדולים בקוד פתוח העדכנית ביותר של Google, הבנויה על ארכיטקטורת Gemini, ומציעה ביצועים משופרים, חלונות הקשר ארוכים יותר ותמיכה רב-לשונית טובה יותר.