📌Відкрита відеомодель MAGI-2 Preview від Sand.ai
Sand.ai відкрила код і weights MAGI-2 Preview — MoE-моделі для генерації відео із синхронним аудіо. Модель може створювати ролики тривалістю до 10 секунд, а фінальний етап підвищує роздільність до 1080p.
🔆Детальніше
• MAGI-2 використовує fine-grained MoE-архітектуру.
• Загальний обсяг моделі становить 114B параметрів, але на кожному токені активними є близько 6B.
• Відео та синхронна аудіодоріжка генеруються в межах одного пайплайна.
• Генерація відбувається у два етапи: спочатку створюється відео в нижчій роздільності, після чого окремий refiner підвищує якість до 1080p.
• За заявою Sand.ai, MoE-архітектура дозволила суттєво зменшити обчислювальні витрати порівняно з великими dense-моделями.
• Водночас для локального запуску MAGI-2 потрібні значні ресурси, тому це поки не варіант для відеокарти на 24 ГБ.
➡️Код тут.
➡️Ваги моделі тут.
➡️Технічний звіт тут.
➡️Запроси друга до НейроЄнота🦝
Sand.ai відкрила код і weights MAGI-2 Preview — MoE-моделі для генерації відео із синхронним аудіо. Модель може створювати ролики тривалістю до 10 секунд, а фінальний етап підвищує роздільність до 1080p.
🔆Детальніше
• MAGI-2 використовує fine-grained MoE-архітектуру.
• Загальний обсяг моделі становить 114B параметрів, але на кожному токені активними є близько 6B.
• Відео та синхронна аудіодоріжка генеруються в межах одного пайплайна.
• Генерація відбувається у два етапи: спочатку створюється відео в нижчій роздільності, після чого окремий refiner підвищує якість до 1080p.
• За заявою Sand.ai, MoE-архітектура дозволила суттєво зменшити обчислювальні витрати порівняно з великими dense-моделями.
• Водночас для локального запуску MAGI-2 потрібні значні ресурси, тому це поки не варіант для відеокарти на 24 ГБ.
➡️Код тут.
➡️Ваги моделі тут.
➡️Технічний звіт тут.
➡️Запроси друга до НейроЄнота🦝