Я очень рад объявить о первом Кубке коллективных знаний — наборе открытых задач, доступных на access.cKnowledge.org и подготовленных Организациями MLCommons, чтобы позволить всем (студентам, исследователям, инженерам и даже школьникам) оценить и оптимизировать системы ИИ и МО с точки зрения задержки, пропускной способности, энергопотребления, точности, затрат и других важных показателей.
Эти задачи включают запуск стандартных тестов MLPerf из коробки на различном аппаратном и программном обеспечении, подключение их к Hugging Face, Hub, NVIDIA, model Zoo, Neural Magic, DeepSparse Zoo и OpenBenchmarking.org, воспроизведение, тиражирование и автоматизацию документов NeurIPS, совместное проектирование приложений искусственного интеллекта, эффективных по Парето, поддержку платформы MLCommons MedPerf и обучение #LLM. » на автоматизировать бенчмаркинг MLPerf.
Все участники будут добавлены в общедоступную таблицу лидеров, получат баллы и призы в зависимости от задачи, получат возможность стать соавторами готовящегося официального документа о совместной разработке Парето-эффективных систем AI/ML и представить свои выводы на наших предстоящих мероприятиях ACM и HiPEAC.
Все задачи основаны на зрелой методологии бенчмаркинга MLPerf, автоматизированной с помощью неинтрузивного, независимого от технологий и открытого исходного кода языка автоматизации и воспроизводимости MLCommons CM и визуализируются с использованием MLCommons CK play play.
Наша миссия — помочь каждому выбрать наиболее эффективное программное и аппаратное обеспечение для любой задачи AI/ML с учетом их требований и ограничений (энергоэффективность, цена, эксплуатационные расходы, обработка в реальном времени и т. д.) и автоматически разрешать все необходимые зависимости для создания реальных приложений AI/ML и запуска их в производство.
Поскольку это активно развивающийся проект сообщества, мы очень заинтересованы в ваших отзывах, предложениях и вкладах — пожалуйста, следите за нашим проектом на GitHub и присоединяйтесь к нашему общедоступному серверу Discord и еженедельным конференциям.
С нетерпением жду вашего участия и счастливого взлома!
#искусственный интеллект #машинное обучение #системы #бенчмаркинг #оптимизация #воспроизводимость #воспроизводимость #автоматизация #коллективное знание #коллективный разум #сообщество
