Научпоп

Nintendo анонсировала выход сборника для скоростного прохождения NES-игр на портативной консоли Nintendo Switch. Издание получит название Nintendo World Championships: NES Edition, которое роднит его с одноимённым турниром 1990 года.

В сборнике есть 150 заданий по скоростному прохождению эпизодов в 13 играх для консоли Nintendo Entertainment System (в Японии — Famicom). Речь идёт о таких тайтлах, как Legend of Zelda, Metroid, Super Mario Bros. и другие. Геймплей Nintendo World Championships: NES Edition напоминает сборник NES Remix, который вышел для консолей Wii U и 3DS.

Издание включает онлайн-таблицы, чтобы придать ощущение от участия в турнире. В играх будет функция перемотки, позволяющая отточить прохождение отдельных моментов. Релиз Nintendo World Championships: NES Edition состоится 18 июля текущего года за $30.

Проведение оригинального Nintendo World Championships стало причиной выхода редкого картриджа для NES c мини-играми на основе Super Mario Bros., Tetris и Rad Racer. Всего Nintendo выпустила несколько сотен экземпляров, стоимость которых достигает $175 тыс.

В Абу-Даби состоялась первая в мире гонка беспилотных болидов, которыми управлял искусственный интеллект. Восемь команд со всего мира продемонстрировали управление болидами Формулы-1 с помощью ИИ в рамках соревнований Автономной гоночной лиги A2RL.

Автомобиль A2RL является уникальным гоночным болидом, управляемым искусственным интеллектом и представляет собой шасси Dallara Super Formula 2023 года выпуска, оснащенный четырехцилиндровым 2,0-литровым двигателем с турбонаддувом, мощность которого составляет около 550 лошадиных сил. Для работы системы управления на основе искусственного интеллекта используется 7 камер Sony IMX728, 4 радара ZF ProWave и 3 лидара Seyond Falcon Kinetic FK1, а вычислительную мощность для ИИ предоставляет компьютер Neusys RGS-8805GC с графическим процессором Nvidia, накопителями Intel и специализированным ПО.

В гонке приняли участие восемь команд: Fly Eagle, Humda Lab, Code19, Constructor, Kinetiz, Polimove, Unimore и Технический университет Мюнхена. Призовой фонд гонки составил 2,25 млн долларов.

Победила команда TUM Мюнхенского технического университета.

Участникам понадобилось больше часа, чтобы преодолеть восемь кругов трассы «Формулы-1». При этом в 2023 году чемпион «Формулы-1» Макс Ферстаппен проехал 58 кругов по той же трассе менее чем за полтора часа.

В рамках мероприятия также прошла гонка человека против болида с искусственным интеллектом, в ней c заметным преимуществом победил экс-пилот «Формулы-1» Даниил Квят.

Microsoft только что представили инструмент You Only Cache Once: Decoder-Decoder : архитектура Decoder-Decoder для больших языковых моделей

YOCO существенно снижает потребление  памяти GPU и состоит из двух компонентов -  cross decoder'а, объединенного с self-decoder'ом. 

Self-decoder кодирует глобальные кэши

значений ключей (KV), которые повторно используются cross decoder'ом с механизмом cross-attention.

Результаты экспериментов показывают, что YOCO достигает более высокой производительности по сравнению с архитектурой Трансформеров при различных настройках масштабирования размера модели и количества обучающих токенов, подробнее тут.

▪Github: https://github.com/microsoft/unilm/tree/master/YOCO

▪ABS: https://arxiv.org/abs/2405.05254

Если интересуетесь машинным обучением и ИИ, здесь я публикую разбор свежих LLM и их разбор, статьи и гайды, кладезь полезной информации.

Группа исследователей из EPFL разработали ChemCrow – искусственный интеллект, объединяющий 18 искусно разработанных инструментов, позволяющих ему ориентироваться и выполнять задачи в рамках химических исследований с беспрецедентной эффективностью. Он основан на большой языковой модели, такой как GPT-4, улучшенной LangChain для интеграции этих инструментов.

Практическое применение: ChemCrow получает приглашение от пользователя, заранее планирует, как решить задачу, выбирает соответствующие инструменты и итеративно уточняет свою стратегию на основе результатов каждого шага. Этот методический подход гарантирует, что ChemCrow не только отрабатывает теорию, но и находит практическое применение для реального взаимодействия с лабораторными средами.

“Система аналогична эксперту-человеку с доступом к калькулятору и базам данных, которые не только повышают эффективность работы эксперта, но и делают ее более достоверной – в случае ChemCrow, уменьшая галлюцинации”, – объясняет Андрес Камило Маруланда Бран, первый автор исследования.

Эта технология поможет ускорить исследования и разработки в области фармацевтики, материаловедения и в других областях, сделав процесс более эффективным и безопасным.

📌Artificial Analysis собрали топ 100 LLM в одном месте

Компания Artificial Analysis разработала рейтинговую систему, оценивающую стоимость, производительность и качество более 100 LLM, чтобы обеспечить удобный выбор модели, соответствующей индивидуальным потребностям.

Параметры для оценивания LLM:

🟡Качество: комплексный индекс, рассчитанный на основе метрик, таких как MMLU, MT-Bench, оценки HumanEval, а также рейтинг Chatbot Arena;

🟡Цена: метрики, учитывающие цену на вход/выход на один токен, а также среднюю цену для сравнения провайдеров хостинга. Стоимость представляет собой взвешенную смесь цен на входные и выходные токены в соотношении 3:1;

🟡Окно контекста: максимальное количество комбинированных входных и выходных токенов;

🟡Скорость: токены/с, получаемые во время генерации моделью токенов. Median, P5, P25, P75 и P95;

🟡Задержка: время до первого полученного токена, измеренное в секундах, после отправки запроса через API. Median, P5, P25, P75 и P95.

Если хотите изучать машинное обучение, разбираться в LLM и ИИ, здесь я публикую разбор свежих LLM и их разбор, статьи и гайды, кладезь полезной информации.

#llm

У кого есть собака, тот не должен лаять сам

За меня полаяли рассказали о деталях новых iPad лучше, чем я мог бы мечтать. Парень проделал (на мой вкус) прекрасную работу, жаль на английском языке.

https://www.youtube.com/watch?v=ImscYqGxQzY&list=WL&index=9&pp=gAQBiAQB

Google DeepMind представили Alpha Fold3, новую модель искусственного интеллекта, которая предсказывает структуру и взаимодействия молекул.

Благодаря точному прогнозированию структуры белков, ДНК, РНК и многого другого, а также того, как они взаимодействуют, наше понимание биологического мира может выйти на новый уровень, а в практическом применение  поможет разработке новых лекарств.

Эта революционная модель, может предсказывать структуру и взаимодействия всех молекул жизни с беспрецедентной точностью. 

На основе входного списка молекул Alpha Fold3 генерирует их общую трехмерную структуру, показывая, как они сочетаются друг с другом. Программа моделирует крупные биомолекулы, такие как белки, ДНК и РНК, а также небольшие молекулы, также известные как лиганды. 

Кроме того, Alpha Fold3 может моделировать химические модификации этих молекул, которые контролируют здоровое функционирование клеток, нарушение которых может привести к различным заболеваниям.

Теперь для учёные со всего мира могут работать с  AlphaFold 3 совершенно бесплатно.

https://blog.google/technology/ai/google-deepmind-isomorphic-alphafold-3-ai-model/

Если интересуетесь машинным обучением и ИИ, здесь я публикую разбор свежих LLM и их разбор, статьи и гайды, кладезь полезной информации.

7 мая 2024 года Литовские таможенники задержали в пункте пропуска «Шальчининкай» два электропикапа Tesla Cybertruck.

Таможенники не разрешили экспортировать электромобили общей стоимостью более 200 тыс. евро в Беларусь. Они подозревают, что эти Tesla были предназначены для России. Ранее Евросоюз ввёл санкции на экспорт легковых автомобилей в РФ, а недавно литовская таможня ужесточила по этому поводу контроль.

«В ходе исследования, проведённого в 2023 году, выяснилось, что почти каждый второй экспортированный в третьи страны (Беларусь, Казахстан, Узбекистан) автомобиль стоимостью от 50 000 евро позже оказывался на российском рынке», — сообщили СМИ в таможне.

Криминальная служба таможни Литвы начала расследование по факту контрабанды и нарушения международных санкций. Оба автомобиля задержаны и находятся в помещениях литовской таможни. Водителей после допроса отпустили.

В конце апреля 2024 года в Москву появился первый Cybertruck. Электропикап привезла из Беларуси в РФ команда Moscow Tesla Club. Несколько пользователей соцсетей и Telegram заметили Cybertruck, припаркованный у Патриарших прудов, а потом машина проехала вдоль Цветного бульвара. Предположительно, электропикап принадлежит генеральному директору Moscow Tesla Club Алексею Еремчуку.

В ноябре 2023 года Tesla Cybertruck поступил в продажу. Стоимость электропикапа начинается от $61 тыс.

В ходе серьезной перестройки своего плана развития чипов Apple анонсировала новый процессор M4 для сегодняшнего обновления iPad Pro , всего через шесть месяцев после выпуска первых MacBook Pro с M3 и даже не через два месяца после обновления MacBook Air с M3.

Apple утверждает, что M4 включает в себя «до» четырех высокопроизводительных ядер ЦП, шесть высокоэффективных ядер и 10-ядерный графический процессор. По оценкам Apple, производительность процессора M4 на 50 процентов выше, а производительность графики — в четыре раза выше . Как и графический процессор в M3, M4 также поддерживает аппаратно-ускоренную трассировку лучей, позволяющую создавать более продвинутые световые эффекты в играх и других приложениях. Apple заявляет, что отчасти благодаря производственному процессу «второго поколения» 3 нм, M4 может соответствовать производительности M2, потребляя при этом вдвое меньше энергии.

В отдельном отчете Wall Street Journal говорится, что Apple разрабатывает специальный чип для запуска программного обеспечения искусственного интеллекта в центрах обработки данных . Серверный чип Apple, скорее всего, будет ориентирован на работу с моделями ИИ, также известными как логический вывод (inference), а не на обучение моделей ИИ, где доминирует Nvidia.

Исследователи оценивают, как еще одно большое достижение в области ИИ последнюю версию программы AlphaFold, представленную Google. Она может предсказывать, как ведут себя белки. Этот прорыв обещает пролить новый свет на биологический механизм, лежащий в основе живых организмов, и способствовать прорывам в таких областях, как антибиотики и терапия рака, новые материалы и устойчивые сельскохозяйственные культуры.

AlphaFold3 прошел обучение на глобальной базе данных трехмерных молекулярных структур и пошел еще дальше, предсказывая, как белки будут взаимодействовать с другими молекулами и ионами, с которыми они сталкиваются. Когда программу просят сделать прогноз, она начинает с облака атомов и постепенно преобразует его в наиболее точную предсказанную структуру.

В статье для журнала Nature исследователи описывают, как AlphaFold3 может предсказывать, как белки взаимодействуют с другими белками, ионами, цепочками генетического кода и более мелкими молекулами. В тестах точность программы варьировалась от 62% до 76%.

Проект "Иммуном Человека" опубликовал целый Научный План по созданию крупнейшего в мире набора данных по иммунологии и разработке моделей искусственного интеллекта для более глубокого понимания иммунной системы и улучшения здоровья населения на глобальном уровне. 

План предполагает создание глобальных исследовательских центров и разработку передовых инструментов искусственного интеллекта для анализа изменений и реакций иммунной системы.

Полученные данные участников (клетки, транскрипты, антитела, белки, эпигенетические модификации и метаболиты) будут использоваться для создания и валидации архитектуры машинного обучения моделей ИИ HIP. Цель на данном этапе заключается в разработке, обучении и валидации одной или нескольких моделей, способных отражать динамику иммунной системы и предсказывать реакцию организма на внешнее воздействие, исходя из базового состояния иммунитета.

“Проект находится на переднем крае научных открытий и обладает уникальными возможностями для предоставления научному и медицинскому сообществу знаний и инструментов для разработки новых диагностических средств, лекарств, вакцин и иммунотерапии, которые могут бороться с болезнями, продлевать продолжительность жизни и обеспечивать более персонализированное и эффективное здравоохранение для всех.”, – высказался ведущий доктор проекта.

Apple выпустила документацию по работе с новым жестом сжатия Apple Pencil. Разработчики могут использовать его в своих приложениях. Вместе с этим добавили разделы документации по работе с вибрацией и двойным нажатием. Примеры кода доступны как для UIKit, так и для SwiftUI.

Жест сжатия работает только с Apple Pencil Pro, а сам стилус — только с iPad Pro (M4) и iPad Air (M2). Более подробно о функциях разных поколений Apple Pencil можно узнать из этой статьи.

Audio Seal - это лучшая модель для распознавания речи, сгенерированной искусственным интеллектом 🔉

 Audio Seal - это SOTA для добавления метаданных на аудио и распознавания их, предназначенная для локального распознавания речи, сгенерированной искусственным интеллектом. 

Инструмент прост в настройке и работает молниеносно.

Audioseal обеспечивает самые современные характеристики распознавания как естественной, так и синтетической речи, обеспечивает незначительное изменение качества сигнала и устойчив ко многим типам редактирования аудио. 

Audioseal  значительно превосходит существующие модели по скорости обнаружения.

pip install audioseal

▪Github: https://github.com/facebookresearch/audioseal

▪Paper: https://arxiv.org/abs/2401.17264

▪Colab: https://colab.research.google.com/github/facebookresearch/audioseal/blob/master/examples/colab.ipynb

▪HF: https://huggingface.co/facebook/audioseal

#audio

Если интересуетесь машинным обучением и ИИ, здесь я публикую разбор свежих LLM и их разбор, статьи и гайды, кладезь полезной информации.

В новой памятке для персонала Apple Store, посвящённой запуску новых гаджетов, написано, что фирменные две наклейки Apple не будут включены в комплект поставки обновлённых iPad Pro и iPad Air. В качестве причины в компании назвали заботу об окружающей среде и полный отказ от пластика в своих упаковках.

У покупателя остаётся возможность получить такие наклейки лично в магазине Apple в рамках обращения к сотруднику с такой просьбой.

IBM выпустили самую совершенную модель для генерации кода

IBM выпустили Granite Code Models: семейство моделей Open Foundation для интеллектуального анализа и генерации кода

Все модели Granite Code выпущены под лицензией Apache 2.0. 

Модели Granite превосходят модели с открытым исходным кодом по всем параметрам. На рисунке показано, как Granite-8B-CodeBase превосходит Mistral-7B, LLama-3-8B и другие модели с открытым исходным кодом в трех задачах кодинга. Полные оценки можно найти здесь.

Модели отлично справляются с задачами генерации кода, исправления багов объяснения кода, генерации документации к кода.

- Размер моделей варьируется от 3B до 34B параметров

- Обученных на 3-4 тыс. токенах, полученных из 116 языков программирования

▪Github: https://github.com/ibm-granite/granite-code-models

▪Paper: https://arxiv.org/abs/2405.04324

▪HF: https://huggingface.co/collections/ibm-granite/granite-code-models-6624c5cec322e4c148c8b330

Если интересуетесь темой генерации кода и LLM, здесь я публикую разбор свежих LLM и их разбор, статьи и гайды, кладезь полезной информации.

#llm #codegeneration

Apple незаметно «убила» iPad девятого поколения с разъёмом для наушников. iPad 10-го поколения стал старейшей версией в официальной линейке Apple, и цена на него снижена на $100.

Выпущенный в конце 2022 года iPad 10-го поколения стоил от $449 или на $120 дороже, чем базовые iPad начального уровня предыдущих лет. Apple оправдывала повышение цен появлением 10,9-дюймового экрана и поддержки USB-C. Пользователи с ограниченным бюджетом выбирали iPad 9-го поколения.

Теперь iPad 10-го поколения стоит $349. iPad 9-го поколения же ещё доступен у розничных продавцов, таких как Amazon, Target и Best Buy, за $249.

Nike выпустила для Тима Кука специальную версию кроссовок Air Max, дизайн которых сделали на новом iPad.

В Nike пояснили, что это уникальная модель Nike Air Max 1 ’86s, разработанная специально к презентации Apple. Примечательно, что на язычке обуви от руки написано Made on iPad.

Новые кроссовки Кука также внешне выделяются волнообразным логотипом Nike в яркой расцветке, отсылая к временам появления Apple. Также дизайн обуви сочетает в себе современную направленность компании.

7 мая 2024 года Apple провела презентацию, полностью посвящённую обновлению линейки iPad.

О чём не рассказала Apple на презентации нового iPad Air, iPad Pro, Apple Pencil и чипа M4:

• новый iPad Air оказался толще и тяжелее, чем новый iPad Pro (6,1 мм против 5,3 мм, 617 грамм против 579 грамм);

• Apple убрала блок питания из комплектов новых iPad Pro и iPad Air в Европе;

• с новым iPad Pro M4 будут работать только Apple Pencil с USB-C (1 и 2 поколение Apple Pencil не поддерживается);

• в новых iPad Pro и iPad Air больше нет физического лотка для SIM, только eSIM;

• также в новых iPad нет разъёма для наушников, который был до 9 поколения.

Подборка статей для Research MLE

Не так давно я для себя понял, насколько важно читать научные статьи в ML, но сталкиваешься с тем что только 20% статей дадут тебе 80% результата. В своем Notion я собрал небольшую подборку самых интересных и полезных статей по LLM и RecSys. (которая кстати пополняется)

NLP:
Там есть как классические статейки от w2v, attention, transformers, gpt, gpt2, ...
Так и популярные или не так давно вышедших peft, llama, reft

RecSys:
Стараюсь пополнять интересными статейками от топовых лабораторий Meta, Deezer, Spotify, Netflix, X, ... Или годными статья из NIPS или ACM

На некоторые из этих статей я собираюсь писать обзорчики на Habr, кстати недавно вот написал про персонализированный Cold Start в Deezer. Про некоторые я выложу просто Summary в свой телеграм канал или сделаю конспект в Notion.

Если вдруг вам захочется пополнить этот банк статей, то можете закинуть свои идеи вот сюда.

🧑‍💻 OpenAI объявила о крутейшей коллаборации со Stack Overflow

Главным плодом сотрудничества OpenAI и Stack Overflow стал доступ к OverflowAPI. Оно позволяет пользоваться наборами данных Stack Overflow, на которых можно обучать и донастраивать большие языковые модели. 

✅ Кроме того, OpenAI будет отображать данные партнёрской платформы напрямую в ChatGPT. Это означает, что чат-бот может начать генерировать более точный код и лучше отвечать на технические вопросы.

Подробности

Пользователи редиса после этой новости о сотрудничестве Stack Overflow с OpenAI начали припоминать, что раньше политика форума в отношении AI была другой. 

А именно в 2022 году они полностью забанили ChatGPT на платформе как «очень вредный инструмент для решения вопросов кодинга». 

Но время шло и ChatGPT стал супер популярен и вырос до небес, а трафик на Stack Overflow в связи с этим упал более чем на 50 процентов.

Такие дела)

Если интересуетесь темой Chatgpt и LLM, здесь я публикую разбор свежих LLM моделей, статей и гайдов, кладешь полезной информации.

#chatgpt #llm #openai #машинноеобучение