Blog

 Llama 4: когда AI жрёт электричество как не в себя

Llama 4: когда AI жрёт электричество как не в себя

Как 10-кратные вычислительные мощности изменят мир ИИ и повлияют на экологию

Представьте, что вы сидите за рулем суперкара будущего — Llama 4 от Meta. Этот монстр готов сорваться с места в карьер, но есть одна загвоздка: ему нужно в 10 раз больше "топлива". И речь не о каком-то там бензине, а о вычислительных мощностях, которые грозят превратить нашу планету в одну большую жаровню.

Llama 4: когда размер имеет значение

Хотя точная дата официального выпуска Llama 4 пока не объявлена, уже известно, что  это не просто апгрейд старушки Llama 3. Это как если бы вы поменяли свой старенький Nokia 3310 на последний iPhone, да еще и с турбонаддувом. С десятикратным увеличением мощности эта модель щелкает задачки как орешки. Но за каждым "щелчком" стоит армия серверов, пожирающих мегаватты энергии.

Битва титанов: Llama 4 vs Предки

Количество GPU для обучения LLM Llama 4 160 000 Grok 3 100 000 GPT-4 25 000 Grok 2 20 000 Llama 3 16 000

Давайте-ка сравним наших "бойцов":

  • Llama 3: как подросток на вечеринке — 70 миллиардов параметров, натренирована на 1,4 триллионах токенов. Полгода в спортзале, то есть в разработке.
  • Llama 4: Халк после передозировки гамма-лучами — до 400 миллиардов параметров. Те же 1,4 триллиона токенов, но теперь с турбонаддувом. 1,2 миллиона часов в качалке... простите, машинного времени.
  • GPT-4: старший брат, который уже работает —175 миллиардов параметров. Начитанный, как профессор, благодаря разнообразным данным, чем не может похвастаться Llama.

Llama 4 не просто раскачалась — она превратилась в настоящего монстра, готового потягаться с самим GPT-4.

Экологический AI апокалипсис

Но давайте на секунду отвлечемся от этого праздника технологий и посмотрим на изнанку. По данным Greenpeace, только в США дата-центры  ежегодно выбрасывают в атмосферу 90 миллионов тонн парниковых газов. Это больше, чем все самолеты мира! Представьте, что каждый раз, когда вы просите ИИ написать вам стишок про котика, где-то в мире тает маленький айсберг.

Для работы одного суперкомпьютера, необходимого для обучения Llama 4, требуется столько энергии, сколько потребляет средний город. Получается, что в погоне за искусственным интеллектом мы рискуем остаться с искусственными легкими.

Атомный AI ренессанс или как Чернобыль становится решением

Атомный AI ренессанс

В этой сумасшедшей гонке вычислений, неожиданно появляется темная лошадка — атомная энергетика. Да-да, тот самый атом, который раньше пугал нас, теперь, по мнению многих, может стать спасителем наших дата-центров. Мы уже писали об этом здесь "Атомный переворот в мире больших данных: когда дата-центры подружились с ядерной энергией" и здесь -  "Ядерный микро-реактор Rolls-Royce: энергия будущего для Земли и космоса".

Вот несколько причин, почему атом может стать лучшим другом ИИ:

  1. Стабильность: атомные станции работают как часы. Никаких перебоев из-за того, что солнце зашло за тучку или ветер решил взять выходной.
  2. Экологичность: представьте, что вы можете есть сколько угодно пиццы и не толстеть. Вот так же и атомные станции — энергии вагон, а углекислого газа — кот наплакал.
  3. Компактность: атомный реактор — швейцарский нож энергетики. Маленький, но очень функциональный.

Некоторые компании уже начали заигрывать с идеей использования атомной энергии для своих дата-центров.

Миниатюрные атомные реакторы для дата-центров

Вообразите: маленький ядерный реактор прямо рядом с серверной стойкой, как горшочек с медом для террористов. Звучит как сюжет для нового фильма-катастрофы, не правда ли?

Зеленый ИИ: машины начинают заботиться о природе

Компании внедряют возобновляемые источники энергии и оптимизируют работу оборудования Дата-центров

Но не все так плохо в королевстве ИИ. Гиганты индустрии, такие как Google и Microsoft, уже вовсю крутят педали зеленого велосипеда. Они внедряют возобновляемые источники энергии и оптимизируют работу оборудования.

Например, Google разработал специальные чипы TPU, которые потребляют энергии меньше, чем ваша бабушка на диете. А технологии сжатия языковых моделей позволяют уменьшить их размер без потери точности. Это как если бы вы могли уместить слона в спичечный коробок, и он бы при этом не жаловался.

Будущее ИИ

Несмотря на все эти страшилки, у нас есть шанс сделать ИИ не только умным, но и экологичным. Ведущие умы планеты уже ломают головы над тем, как заставить искусственный интеллект работать на солнечных батарейках и ветряках.

Новые технологии, такие как квантовые компьютеры и нейроморфные чипы, могут перевернуть игру с ног на голову. Представьте, что вместо огромного прожорливого дата-центра у вас будет компьютер размером с кубик Рубика, который при этом сможет посчитать количество песчинок на всех пляжах мира.

Заключение

Llama 4 — это не просто новая игрушка для гиков. Это вызов всему человечеству: сможем ли мы создать супер-ИИ, не превратив при этом Землю в большую сковородку? В конце концов, даже самому крутому ИИ нужен дом, и было бы неплохо, если бы этот дом не превратился в пустыню.

Как сказал Илон Маск: "Мы должны быть осторожны с искусственным интеллектом. Он может стать более опасным, чем ядерное оружие."  

комментариев пока нет

Новостная рассылка

Поис