The Wall Street Journal сообщил накануне, что генеральный директор OpenAI Сэм Альтман планирует привлечь до 7 триллионов долларов для амбициозного технологического проекта, направленного на значительное увеличение глобальной емкости чипов. Эта инициатива, поддерживаемая инвесторами, включая ОАЭ, может значительно улучшить мощность для ИИ моделей.
Хотя некоторые могут считать цель Альтмана чрезмерно амбициозной и сравнивать ее с грандиозными планами Илонa Маска, экологические последствия такого масштабного проекта впечатляют. Как отметила Саша Луччони, руководитель по климату в Hugging Face: «Если этот проект будет реализован, потребность в природных ресурсах станет ошеломляющей. Даже если будет использована возобновляемая энергия — что не является гарантией — необходимое количество воды и редкоземельных минералов будет астрономическим».
Сравнительный отчет Fortune за сентябрь 2023 года выделил экологические затраты, связанные с развитием ИИ. Так, Microsoft столкнулась с ростом потребления воды на 34% из-за ИИ-решений; модель Meta Llama 2, как сообщается, использовала в два раза больше воды, чем Llama 1; а исследование 2023 года показало, что обучение GPT-3 от OpenAI потребовало 700,000 литров воды. Кроме того, нехватка необходимых минералов, таких как галлий и германий, усилила глобальный конфликт в области чипов с Китаем.
Луччони раскритиковала Альтмана за предпочтение грубых решений вместо более эффективных методов разработки ИИ. «Его воспринимают как визионера, но его подход вызывает озабоченность», — утверждала она.
В условиях этих вызовов стремление Альтмана решить проблемы нехватки GPU и трансформировать рынок полупроводников отражает более широкий тренд в Силиконовой долине. Летом прошлого года начали поступать сообщения о колоссальном спросе на GPU H100 от Nvidia для обучения больших языковых моделей, что стало актуальной темой в технологической сфере.
На недавнем брокерском звонке генеральный директор Meta Марк Цукерберг подчеркнул, что создание «полного общего интеллекта» требует «инфраструктуры вычислений мирового класса». Он объявил о планах обзавестись примерно 350,000 H100 к концу года, с общим количеством около 600,000 эквивалентов H100, если учитывать и другие GPU. Компания намерена продолжать активно инвестировать в современные вычислительные ресурсы и специализированные микросхемы.
Луччони также выразила озабоченность по поводу отсутствия прозрачности от Nvidia относительно экологического воздействия своих продуктов. «Nvidia не опубликовала никаких деталей о углеродном следе, связанном с их производственными процессами», — пояснила она. Более того, электронные отходы представляют собой серьезную проблему, так как потребители часто выбрасывают старые GPU вскоре после приобретения новых.
Хотя Отчет о корпоративной ответственности Nvidia за 2023 год признал выбросы, возникающие на протяжении жизненного цикла продукта, Луччони считает, что необходима большая прозрачность. Она отметила, что со временем информация об экологии, предоставляемая технологическими компаниями, снизилась. Например, статья о PaLM 1 от Google в 2022 году содержала достаточные данные для оценок потребления энергии, тогда как последующий релиз PaLM 2 не включал жизненно важную информацию о продолжительности обучения или использовании чипов.
Несмотря на свои опасения, Луччони скептически относится к амбициозному проекту Альтмана. «Я вижу это как высокую инициативу, которая, вероятно, не преуспела», — отметила она. «Тем не менее, это ставит Альтмана наравне с Илонoм Маском по части дерзких проектов, которые привлекают внимание общественности и создают шумиху».