Как и чем живет головной офис Google в Калифорнии
Минувшей осенью Google отметил 15-летие своего грандиозного успеха. Наш специальный корреспондент в США Сергей Фомичев посетил легендарную штаб-квартиру Googleplex и попытался узнать, как живут гуглеры и почему именно их называют обладателями самой желанной работы на планете
Google давно уже не просто самый посещаемый в мире сайт, а его сотрудники не просто масса людей, гордо называющих себя «гуглерами».
Сергей Брин и Ларри Пейдж создали уникальный коллектив самых мотивированных и эффективных работников на планете, что сделало Google одной из самых успешных и прибыльных корпораций США, а самих основателей — мультимиллиардерами и влиятельнейшими людьми на планете. В чем же секрет такого супер-успеха?
Зарплата сотрудников? Действительно гуглеры зарабатывают немало, хотя здесь Google не впереди планеты всей. В топе IT-сегмента другие корпорации. Что же тогда делает Google столь притягательным? Во-первых, место работы — легендарная штаб-квартира Googleplex, расположенная в сердце калифорнийской Кремниевой долины, местечке Маунтин-Вью.
Территория Googleplex настолько огромна, что весь Маутин-Вью, в том числе на всех картах, обозначен как Google — множество корпусов, в которых расположены не только тысячи серверов и центр управления корпорации, но и, пожалуй, самые удобные рабочие места, переговорные и зоны отдыха на планете. «Мы делаем все, чтобы гуглеры имели максимум свободы в своей работе и чтобы все вокруг делало эту работу максимально комфортной. Поверьте, это позволяет достигать выдающихся результатов», — говорит Ласло Бок, старший вице-президент по работе с персоналом Google.
Везде используются только безвредные экологичные материалы — это часть философии компании, аналогично обстоят дела и в остальных офисах Google. Сейчас их более 70 по всему миру.
Однако вернемся в штаб-квартиру, здесь более тридцати кафе и ресторанов, которые работают ежедневно и бесплатно обслуживают сотрудников. Также безвозмездно можно воспользоваться услугами врачей самого разного профиля, включая даже массажистов и диетологов, а также пройти всевозможные обследования, которые практически никогда не покрывают капризные страховые компании — Google берет эти немалые расходы на себя.
Но и это еще не все: 4 круглосуточных фитнес-центра, теннисные корты, футбольные поля и несколько салонов красоты приятно дополняют пакет бесплатных услуг для трудящихся в Googleplex. «Когда мы анализируем потребности сотрудников в Google, то меньше всего думаем про возраст. Компания стремится предложить каждому пакет льгот, которые в наибольшей степени соответствуют его потребностям. В одном случае это может быть уход за престарелыми родителями, в другом — за детьми или внуками», — продолжает Ласло Бок.
Из такого райского места и уезжать не хочется, а если все же появилась необходимость, то в бесплатном доступе целый парк электромобилей и GBike — известных далеко за пределами США велосипедов, разработанных специально для Google в 2007 году.
К 2013 году дизайн Gbike несколько раз обновился, парк регулярно пополняется и уже насчитывает более 1000 разноцветных велосипедов, раскрашенных цветами Google —зеленым, желтым, красным и голубым.
Как известно, совладельцы Google — обладатели гибридных каров Prius, которые предпочитает большинство автовладельцев в Googleplex. Экологичная и одновременно экономичная японская машина обойдется значительно дешевле, ведь Google доплатит 5000 долларов, если сотрудник решит приобрести именно гибридный автомобиль. » В Калифорнии без личного автомобиля обойтись трудно, вот и у меня был старый Chevrolet, а до этого еще пару американских машин, — рассказывает менеджер по продажам Google по имени Эрика. — Недавно я пересела на гибридный Prius нового поколения причем не без помощи Google, который оплатил 5000$ от общей цены. И это не я такая везучая, а специальная программа рассчитанная на всех сотрудников».
Google — не просто успешная компания, где сотрудники имеют все возможности для творчества и реализации, это место рождения инновационных сенсаций, которые обсуждают и используют по всему миру. А еще это место, где создают семьи — в Google часто находят свою судьбу. «Будущую жену я встретил в Google, и тут нас таких много», — делится бывший петербуржец Максим, работающим в компании инженером.
Точкой концентрации туристов считается поляна перед офисом Android — операционной системы Google. Здесь представлены гигантские сладости. Каждая новая «сладкая» статуя появляется здесь в день запуска новой версии системы.
Калифорнийский климат позволяет выращивать овощи и фрукты на территории Googleplex и использовать для различных блюд. Как например, эти съедобные цветы:
Или эти томаты:
Помимо ресторанов в офисах расположены микро-кухни с самообслуживанием:
Автомобили Google прокладывают карты в формате Street View, с помощью которых можно устраивать виртуальные экскурсии по самым разным уголкам планеты:
Офисы Google
2023: Почему Google зажала миллиарды и передумала строить жилые районы в Сан-Франциско
В начале ноября 2023 года стало известно о том, что компания Google отказалась от реализации масштабного проекта по созданию кампуса с жилыми домами в заливе Сан-Франциско (Калифорния). Соответствующее соглашение о строительстве разорвано с девелопером LendLease.
В 2019 году Google заключила с LendLease соглашение на сумму в $15 млрд о строительстве большого количества жилых и офисных объектов, парков, мест для отдыха и пр. Речь идет о проектах Downtown West в Сан-Хосе, Moffett Park в Саннивейле, а также Middlefield Park и North Bayshore в Маунтин-Вью, которые объединены под общим названием San Francisco Bay Project («Проект залива Сан-Франциско»). По данным Google, по состоянию на конец июня 2023 года 12 900 запланированных единиц жилья были одобрены для строительства в Сан-Хосе и Маунтин-Вью.
Google отказалась от строительства кампусов в Сан-Франциско
Однако в связи с изменившейся рыночной обстановкой Google приняла решение расторгнуть договор с LendLease. Говорится, что в условиях пандемии COVID-19 резко изменились потребности компаний в офисных площадях. Причем рынок коммерческой недвижимости Калифорнии является одним из наиболее пострадавших в мире, поскольку удаленная работа привела не только к снижению спроса на офисные помещения, но и к сокращению стоимости недвижимости. К тому же Google вынуждена экономить средства в сложившейся макроэкономической обстановке. В официальном заявлении LendLease говорится, что соглашение с Google больше не является взаимовыгодным, учитывая текущие рыночные условия.
2022
Построен офис с нуля. В нем будут работать 4 тыс. сотрудников
17 мая 2022 года Google объявила об открытии своего кампуса Bay View в Маунтин-Вью, штат Калифорния. В компании заявляют, что в новом футуристическом зеленом комплексе будут работать 4 тыс. человек, а здания будут питаться от солнечных батарей.
Офис расположен на 42 акрах земли рядом с исследовательским центром NASA Ames Research Center в Маунтин-Вью и будет вмещать 4 тыс. сотрудников, работающих над рекламными продуктами под руководством вице-президента Google по рекламе Джерри Дишлера. Он включает в себя два офисных здания, центр для проведения мероприятий на 1000 человек и 240 временных жилых помещений для сотрудников, находящихся в городе на короткий срок.
Google впервые построила свой офис с нуля. В нем будут работать 4 тыс. сотрудников
Это первый проект компании, построенный с нуля. Другие объекты Google представляют собой уже существующие здания, которые были изменены силами компании, сообщил представитель Google.
Руководители и пресс-секретари не раскрыли финансовую стоимость новейшего кампуса. Однако известно, что он является одним из 20 ключевых проектов, которые получат инвестиции в 2022 году на сумму около $10 млрд. 29 ноября министр цифрового развития Максут Шадаев и CIO крупнейших компаний выступят на TAdviser SummIT
Открытие нового комплекса происходит в тот момент, когда компания осторожно возвращает большинство своих сотрудников в офисы после двух лет удаленной работы во время пандемии Covid-19.
Офис Google
По словам Рэдклиффа, часть этого планирования включала учет того, что сотрудники будут приходить в офис нерегулярно — на несколько дней или меньше. В кампусе есть неформальные помещения, гостиница на территории и различные пространства для работы групп из шести-десяти человек. В нем есть модульные столы, открытые, закрытые и прозрачные помещения.
Открытие нового комплекса Google
Крыша зданий покрыта 50 тыс. специально разработанными солнечными панелями, расположенными под углом, чтобы максимально увеличить сбор дождевой воды и света, проникающего в здание, а в сочетании с геотермальными сваями под офисным комплексом создается энергетическая схема, которая может охлаждать огромное сооружение в жаркую погоду и обогревать его в холодное время года, сообщают руководители компании.
По словам руководителей, гибкий подход к проектированию означает, что проектирование не заканчивается с открытием здания. Он будет изменяться на протяжении месяцев и лет. [2]
Планы по инвестированию $9,5 млрд в офисы и ЦОДы
13 апреля 2022 года компания Google заявила, что вложит $9,5 млрд в офисы и центры обработки данных в США. Инвестиции рассчитаны на 2022 год и ощутимо превосходят аналогичные вложения в 2021-м ($7 млрд).
Google намерена средства на создание офисных центров по всей стране (США) и планирует создать 12 тыс. новых рабочих мест в рамках инвестиций. Компания вложит деньги в новые офисные центры в таких городах, как Атланта, Остин и Портленд, штат Орегон. Помимо этого Google переоборудует некоторые из своих офисных зданий в США, в том числе в Кремниевой долине и Нью-Йорке.
В 2022 году Google также планирует потратить средства на строительство центров обработки данных в Теннесси, Вирджинии и Оклахоме. Компания также будет инвестировать в свои существующие центры обработки данных в Джорджии, Айове, Небраске и Техасе.
В апреле 2022 года Google потребовал от своих сотрудников в районе залива Сан-Франциско работать в своих офисах не менее трех дней в неделю, в зависимости от их роли в компании, что разочаровало многих сотрудников, которые хотели переехать за пределы дорогостоящего региона.
Аллен Фалкон, генеральный директор компании Cumulus Global, партнера Google Cloud в Уэстборо, штат Массачусетс, считает, что инвестиции в центры обработки данных позволят Google лучше конкурировать с такими облачными конкурентами, как Amazon Web Services, Microsoft Azure и IBM Cloud Services.
По данным Synergy Research Group, Google, наряду с основными конкурентами Amazon, Microsoft и IBM, обладает самыми обширными глобальными центрами обработки данных среди ведущих мировых поставщиков облачных и интернет-услуг. [3]
2021: Google купила офисное здание в Нью-Йорке за $2,1 млрд
21 сентября 2021 года Google сообщила о покупке офисного здания в Нью-Йорке за $2,1 млрд, чтобы сделать его якорным центром своего кампуса на Гудзон-сквер. Объявление было сделано, когда город охватила пандемия COVID-19, а большинство офисов все еще остаются незаселенными. Подробнее здесь.
2020
Google объявила о строительстве экологически чистого кампуса в Сан-Хосе
В середине октября 2020 года Google объявила о строительстве экологически чистого кампуса в центре Сан-Хосе, планы которого будут окончательно утверждены администрацией города весной 2021 года. На территории кампуса планируется расположить детские сады, центры перформативного искусства и смотровые площадки. Часть многофункционального кампуса в той или иной форме будет открыта для публики.
Кампус займет территорию площадью 80 акров в центре Сан-Хосе, а работать в нем будут 25 000 сотрудников. Более половины территории будет отведено под жилые и общественные помещения, включая такие объекты, как центры по уходу за детьми, кинотеатры на открытом воздухе и образовательные смотровые площадки.
Google сообщила о строительстве экологически чистого кампуса в Сан-Хосе
Предполагается, что кампус в Сан-Хосе будет включать 30 зданий и около 4000 единиц жилья, а также офисные помещения для некоммерческих организаций, в том числе YearUp и Tech Challenge. Компания также планирует расположить на отведенной территории торговые центры, отель и площадки для различных мероприятий и кинопоказов.
Дизайн кампуса ориентирован на охрану окружающей среды. Google планирует включить в него не менее 10 парков и несколько пешеходных троп. При этом почти все здания участка будут работать от солнечной или электрической энергии. В проектных документах указано, что в кампусе также появятся образовательные зоны «знакомства с экологическими системами».
Google сообщила, что 65% кампуса будут открыты для велосипедистов и общественного транспорта, а также доступны для пешеходов. Все эти нововведения призваны сократить использование автомобилей. Фактическое строительство кампуса начнется лишь через несколько лет, а до весны 2021 года в дизайн территории все еще могут вноситься изменения. [4]
Google строит в Калифорнии технополис с дешевыми квартирами и магазинами
В начале сентября 2020 года компания Alphabet, собственник Google, представила проект нового технополиса, который появится в городе Маунтин-Вью (штат Калифорния). Подробнее здесь.
Google отказалась от столовой, капсул для сна и спортивных залов в офисе
В середине июня 2020 года Google объявила, что готовится вернуть сотрудников в офис 6 июля, однако сам офис будет выглядеть иначе, чем привыкли работники. В частности, компания решила отказаться от столовых, капсул для сна и спортивных залов в офисе.
Возвращение сотрудников будет происходить постепенно, поскольку компания следит за выполнением рекомендаций по охране труда и технике безопасности. Google намерена вернуть в офис 10% работников и надеется увеличить эту долю до 30% к сентябрю.
Google готовится вернуть сотрудников в офис 6 июля
Во время видеозвонка вице-президент Google по глобальным операциям по обеспечению безопасности и отказоустойчивости Марк Райтсон (Mark Wrightson) рассказал сотрудникам, чего ожидать от возвращения в офис. Некоторые из этих изменений произойдут во всех точках Google, некоторые связаны с рекомендациями, установленными в конкретной стране. Сотрудникам также сообщили, что некоторые планы могут измениться до открытия офисов.
Google намерена каждый день вводить новые места входа в офисы, чтобы избежать столпотворения в холле здания по утрам. Проверки температуры при входе в офис будут проводиться самостоятельно, если местные власти не потребуют иного подхода. Кроме того, компания также рассматривает возможность проведения в некоторых офисах полноценных тестов на COVID-19 с мазками из носа.
Внутри помещений будет соблюдаться социальное дистанцирование, в том числе в столовых, конференц-залах и офисных комнатах для отдыха. В общественных местах требуется носить маски, их предоставит Google. Обычно сотрудники получали бесплатное питание, но теперь в столовых будут выдаваться только ланч-боксы, без завтрака и ужина. Сотрудникам также сообщили, что доступ к спортивным залам, капсулам для сна и массажным комнатам также будет закрыт. [5]
2019: Google превратит торговый центр в Лос-Анджелесе в свой офис на 54 тыс. кв м
8 января 2019 года Google сообщила об аренде здания торгового центра Westside Pavilion в Лос-Анджелесе для открытия там своего нового офиса площадью более 54 тыс. квадратных метров.
Компания начнет переделывать действующий трехэтажный торговый центр под офисы в 2019 году. Это здание Google арендовала на 14 лет, но данный срок будет исчисляться со времени завершения масштабной реконструкции здания и переименования его в One Westside. Окончание этого строительства намечено на 2022 год.
Проект обновленного нового здания One Westside взамен торгового центра Westside Pavilion
Google обратилась к архитектурной фирме Gensler для проектирования офисных площадей, которые будут включать почти 4200 кв. метров «обширных террас и патио» с изогнутыми стеклянными стенами, которые превращают пространство из внутреннего помещения в уличное. На крыше также расположится зона с небольшим садом.
По сообщению издания The Wall Street Journal (WSJ), компания Google будет отвечать за офисную часть проекта, в то время как владельцы недвижимости — Hudson Pacific Properties и Macerich — по-прежнему будут владеть и управлять частью торгового центра, соединенной мостом с офисной зоной.
Строительством кампуса в Лос-Анджелесе Google продолжила работу по расширению офисов за пределами Кремниевой долины. Ранее корпорация объявила о создании офиса в Нью-Йорке за $1 млрд.
Другие крупные технологические компании также расширяют присутствие вне Кремниевой долины и Сиэтла. Так, Amazon выбрала Нью-Йорк и Северную Виригинию в качестве места для строительства «двойной штаб-квартиры», а Apple строит новый кампус в Остине. [6]
WSJ отмечает, что Google имеет опыт перепрофилирования проектов для собственных нужд. В Лос-Анджелесе компания впервые расширилась в 2003 году, а затем она продолжила скупать и брать в аренду недвижимость в этом мегаполисе. Например, Google арендует бывший самолетный ангар в районе Плайя Виста.
2018
Строительство нового офиса за $1 млрд в Нью-Йорке
17 декабря 2018 года Google объявила о планах построить в Нью-Йорке новый кампус, в который собирается вложить $1 млрд. Компания сделала это заявление через несколько дней после того, как Apple сообщила о реализации аналогичного проекта.
Новый офис Google будет включать три здания: два из них уже арендованы к декабрю 2018 года, а по третьему — подписано соглашение о намерениях. Предполагается, что сотрудники въедут в первые два здания к 2022 году, а в третье – в 2022-м. Объект площадью около 158 тыс. квадратных метров расположится в районе Манхэттен на берегу реки Гудзон — на улицах Хадсон-стрит и Вашингтон-стрит.
Google построит новый офис за $1 млрд в Нью-Йорке
Google отмечает, что вместе с возведением нового кампуса компания поддержит инфраструктуру выбранного района, чтобы создать удобное место «для работы, жизни и развлечений».
По словам финансового директора Google Рут Порат, в Нью-Йоркском офисе будет работать более 7 тыс. человек, говорящих на 50 языках и занимающихся развитием различных сервисов Google, включая YouTube, Google Maps и Google Search, а также продажами, исследованиями, вопросами сотрудничества и поддержкой технической инфраструктуры.
Как отмечает агентство Reuters, решение Google построить кампус в Нью-Йорке отражает растущую важность города в качестве центра инноваций и инкубатора для технологических компаний. Ранее в 2018 году Amazon заявила, что инвестирует $5 млрд и создаст более 50 тыс. рабочих мест в двух новых штаб-квартирах, которые расположатся в Нью-Йорке и городе Арлингтон (штат Вирджиния).
Помимо Google и Amazon, новый кампус строит Apple, которая в декабре 2018 года анонсировала $1 млрд инвестиций в него. Офисный комплекс Apple разместится в Остине на площади почти 54 гектара и рассчитан на работу около 15 тыс. сотрудников. Изначально численность персонала будет измеряться 5 тыс. человек. [7]
Google строит деревню на 8 тыс. домов, где будут жить сотрудники рядом с офисом
В середине декабря 2018 года Google объявила о планах построить огромный жилой комплекс для своих сотрудников рядом с офисом компании в городе Маунтин-Вью, штат Калифорния, США. В опубликованных документах представлен амбициозный план по перестройке района North Bayshore: добавление новых жилых домов, офисов и торговых площадок.
Запланированное строительство – один из путей компании, который она избрала для решения старой проблемы нехватки жилья в этом районе. По данным CNBC, планы развития Google включают 3,12 млн квадратных футов офисных площадей, 400 000 квадратных футов торговых площадок, до 8 000 новых домов, а также 35 акров общественных пространств.
В середине декабря 2018 года Google объявила о планах построить огромный жилой комплекс для своих сотрудников рядом с офисом компании в городе Маунтин-Вью
Предложение Google было разработано в соответствии с программой «Точный план». Городской совет Маунтин-Вью в декабре 2017 года утвердил план перепланировки Google, чтобы устранить несоответствие между ростом рабочих мест в регионе и количеством предоставляемого жилья. Совет Маунтин-Вью одобрил стройку до 9 850 единиц жилья, 70% из которых являются однокомнатными квартирами или квартирами-студиями. Из них около 20% считаются жильем, доступным любому желающему.
Градостроители надеются, что проект, поддерживаемый Google, также поможет решить проблему уличных пробок, поскольку теперь сотрудники будут жить непосредственно рядом с офисами и им не нужно будет каждый день добираться до работы издалека. Согласно заявлению представителя Google, компания намеревается преобразовать доверенную ей область так, чтобы предоставить как можно больше жилых площадей и общественных мест, «которые отдают приоритет людям, а не автомобилям».
Google уже строит новый кампус в Маунтин-Вью под названием Charleston East, который включает пешеходные маршруты, общественный парк, площадь и несколько торговых центров. [8]
Google купила за $1 млрд недвижимость неподалеку от штаб-квартиры в Кремниевой долине
В конце ноября 2018 года стало известно о покупке компанией Google комплекса офисных зданий неподалеку от своей штаб-квартиры в городе Маунтин-Вью (штат Калифорния, США). Стоимость сделки составила около $1 млрд. Подробнее здесь.
«Умные» двери в штаб-квартиру Google можно взломать на раз-два
В начале сентября 2018 года стало известно об уязвимости электронной системы управления дверями в штаб-квартире Google. Причем ошибка оказалось весьма элементарной и неисправимой.
Для эксплуатации уязвимости в «умных» дверях в офисе Google в городе Саннивейл (Калифорния, США) достаточно было находиться в сети компании и собрать сообщения контроллера на закрытие/открытие дверей, чтобы иметь возможность повторить их самостоятельно. Двери управлялись устройствами производства Software House, в которых заявлялось шифрование сигналов.
Штаб-квартира Google в городе Саннивейл
Однако, как рассказал журналу Forbes инженер Google Дэвид Томащик (David Tomaschik), шифрование было номинальным. Все сообщения, которые отправлялись оборудованием Software House, содержали один фиксированный ключ шифрования. Достаточно было перехватить пару сигналов на открытие/закрытие дверей, после можно было получить контроль над системой.
Более того, не проверялось даже то, кто посылает запрос, в результате чего разблокировать двери или не дать открыть их сотрудниками можно было бесследно.
По словам Томащика, Google занялась этой проблемой сразу после того, как сотрудник поделился результатами своего анализа. Компания рекомендовала Software House произвести «полное тестирование безопасности приложения методом белого ящика», поскольку есть вероятность существования других уязвимостей в продуктах компании. В Google утверждают, что не обнаружено никаких попыток использовать уязвимость для кибератак.
Еще одна проблема, выявленная Дэвидом Томащиком, заключается в том, что прошивка в старых устройствах Software House не поддержает достаточного количества памяти, чтобы справляться с изменениями в программном обеспечении. Это означает, что компания не сможет применять исправления безопасности к уже выпущенному оборудованию, и только новые системы будут защищены от уязвимостей. В Software House подтвердили это и заверили, что клиенты решили проблему самостоятельно. [9]
Покупка исторической недвижимости за $2,4 млрд
В марте 2018 года стало известно о покупке компанией Google исторического комплекса зданий «Рынок Челси» (Chelsea Market) в Манхэттене (Нью-Йорк, США). Недвижимость продала инвестиционная компания Jamestown за $2,4 млрд.
По условиям сделки, Google получила в распоряжение офисное здание площадью более 110 тысяч квадратных метров с популярным продуктовым рынком на нижнем уровне и право на застройку 2,8 гектара. Ранее компания арендовала несколько этажей в здании, которое находится в одном из самых бурно развивающихся районов города.
Google купила «Рынок Челси» в Нью-Йорке за $2,4 млрд
Jamestown, к марту 2018 года управляющая активами в сфере коммерческой недвижимости общей стоимостью $11,8 млрд, сохранила право на использование бренда Chelsea Market за пределами Манхэттена и продолжит управлять торговыми площадями и фуд-кортом. Компания намерена развивать гастрономические рынки под маркой Chelsea Market в США и Европе.
Исторический комплекс зданий «Челси-маркет» на Манхэттене
Нью-йоркская штаб-квартира Google, занявшая целый квартал Манхэттена, находится как раз напротив Chelsea Market. Интернет-гигант приобрел эту недвижимость в 2010 году у той же Jamestown за $1,77 млрд. В этих офисах работают около 7 тыс. человек (данные на март 2018 года).
Google пока не говорит о дальнейших планах по Chelsea Market. По словам экспертов в области недвижимости, согласно правилам городского строительства, компания может пристроить к зданию до восьми этажей. Chelsea Market был построен на территории фабрики Nabisco, которую создали еще в XIX веке.
Google получила офисное здание площадью более 110 тысяч квадратных метров с популярным продуктовым рынком на нижнем уровне и право на застройку 2,8 гектара.
Президент Jamestown Майкл Филлипс (Michael Phillips) отметил, что сделка с Google подтверждает принадлежащий Нью-Йорку статус центра инноваций и инкубатора начинающих ИТ-компаний. По словам Дага Хармона (Doug Harmon), брокера Cushman & Wakefield, который представлял интересы Jamestown в сделке с Google, продажа Chelsea Market указывает на то, что рынок недвижимости в Манхэттене еще не потерял силу. [10]
2010: Фотографии офиса в Цюрихе
Компания Google в последние годы чаще других лидирует в рейтингах самых комфортных и приятных компаний. Считается, что в офисах Google как нигде больше народ действительно любит и хочет работать. При этом всем официально разрешено 20% рабочего времени тратить на свои нужды. Взгляните на их офис в Цюрихе.
2003: Переезд в кампус Googleplex
К тому моменту команда Google расширялась за пределы офисов в Пало-Альто. Поэтому в 2003 году компания арендовала кампус Googleplex у технологической компании Silicon Graphics International. Через 3 года Google смогла полностью выкупить Googleplex.
Команда Google в 2003 году
Здание штаб-квартиры Googleplex
Googleplex стал символом успеха Кремниевой долины. Google старалась сделать его более экстравагантным по сравнению с другими офисными зданиями в регионе. Например, первые два этажа главного корпуса соединяла горка.
Горка в офисе Google
Google считается первой крупной технологической компанией, которая предложила своим сотрудникам бесплатное питание. Кафетерий Google стал легендой Кремниевой долины, отмечает издание Business Insider.
Работники Google едят в столовой кампуса
На территории штаб-квартиры Google находится статуя динозавра, покрытая многочисленными маленькими фламинго. В компании ходят слухи, что эта конструкция призывает сотрудников не допускать профессионального выгорания.
Статуя динозавра на территории кампуса Google
1999: Открытие первого офиса
После неудачной попытки продать Google Сергей Брин и Ларри Пейдж решили сделать из своего проекта полноценный бизнес. Для этого в марте 1999 года Google переехала в свой первый офис на 165 University Avenue в Пало-Альто, в котором базировались такие крупные компании, как PayPal и Logitech.
Первый офис Google
Примечания
- ↑Google ends agreement with lead developer of four California campuses
- ↑Google opens new ‘Bay View’ campus that was designed for worker flexibility — here’s what it looks like
- ↑ []
- ↑Here’s a first look at Google’s plans for its massive San Jose campus
- ↑Lunch boxes, temperature checks, and no more sleep pods: Insiders reveal how Google is planning its return to the office
- ↑Google plans a new 584,000 square-foot campus in Los Angeles following its $1 billion investment in New York
- ↑Google Hudson Square: our expanded New York campus
- ↑Google’s massive expansion plan: Its own village with up to 8,000 homes
- ↑Google’s Doors Hacked Wide Open By Own Employee
- ↑Google closes $2.4 billion Chelsea Market deal to expand New York campus
Лучшие офисы Google в разных странах мира
27 сентября, день рождения Google. Компания была основана выпускниками Стэнфордского университета Ларри Пейджем и Сергеем Брином в 1998 году. Сегодня у Google свыше 70 офисов по всему миру, которые создаются как универсальные пространства для работы, отдыха и обучения. Согласно правилам компании, каждый офис отражает национальную специфику той страны, в которой расположен. «РБК-Недвижимость» — представила девять самых ярких штаб-квартир Google в разных странах мира.
Италия
Интерьер миланского офиса Google, выполненный по проекту бюро Albera Monti & Associati, — один из самых ярких. О национальном колорите здесь напоминают расписные фургоны с овощами и фруктами, как на итальянских улицах, настенные изображения персонажей комедии дель арте и разноцветные диваны знаменитого дизайнера Гаэтано Пеше.
Швейцария
Цюрихский офис Google по проекту бюро Camenzind Evolution передает швейцарский колорит — с альпийскими лугами, грядами гор, пасущимися коровами и лебедиными стаями на берегу Женевского озера. Переговорные и зоны для отдыха выполнены в стиле разных швейцарских кантонов.
Россия
Московский офис Google оформлен в виде столичного метрополитена: холлы напоминают длинные подземные коридоры, в билетных кассах угощают бутербродами, а за окнами кабинетов-вагонов открываются высокие витражи с панорамным видом на город. Реализацией проекта занималось бюро OFFCON.
Израиль
Для создания интерьера тель-авивского офиса Google архитекторы из студий Camenzind Evolution, Setter Architects и Yaron Tal использовали главные образы израильской культуры, архитектуры и природы. Каждый из восьми тематических этажей офиса оформлен в своем стиле — пляж на берегу Мертвого моря, местный рынок, ресторан или улочка древнего Иерусалима.
Венгрия
Штаб-квартира Google в Будапеште, который славится своими термами и минеральными купальнями, стилизован под спа-центр. Переговорные здесь напоминают сауны, зал заседаний — бассейн, а кабинеты — массажные комнаты и турецкие бани. Прообразом необычного интерьера стали две известные в Венгрии купальни — Сечени и Геллерт.
Испания
Мадридский офис, разработанный архитектурным бюро Jump Studios, находится в одном из самых известных зданий города — башне Пикассо. Интерьер офиса отсылает к богатому архитектурному наследию страны. Так, стены переговорных украшают изображения знаменитых зданий Гауди, а также символа Мадрида — скульптуры медведя с земляничным деревом.
Ирландия
Дублинский офис Google, спроектированный архитектурными студиями Camenzind Evolution и Henry J. Lyons Architects, отсылает к характерным для Ирландии природным цветам и материалам, которые использованы в оформлении интерьера. Помимо рабочих мест, здесь расположены игровые комнаты, кафе, фитнес-центр, спа, образовательный центр и конференц-зал.
США
Два года назад Google представила новый проект развития штаб-квартиры в калифорнийском городе Маунтин-Вью. Кампус одной из крупнейших IT-компаний мира получил название Googleplex. Авторами концепции штаб-квартиры Google выступили архитектурные бюро BIG и Heatherwick Studio. Они предложили оснастить офисы штаб-квартиры прозрачными куполами, которые можно будет достраивать по мере открытия новых подразделений.
Великобритания
Этим летом лондонские власти согласовали проект строительства нового офиса компании Google в Великобритании. Архитектурную концепцию нового кампуса американской компании разработали автор современного дизайна знаменитого лондонского двухэтажного автобуса Томас Хизервик и основатель архитектурного бюро BIG Бьярке Ингельc. Внутри здания, помимо офисных помещений, запланированы кинозал, спортзал, 25-метровый бассейн, площадки для спортивных игр, массажный кабинет и магазины.
источник: РБК недвижимость
Дата-центры Google. Как устроена самая технологичная сеть серверов, разбросанная по всему миру?
Серверы в морских контейнерах, туалетная вода для охлаждения, ледяные батареи, почта на магнитной ленте, аллигаторы в пруду и 500 кг выбросов CO2 в секунду.
Google был основан в 1998 году Ларри Пейджем и Сергеем Брином. Последний родился в Москве в семье советских евреев-математиков и выпускников МГУ, впоследствии переехавших в США.
За годы из обычной поисковой системы, размещенной внутри небольшого системного блока с корпусом из Lego, Гугл превратился в целую экосистему дата-центров, разбросанных по всему миру.
На момент 2022 года капитализация «Alphabet Inc», материнской компании Google, составляла порядка 1,5 триллиона долларов. Выручка за 2021 год — чуть больше 257 миллиардов долларов. Над продуктами компании трудится около 163 000 человек по всему миру.
Штаб-квартира Google, именуемая «Googleplex», с самого основания расположена на территории Кремниевой долины в городе Маунтин-Вью штата Калифорния.
Как и подобает огромной технологической компании, основной продукт Google — поисковая система — окружен множеством сервисов и приложений. Наиболее популярные из них: YouTube, Gmail, Google Maps, Google Drive, Google Docs, Google Translate, Google Play.
По данным Internet Live Stats за 2017 год, дата-центры Google обрабатывают в среднем 40 миллионов поисковых запросов в секунду, что дает около 3,5 миллиарда запросов в день и 1,2 триллиона — в год.
Поисковая система индексирует около 20 миллиардов веб-страниц каждый день, а сервис показа объявлений AdWords проводит миллионы рекламных аукционов в режиме реального времени. Gmail хранит электронную почту более 500 миллионов пользователей по всему миру, при этом на каждый почтовый ящик в среднем приходится 17 000 писем.
Чтобы покрыть стремительно растущий спрос на онлайн-сервисы, IT-гиганты вынуждены расширять свою сетевую инфраструктуру из года в год, наращивая вычислительные мощности. Поэтому строительство новых центров обработки данных, или сокращенно ЦОД — важная, если не основная, статья расходов Google.
Дата-центры в Америке, Европе и Азии
Согласно официальным данным, размещенным на сайте Google, по состоянию на 2022 год компания владеет 14 дата-центрами в Северной Америке, 1 в Южной, 6 в Европе и 2 в Азии. В общей сумме 23 ЦОД, каждый из которых имеет свою историю строительства и уникальные технические особенности. При этом, с 2018 по 2022 год было объявлено о начале возведения еще как минимум 6 дата-центров.
На самом деле, официальный сайт компании отражает лишь цифровые мощности, находящиеся в непосредственном владении Google. Помимо них, компания имеет множество стратегических партнеров по всему миру.
Например, регион платформы Google Cloud в Польше был открыт благодаря партнерству с польской компанией DCP (Poland’s Domestic Cloud Provider). Google инвестировал около 2 миллиардов долларов в инфраструктуру ЦОД в Польше, превращая страну в центральную облачную локацию Европы.
Но самый первый сервер компании находился в колокейшн дата-центре Exodus в Санта-Кларе штата Калифорния. Тогда, в 1999 году, у Гугла еще не было своих ЦОД, а имеющаяся мощность — всего 2,5 квадрата инфраструктуры. По соседству стояли серверные стойки eBay, DEC и AltaVista.
В 2003 году, на заре строительства собственных ЦОД, Google разрабатывал модульные дата-центры, которые планировал использовать в будущем. Впоследствии, в 2007 году, технология была запатентована.
Конструкция представляла собой ангар, внутри которого размещались готовые к использованию металлические контейнеры с серверами и охладительным оборудованием внутри.
Предполагались разнообразные схемы соединения контейнеров с центральным «стержнем» питания. В одном случае контейнеры укладывались поверх друг друга в башню. В другом — собирались в многорядную одноэтажную конструкцию.
Однако, амбициозные идеи молодой по тем временам компании оказались на пыльной полке опрометчивых идей.
Один из изобретателей, указанный в патенте, Уильям Уиттед, еще в 2007 году публично заявил, что проект портативного центра обработки данных закрыт. Об этом он сообщил в статье San Francisco Chronicle, повествующей о «пенсионерах» компании: «Одна из идей, которую я отстаивал, заключалась в том, чтобы построить переносные центры обработки данных в грузовых контейнерах. Проект, который Google тестировал на стоянке своей штаб-квартиры, в конечном итоге был отменен».
В дальнейшем компания использовала более консервативные, но не менее инновационные в своем исполнении подходы.
Пока инженеры компании тестировали технологию контейнеров, Google в 2003 году построил первый полноценный ЦОД в округе Дуглас города Атланта — столицы штата Джорджия. Избыточная электроэнергия, низкие тарифы на коммунальные услуги (50% от средней по стране), лояльная налоговая система и низкий риск стихийных бедствий делают Дуглас привлекательным местом для размещения дата-центров.
С 2015 года Google, Switch, Microsoft, PWC, Stack, T5 и Digital Realty инвестировали в серверную инфраструктуру Дугласа более 4 млрд долларов. Поэтому в лесистой местности округа возвышается другой крупнейший дата-центр Атланты от компании Switch — The Keep Campus. Его можно наблюдать на спутниковых снимках буквально через дорогу от ЦОД Google.
На строительство собственного дата-центра в Дугласе Google потратил 1,2 миллиарда долларов, создав около 500 рабочих мест для его дальнейшего обслуживания.
Изначально Google охлаждал оборудование объекта, используя водопроводную воду напрямую, как и в большинстве местных домов. Но в какой-то момент стало понятно, что вода не обязательно должна быть кристально чистой. К тому же, потребление ЦОД настолько велико, что может вызвать нехватку питьевой воды во время засух.
Для уменьшение нагрузки на естественное водоснабжение округа часть воды забирается из сточных вод Дугласа. Управление водоснабжения и канализации округа владеет сооружением, которое очищает канализационные воды от местных домов и возвращает их в реку Чаттахучи в Джорджии. Часть этой воды уходит на вторую очистную станцию, построенную и оплаченную Google. После очистки вода направляется в дата-центр компании.
По сути, когда жители округа принимают душ или спускают воду в туалетах, они помогают охлаждать ЦОД Google. В планах компании увеличить количество оборотной воды до 100 процентов, исключив использование водопровода округа.
Традиционные ЦОД охлаждают серверные комнаты с помощью гигантских кондиционеров, которые размещаются под фальшполами. Это требует огромного количества энергии. Известно, что дата-центры потребляют до 1,5% всей электроэнергии в мире.
Урс Хёльцле, восьмой сотрудник Google и первый вице-президент по инженерным вопросам, вместе со своей командой пришел к выводу, что серверные комнаты не должны быть такими холодными, как это принято в обычных дата-центрах.
Подход, используемый в Google, делит серверное пространство на две части: холодная и горячая.
«Холодный коридор» — основное пространство перед серверными стойками, где поддерживается более высокая температура в 26 градусов Цельсия.
«Горячий коридор» — узкое пространство между задними панелями двух рядов серверов, плотно закрытое металлическими листами на концах. Температура здесь достигает 50 градусов Цельсия.
Вентиляторы в задней части корпуса обеих стоек всасывают воздух, направляя его из холодного коридора в горячий. Проходя через компоненты серверов, воздух нагревается, после чего, поднимаясь в верхнюю часть горячего коридора, передает свое тепло медным змеевикам (катушкам), которые заполнены водой, циркулирующей через охладительное оборудование. Далее, охлажденный до комнатной температуры воздух выпускается через верхнюю часть корпуса стоек.
Сам змеевик соединен с гибким трубопроводом, который спускается через отверстие в полу и, проходя под фальшполом, ведет к градирням, расположенным в другой части здания.
Такая конструкция, известная как «Close-Coupled Cooling», является системой охлаждения последнего поколения. За счет близкого расположения кондиционера к стойке с оборудованием обеспечивается более точное перемещение приточного и отработанного воздуха.
Этот подход более эффективен, чем потолочная камера для перемещения горячего отработанного воздуха на большие расстояния в кондиционеры машинного зала, именуемая «Computer Room Air Condition» (CRAC).
В качестве оборудования для охлаждения многие дата-центры полагаются на чиллеры, потребляющие приличное количество энергию, но в ЦОД Google обычно используются градирни, где горячая вода просачивается вниз через огромные радиаторы. Часть воды испаряется, а часть достигает комнатной температуры или ниже.
Однако чиллеры в дата-центре Дугласа есть до сих пор. Правда их количества едва ли хватит на весь объект. Они используются только в те дни, когда канализационные воды и градирни становятся слишком горячими.
Второй дата-центр Google был построен в 2006 году в городе Даллас штата Орегон. Здесь, на берегу реки Колумбия, в 1950-е годы располагался алюминиевый завод, который закрылся к концу 1980-х.
Как и все последующие ЦОД компании, дата-центр в Орегоне имеет похожую организацию серверных стоек, подвода энергопитания, оборудования для охлаждения и горячих/холодных коридоров.
За все время в дата-центр Далласа было инвестировано 1,8 миллиарда долларов. Первоначальная площадь здания составляла 164 000 квадратных футов. Однако размер последующих расширений держался в тайне.
В холодное время суток над зданиями центра можно наблюдать поднимающиеся столбы водяного пара, испускаемого круглосуточно работающими градирнями. Однако вода в них поступает не из близлежащей реки, а через обычный водопровод.
Дело в том, что водоносный горизонт Далласа был сильно истощен к 1950-м годам из-за сельскохозяйственного орошения и бывшего алюминиевого завода на территории Google. С 1959 года город отводит воду из реки Колумбия на близлежащие фермы в новый ирригационный район. Тем не менее, городская зона продолжает расширяться, увеличивая ежедневное потребление воды. Поэтому город относится весьма осторожно к любому промышленному использованию воды.
Федеральный закон не разрешает снятие воды с Колумбии. Исключение возможно, если водопользователь возвращает воду обратно в реку. Однако сейчас Google сбрасывает воду в городскую канализацию, где она смешивается с остальными сточными водами, которые проходят стадии очистки для соответствия принятым стандартам.
В 2007 году было закончено строительство дата-центра в округе Беркли штата Южная Каролина. С 2013 года объект несколько раз расширялся, достигнув общего объема инвестиций в 2,4 миллиарда долларов. Сегодня здесь работает около 400 человек.
Увидеть масштаб вложений в подобные ЦОД можно со снимков Google Maps — территория объекта действительно впечатляет. Он похож на небольшой микрорайон со своими улицами, дорогами и парковочными местами.
Дата-центр в Южной Каролине один из самый дорогих и нестандартных ЦОД компании. Чтобы уменьшить нагрузку на водоснабжение округа Google собирает дождевую воду в небольшой пруд и использует ее в системе охлаждения.
Для очищения водоема от цветущих водорослей компания экспериментировала с «телапией» — пресноводной рыбой, питающейся водными растениями. Она также является популярным пунктом меню в ресторанах.
По слухам, некогда в пруду обитал 4-футовый аллигатор, однако как обстоят дела сейчас — неизвестно.
В 2017 году Google опубликовал документ, описывающий преимущества добычи грунтовых вод в округе Беркли для охлаждения своих серверов. На запрос об откачке 1,5 миллионов галлонов в день или 550 миллионов в год законодательный орган ответил крайне жесткими условиями.
Google может извлекать подземные воды только в крайнем случае, когда все другие запасы воды исчерпаны. Это возможно во время пикового спроса в жаркие летние дни, или в случае чрезвычайной ситуации. Единственный другой сценарий — проведение технического обслуживания своей скважины.
На самом деле, водные потребности дата-центров вызывают серьезные споры среди местного населения и активистов. Миллионы галлонов воды в сутки на один объект зачастую выглядят несуразно на фоне заявлений об экологичности серверной инфраструктуры. Компании Google приходится серьезно обосновывать использование столь больших объемов.
Чтобы Google соблюдала вышеуказанные правила, компания должна публично отчитываться об использовании подземных вод каждый квартал.
А вот где Google может использовать воду свободно, так это в Хамине, Финляндия. В феврале 2009 года Google заплатил 52 миллиона долларов за заброшенную бумажную фабрику на берегу Финского залива, после того, как решил, что 56-летнее здание — идеальное место для строительства массивного вычислительного центра.
Часть привлекательности заключалась в том, что мельница в Хамине включала в себя подземный туннель, который когда-то использовался для забора воды из моря. Первоначально эта холодная балтийская вода охлаждала паровую установку на заводе, но Google увидел в этом способ охлаждения своих серверов.
С 2009 года Google инвестировал 1,2 миллиарда евро в дата-центр в Хамине и его периферийную сетевую инфраструктуру. К моменту завершения первого этапа строительства в 2011 году, более 2000 человек и около 50 финских компаний из различных отраслей приложили руку к проектированию этого ЦОД.
Здесь, как и в Бельгийском дата-центре, Google не использует чиллеры вообще — тут их просто нет. Для отвода тепла от серверов используется система перекачки морской воды.
Как и в остальных ЦОД компании, воздух из горячего коридора позади серверных стоек передает свое тепло воде.
Чтобы резкий перепад температуры не нарушал среду вокруг, горячая вода от серверов сбрасывается в море не сразу, а проходит дополнительную стадию охлаждения. Да, вода, охлаждающая серверы, впоследствии тоже охлаждается.
Для этого она проходит несколько стадий смешивания с холодной морской водой, после чего сбрасывается обратно в Финский залив. На выходе ее температура такая же, как и температура Балтийского моря.
В то время как предприятие в Хамине перекачивает воду из моря, в бельгийском центре обработки данных используется система испарительного охлаждения, которая забирает воду из близлежащего промышленного канала.
Таким образом, за счет собственной водоочистной станции Google экономит питьевую воду городского водопровода Валлонии, где расположен дата-центр.
Объект, полностью введенный в эксплуатацию в 2010 году, стал первым дата-центром Google в мире, где полностью отсутствует механическое охлаждение в виде чиллеров. Общая сумма инвестиций 1,6 миллиарда евро.
Эти усилия не остались незамеченными, и в 2018 году Европейская комиссия признала дата-центр в Сен-Гилен лучшим за последние десять лет в номинации «Кодекс поведения в области энергоэффективности в центрах обработки данных».
Мягкий бельгийский климат способствует низкой температуре серверов, упрощению систем охлаждения и росту энергоэффективности объекта, но требует локального прогнозирования погоды в управлении ЦОД.
Несмотря на то, что оптимальное для дата-центра место не обязательно будет оптимальным для солнечной или ветряной электростанции, требующей огромные участки земли, Google решил попробовать свой солнечный проект.
Установленные рядом с дата-центром 10 665 фотоэлектрических панелей генерирует 2,8 гигаватт-час чистой электроэнергии, питая водоочистную установку предприятия круглый год.
В 2022 году Google модернизировала свой дата-центр в Бельгии, заменив дизельные генераторы на модульные батареи Gridstack от компании Fluence. Аккумуляторы имеют общую энергетическую емкость 5,5 МВтч. Это еще один уверенный шаг в сторону зеленой энергетики.
Резервные источники питания используются во время перебоев в электросети, обеспечивая работоспособность серверов 24 часа в сутки.
Контроль батарей осуществляется программным обеспечением FlexPond от компании Centrica. Система также допускает возможность поставки энергии в электросеть города для обеспечения ее стабильности.
Интересно, что у Google есть так называемые «экскурсионные часы», когда сотрудники покидают здание ЦОД, хотя серверы остаются в рабочем состоянии. Это происходит, когда по климатическим причинам в дата-центрах становится слишком жарко.
А вот один из азиатских дата-центров в Тайване, расположенный на берегу округа Уезд Чанхуа, со всех сторон окружен 100-метровыми ветряными турбинами.
Особенность этого ЦОД в том, что он аккумулирует ночную электроэнергию в холодных батареях со льдом или хладагентом, после чего использует ее днем для охлаждения серверов. Причина такого решения — дешевые ночные тарифы на Тайваньскую электроэнергию.
Похожая система накопления энергии в виде холода используется в дата-центре Phoenix ONE от компании Iron Mountain. Ночью чиллеры охлаждают резервуар с ледяными шариками из криогеля, а днем шарики отводят тепло от воды, циркулирующей через дата-центр.
Помимо термальных батарей, Google совместно с тайваньской энергетической компанией New Green Power создает проект из 40 000 солнечных панелей, расположенных в 100 км от дата-центра.
Несмотря на то, что Тайвань — относительно небольшой остров, плотность застройки в Сингапуре, где расположен второй азиатский дата-центр Google, гораздо выше. Поэтому, это первый городской ЦОД компании, где серверные стойки размещаются сразу на нескольких этажах. Напротив — местная начальная школа и пара многоквартирных домов.
Территория комплекса в городе Джуронг-Уэст всего 3 гектара земли. Из-за этого градирни размещены на крыше, а их резервуары — на предпоследнем этаже.
Дешевые серверы, магнитные ленты и армия охранников
Официальных данных о том, сколько серверов находится в распоряжении Google нет. По предположениям Gartner, компании технологических исследований, на момент 2016 года Google владела 2,5 миллионами серверов. Скорее всего, это число стремительно увеличивается по мере расширения серверной инфраструктуры компании.
Однако, точно известно, что еще в самом начале Google отказался от типовых решений, имеющихся на рынке, и разработал собственную серверную платформу.
Подход к проектированию серверов у Google отнюдь не максималистский, как следовало бы ожидать от IT-гиганта. Компоненты серверов выбираются исходя из соотношения цены и качества, а не максимальной производительности, доступной в конкретный технологический период.
Серверы имеют незамысловатый вид и открытый корпус, что обеспечивает легкий доступ для администраторов, регулярно заменяющих вышедшие из строя компоненты. Функциональный дизайн позволяет избежать затрат на косметические атрибуты и декоративные излишества, характерные для OEM-серверов: причудливые обложки, крашенные кожухи из листового металла и сложные крепления.
В классических дата-центрах используются источники бесперебойного питания (ИБП) — громоздкие батареи с собственной системой охлаждения, включающиеся во время неполадок с электросетью.
Поскольку стойки Google уже охлаждаются змеевиками, в корпус каждого сервера устанавливается небольшая батарея — каждая соответствуют уровню Gold стандарта Energy Star с КПД не менее 90%. Такая схема снижает потери электроэнергии примерно на 15%.
Процесс установки сервера прост: администратор вытягивает металлическую заглушку из стойки и вставляет вместо нее сервер, свободно продувающийся системой охлаждения.
Когда серверные части ломаются, Google пытается их починить. Если это невозможно, они разбираются на расходники, используемые в ремонте других серверов или в производстве новых.
В 1999 Урс Хёльцле купил детали для сборки 2000 рабочих прототипов серверов у небольшого поставщика электроники. Исключив ненужные компоненты, Google построил партию серверов примерно по 1500 долларов за штуку вместо стандартных на те времена 5000 долларов.
Изначально Google создавал собственные серверы ради экономии денег, однако сегодня проектирование ЦОД требует более комплексного подхода — серверы должны работать в тандеме с оборудованием для питания и охлаждения, словно единый организм. Это минимизирует затраты на электроэнергию, воду, строительные ресурсы и персонал.
В 2021 году Google заявил о начале проектирования собственных серверных чипов SoC — «систем на кристалле», где несколько функций выполняются на одном чипе. По сути, это замена материнским платам, которая снижает энергопотребление и повышает производительность. Для этого Google наняла Ури Франка, бывшего исполнительного директора Intel, на должность вице-президента по разработке серверных чипов.
С 2016 года Google использует собственные аппаратные акселераторы для приложений машинного обучения. Специальная плата, именуемая «Tensor Processing Unit» (TPU), устанавливается в слот для жесткого диска на сервере и обеспечивают более высокую производительность на ватт для машинного обучения.
За счет того, что чип адаптирован для неточных вычислений, ему требуется меньше транзисторов на операцию. Благодаря этому на единицу площади микросхемы можно уместить большее количество транзисторов, увеличив скорость вычислений.
Известно также, что, кроме аппаратного обеспечения, Google использует собственную файловую систему Google File System (GFS), предназначенную для хранения больших объемов данных между вычислительными системами — отдельными серверами и дата-центрами.
Файловая система является кластерной, несовместима с POSIX и тесно интегрирована с другим продуктом Google — MapReduce. GFS распараллеливает операции на несколько машин одновременно, шифруя и сохраняя информацию минимум в 3 местах одновременно.
GFS, будучи закрытой и кастомизированной, создана для внутренних потребностей Google — такие системы, помимо решения утилитарных задач, устойчивы против внешних атак и имеют меньше уязвимостей.
С 2018 года системы охлаждения в дата-центрах Google полностью управляются искусственным интеллектом, разработанным совместно с DeepMind — лондонской компанией, которую Google приобрел в 2014 году.
Изначально эта система давала лишь рекомендации персоналу, который управлял ЦОД, что приводило к снижению энергопотребления на 40 процентов. Однако, впоследствии Google полностью передал управление алгоритму.
Система имеет средства безопасности, предотвращающие действия, которые отрицательно влияют на охлаждение. Менеджер дата-центра может наблюдать за системой в режиме реального времени и вмешиваться, если что-то идет не так.
Как сообщает Google, компания снизила энергопотребление периферических систем, не связанных с вычислением (охлаждение, трансформаторы, освещение) до 11%, в отличие от большинства ЦОД, где это значение достигает 50% от общих энергозатрат — то есть около половины.
Поэтому, за счет множества оптимизаций, дата-центры Google имеют беспрецедентный показатель энергоэффективности PUE— 1,10. Для сравнения, согласно опросу среди серверных компаний, проведенному Uptime Institute в 2021 году, средний мировой показатель крупнейших ЦОД составляет около 1,57.
Показатель PUE, первоначально разработанный в 2006 компанией The Green Grid, был опубликован в 2016 году как глобальный стандарт в соответствии с ISO/IEC 30134-2:2016.
Он определяется компанией как «отношение всей энергии, используемой для работы целого объекта, к энергии, используемой только для питания серверов».
Однако Google расширил формулу, включив в список накладных расходов электрические потери в кабеле питания сервера и энергии трансформатора в подстанциях. В энергию ИТ-оборудования входят только серверы, системы хранения и сетевое оборудование.
Если бы Google использовал стандартную для отрасли интерпретацию стандарта, каким его задала The Green Grid, дата-центры могли бы похвастаться PUE менее 1,06.
При этом, расчеты показателя основываются на средней производительности всех дата-центров компании, а не только нескольких лучших объектов.
Точность PUE обеспечивается десятками онлайн-измерителей в разных участках дата-центра. Одна часть счетчиков учитывает расходы на общую инфраструктуру объекта, другая — на ИТ-оборудование и его компоненты.
Повысить энергоэффективность ЦОД можно и с помощью специальных накопителей информации. Многие могли бы подумать, что технология ленточных носителей осталась в далеком прошлом, однако именно она используется в дата-центрах Google для архивации данных на случай их потери.
Информация с жестких дисков периодически копируется на магнитную ленту.
Почему именно магнитная лента? У ленточных накопителей рекордная плотность информации и практически отсутствует энергопотребление. В отличие от пластин жесткого диска, требующих постоянного питания, лента находится в неактивном состоянии при отсутствии операций чтения и записи. Ее энергопотребление в сотни раз меньше классических решений эквивалентной емкости.
Еще в 2010 году инженеры IBM компании Fujifilm разработали прототип кассетного накопителя, плотность записи которого около 29,5 Гбит на квадратный дюйм, что является мировым рекордом по плотности записи информации на магнитную ленту — на маленький картридж 10x10x2 сантиметров поместится 35 терабайт данных.
Да, магнитная лента существенно уступает жёсткому диску в скорости работы, однако ее предназначение — не операции над данными за сравнительно короткие промежутки времени, а почти вечное хранение — в ожидании того единственного случая, когда потребуется резервная копия.
И такой случай уже был. В 2011 году произошел крупный сбой Gmail. Потерянные письма 40 000 пользователей были восстановлены из ленточных библиотек Oracle StreamLine 8500 с использованием дисков Linear Tape-Open (LTO).
Google имеет несколько десятков роботизированных библиотек. Каждая лента внутри имеет уникальный штрих-код, по которому рука робота может оперативно находить необходимые блоки информации.
Однако, сохранность информации за счет архивации — это одно. Но совсем другое — ее конфиденциальность. Помимо программных систем защиты, дата-центр должен обеспечивать физическую безопасность данных.
Google рассматривает свои ЦОД как конкурентное преимущество, поэтому только критически важные сотрудники имеют прямой доступ к серверным стойкам.
Компания утверждает о существовании 6 уровней безопасности, которые направлены на защиту пользовательских данных и сокрытие определенных технологических решений компании.
Первый уровень, наиболее очевидный и важный — ограждения и предупреждающие знаки. Высокий забор с защитой от перелезания — разумное, но достаточно консервативное решение. Но в случае Google, забор покрыт специальным волокном, сообщающим охране о любом прикосновении человека к нему.
Второй уровень — безопасный периметр. Он включает в себя главные ворота, систему видеонаблюдения, регулярное патрулирование территории охраной и автоматические барьеры для транспортных средств, способные выдержать удар грузовика.
Третий уровень — доступ к зданию. На входе в здание, помимо личного пропуска, проводится проверка биометрии — сканирование радужной оболочки глаза. В ключевых участках внутри дата-центра аналогично требуется подтверждение личности. Проходить через любые точки авторизации (шлюзы, двери, ворота) можно только по одному.
Четвертый уровень — центр управления безопасностью. Это отдельное защищенное помещение внутри ЦОД, куда «стекается» информация от всех систем защиты на объекте: данные от камер, открытия/закрытия дверей, биометрии. Это «мозг» всей системы безопасности дата-центра.
Пятый уровень — этаж центра обработки данных. Доступ сюда имеет меньше 1% сотрудников ЦОД. Учитывая, что среднее количество персонала на объектах Google — 350 человек — это не более 3-4 сотрудников на весь дата-центр. Это исключительно инженеры и техники, обслуживающие, модернизирующие и ремонтирующие серверное оборудование.
Несмотря на это, хранящиеся данные зашифрованы. В результате те, у кого есть доступ к машинам, не имеют доступа к данным, которые на них находятся.
Шестой уровень — безопасное уничтожение жестких дисков. В отличие от вышедших их строя серверов, которые компания пытается реанимировать или разобрать на компоненты, поломанные жесткие диски полностью уничтожаются. Это общий подход Google по сохранению конфиденциальности данных. Контроль над носителями информации внутри ЦОД — целая цепочка действий, начинающаяся от прибытия дисков с завода на объект, и заканчивающаяся их вывозом на мусоропереработку.
Носители информации в дата-центре занесены в базу данных, позволяющую отслеживать статус каждого диска на складе или в одном из работающих серверов. При поломке, администратор вынимает жесткий диск из серверной стойки, пробивает его штрихкод и помещает в защищенную ячейку, которая передается в отдел утилизации через двустороннюю систему шкафчиков. Это гарантирует, что только специалисты могут производить манипуляции над сломанными носителями.
Сперва диск попадает под пресс с металлическим наконечником, который продавливает камеру с памятью, и только потом его прокручивают через промышленный измельчитель. Только после этого жесткий диск может покинуть территорию дата-центра.
Наконец, вынести с серверного этажа что-либо почти невозможно — каждый сотрудник проходит металлодетектор.
Каждый год уровни безопасности тестируются группой инженеров SRE (Site Reliability Engineering), которые имитируют реальную атаку на дата-центры.
Сценарии самые разные: отключение внутренней корпоративной сети, протечки в водопроводных трубах, акции протеста перед воротами для отвлечения внимания от «злоумышленников», попытка физического проникновения для похищения данных, сбой целого дата-центра в одной из стран или потеря оптоволоконной связи с Азией.
Обычно специалисты SRE собираются в конференц-зале одного из ЦОД США, после чего наблюдают за реакцией сотрудников в атакуемых дата-центрах в других частях мира. Менеджеры по ликвидации чрезвычайных ситуаций должны выполнять процедуры реагирования для поддержания работоспособности ЦОД.
Команда SRE отслеживает телефонные линии и IRC-каналы, чтобы наблюдать за реакцией дежурных диспетчеров Google по всему миру. В среднем, Европе требуется около пяти минут на обнаружение проблемы, после чего персонал начинает связываться с другими. Если ответственные команды не могут найти исправления, атаки прерываются, чтобы не затронуть реальных пользователей.
Наконец, Google является крупнейшим в мире корпоративным покупателем возобновляемой энергии. Подписывая соглашения о покупке электроэнергии у зеленых поставщиков, компания инвестирует огромные средства в строительство новых ветряных турбин и солнечных панелей.
В Финляндии, Дании и Чили расположены три крупные электростанции, питающие местные дата-центры Google.
Чилийская компания AES Chile с помощью ветряных турбин генерирует 125 МВт энергии для дата-центра в муниципалитете Киликура недалеко от Сантьяго.
В Финляндии Google подписал контракт с Ilmatar на покупку примерно 60% от 211 МВт энергии, вырабатываемых крупнейшей ветряной электростанции Финляндии. Ее продукция покрывает потребности ЦОД в Хамине и 36 000 домов поблизости.
В Дании благодаря солнечному проекту Rodby Fjord 150 МВт энергии поставляется в дата-центр Фредерисии.
Согласно официальным планам, Google стремится обеспечить 5 ГВт безуглеродной энергии в ключевых производственных регионах к 2030 году — это около 5 миллиардов долларов инвестиций, позволяющих избежать количества выбросов, равного ежегодному вывозу с дорог более 1 миллиона автомобилей.
Google даже разработал отдельный продукт — Environmental Insights Explorer, позволяющий отслеживать выбросы углекислого газа более, чем в 3000 городах по всему миру.
Однако, в 2015 году исследователь Джоана Молл показала, что выбросы сетевой инфраструктуры Google все еще велики — около 500 кг CO2 в секунду. Она основывалась на данных об интернет-трафике за 2015 год, где среднее количество запросов — 47 000 в секунду. Поэтому каждый запрос — приблизительно 0,01 кг CO2. Google никак не оспаривал эти данные, хотя еще в 2009 году он сам публиковал отчет о 0,2 граммах CO2 на каждый запрос.
Что в итоге?
Определенно, подход Google к проектированию своих ЦОД весьма прагматичен. Он сочетает в себе здравый консерватизм и разумный прогрессивизм.
Предиктивный взгляд компании на серверные технологии, способы добычи энергии и варианты использования природных ресурсов заканчивается в аккурат в той точке, где обычно начинается дорогостоящее, но не факт, что эффективное решение. Можно сказать, Google следует правилу Парето, не пытаясь ухватиться за дополнительные 20% эффективности, потеряв при этом 80% ресурсов. Google весьма рационален в таких вопросах.
Тем не менее, он определенно задает тренды, которым спустя время следуют и другие участники рынка. В том числе крупные IT-гиганты: Apple, Facebook, Microsoft, Amazon.
Особенность IT-гигантов в том, что их, если так можно выразиться, капиталистический эгоизм сочетается с высокой антиципацией — они прекрасно понимают последствия плохой экологии для себя. Именно для себя, а не для остальных.
Поэтому, такие экономические агенты, как Google, весьма искренни в своих зеленых устремлениях — неблагоприятная среда вокруг может весьма пагубно влиять на производственную инфраструктуру компании.
И это правда — на сегодняшний день вряд ли кто-либо может предложить экологические решения лучше и в большем объеме, чем это делает Google. Да, ветряные турбины и солнечные панели имеют свои недостатки — приличное потребление масла на «винты», отрицательное влияние на почву и птиц, выбросы CO2 при производстве панелей и т.д.
Важно помнить, что идеальных решений не бывает, и прогресс не стоит на месте — мир продолжает двигаться вперед. Всему свое время и место.
Используемые в материале изображения были взяты из официальной галереи Google.
НЛО прилетело и оставило здесь промокод для читателей нашего блога:
— 15% на все тарифы VDS (кроме тарифа Прогрев) — HABRFIRSTVDS.