СМИ: Google отключила в РФ небольшую часть серверов Google Global Cache
Желтые точки — места размещения оборудования Google Global Cache.
По информации СМИ, компания Google начала процесс отключения в РФ небольшой части серверов Google Global Cache (GGC), установленных у некоторых провайдеров. Речи о прекращении работы системы GGC в стране пока не идет. Google уже остановила работу ряда своих узлов с формулировкой «в связи с изменениями в правовой сфере».
Эксперты пояснили, что Google с 19 мая уведомила часть операторов связи и провайдеров об одностороннем отключении установленных у них узлов GGC. Это в основном небольшие частные компании. Например, оренбургский оператор «Радиосвязь», который работает под брендом «Фокус лайф». Google предупредила, что свяжется в ближайшее время с каждым провайдером, у которого будет проходить процесс отключения GGC, чтобы корректно вывести данное оборудование из эксплуатации.
Представитель «Радиосвязи» рассказал, что Google сначала отключила сервера GGC, а потом прислало уведомление по этому инциденту.
Эксперты отрасли считают, что Google начала фиксировать уменьшение трафика у данного провайдера через свои системы и решила отключить GGC в целях экономии или оптимизации.
Аналогичное уведомление получил «МФТИ Телеком». В данном случае это произошло из-за санкций против компании.
Представители «Ростелекома», МТС и «Мегафона» пояснили, что Google не присылал им уведомления, не ограничивал и не отключал установленные у них узлы GGC, а доставка трафика с ресурсов Google осуществляется в сети в штатном режиме.
Профиль трафика по GGC от одного из операторов связи, на нем не фиксируются аномалии.
Кэширующие узлы GGC представляют собой часть инфраструктуры Google, которая находится к пользователям ближе всего и располагается в сети локальных операторов. На этих серверах временно хранится популярный контент, который часто запрашивают пользователи. Это ускоряет доступ к Google-сервисам: YouTube, Google Maps, Google Play. Такое решение экономит полосу пропускания и компании Google, и операторам связи.
Без GGC контент, запрашиваемый пользователями, поступает напрямую с серверов Google. С кэширующими серверами всю цепочку проходит, например, только первая копия видеоролика. Запросы последующих пользователей обслуживает оборудование GGC на стороне провайдера.
При возникновении проблем в элементах этой системы или прекращении работы узлов GGC в какой-либо стране, контент с сервисов Google будет грузиться медленнее, увеличится время загрузки некоторых сайтов. Особенно это будет заметно пользователям видеохостинга YouTube.
24 мая YouTube пообещал не уходить из России, чтобы обеспечить всем пользователям доступ к независимой информации.
18 мая ООО «Гугл» подала уведомление о намерении обратиться с заявлением о признании себя несостоятельным (банкротом). В сообщении российского офиса говорится, что компания с 22 марта 2022 года «предвидит собственное банкротство и невозможность исполнения денежных обязательств», в том числе требований о выплате выходных пособий и оплате труда сотрудников.
В марте и апреле Google вывезла за рубеж большую часть своих сотрудников из РФ и прекращает коммерческое присутствие в стране.
Google заявила, что все основные и доступные на данный момент сервисы компании продолжат работать в РФ после банкротства российского офиса. Google пообещала, что продолжит предоставлять пользователям из РФ бесплатные сервисы, такие как поисковик, YouTube, GMail, «Google Карты», Google Play и другие. Компания не уточнила, будут ли они поставляться с таким же высоким уровнем доставки и скоростью работы, как и ранее.
- IT-инфраструктура
- Сетевые технологии
- Социальные сети и сообщества
- Сетевое оборудование
- IT-компании
Google Global Cache в РФ умирает, но не сдается
Корпорация Google предложила российским операторам вместо выходящих из строя и переполняющихся без модернизации кеш-серверов организовать прямой стык в Москве или Петербурге для сохранения качественного доступа к ее сервисам. Из-за деградации сети Google Clobal Cache (GGC) в РФ качество видеоконтента у сервисов Google в 2024 г. может пострадать.
Об этом на Пиринговом форуме MSK-IX рассказал руководитель по стратегическому развитию передачи данных ПАО «ВымпелКом» (торговая марка — «Билайн») Константин Колесов. Он напомнил, что для качественной доставки контента нужен CDN (Content Delivery Network — сеть доставки контента).
«CDN компании Google под YouTube называется Google Global Cache (GGC). Любой оператор даже с небольшим потреблением трафика мог обратиться в Google и получить кеширующий сервер. Ему привозили сервер, и контент YouTube раздавался не из Европы или Москвы, а прямо в регионах, на местах. Это хорошо для всех — пользователей, операторов, сервисов. Но Google уже год не поставляет серверы, а трафик продолжает расти. Соответственно, рано или поздно серверы GGC закончат существование — либо в силу естественного износа, либо их мощностей не хватит, чтобы обеспечить нужный объем. От этого пострадает качество, особенно на shorts (коротких видео). Маленькие видео должны быстро загружаться и сразу в хорошем качестве. Поэтому сначала «поплывет» качество YouTube в регионах, затем трафик начнет перекладываться на Москву и Петербург, нагружать магистральные сети все больше и больше. Когда закончится емкость в столицах, ждем трафика в международных направлениях. Тут появится шанс у отечественных сервисов — благодаря ухудшению качества у основного конкурента. Судя по всему, в 2024 г. стоит ожидать большего количества пользовательских сервисов на CDN», — рассуждает Константин Колесов.
Генеральный директор ООО «Айхоум» (телекоммуникационный оператор, входящий в группу компаний «ЭР-Телеком») Андрей Горбунов считает, что в 2024 г. в связи со сложившейся ситуацией российские сервисы пойдут в рост: «Есть предпосылки к тому, чтобы заместить трафик Google. Это не может не радовать. Растет контент, который делают в России, растет количество и качество сервисов. Они делают CDN. У них правильная политика для того, чтобы трафик качественно доставлялся абонентам. Я часто встречаюсь с сервисами, о которых раньше даже не слышал. Поэтому трафик будет расти, хоть пока и не в таких объемах, как у Google». По словам Андрея Горбунова, количество серверов GGC в сети «ЭР-Телеком» уже начало сокращаться из-за их естественного износа.
По оценке ComNews Research, в начале 2022 г. на сетях российских операторов действовало около 700 кеширующих серверов GGC, а к концу 2023 г. их количество сократится примерно до 450.
Генеральный директор ООО «СДН-Видео» (CDNvideo, подконтрольного «ВымпелКому» провайдера CDN в России и СНГ) Ярослав Городецкий допускает вариант снижения качества контента YouTube: «В ближайшее время скорость доступа к видеоконтенту Google, очевидно, ухудшится, если не предпринять какие-то действия. Как следствие — пользователи будут смотреть ролики YouTube в низком качестве или доступ к ним будет прерываться. Вряд ли пользователи будут этому рады, поэтому часть из них начнет искать альтернативные площадки для потребления контента. И если российские сервисы обеспечат аналогичное качество контента и скорость доступа к нему, то вполне возможно, что многие пользователи на эти сервисы и перейдут. Кстати, чтобы обеспечить скорость доступа, необязательно устанавливать кеширующие серверы самостоятельно — можно воспользоваться услугами коммерческих CDN, таких как наша компания».
Генеральный директор АО «Центр взаимодействия компьютерных сетей «МСК-IX» Евгений Морозов уверен, что переход на российские платформы будет не во всех регионах: «В регионах России, где качество предоставления контента в сервисах Google ухудшится, будет наблюдаться постепенный переход на отечественные платформы, обладающие собственными кеширующими серверами. Там, где качество предоставления сервисов Google останется без изменений, между платформами продолжится честная конкуренция, в которой все будет зависеть от качества и количества предоставляемого контента».
Андрей Горбунов рассказал о предложении Google российским операторам вместо использования кеш-серверов организовать стык для сохранения качественного доступа к сервисам компании в одной из двух российских столиц. «Наверное, все операторы уже получили письма от Google о том, что он планирует выводить Google Global Cache и предлагает всем операторам сделать стыки в разных городах для получения трафика. Google сам делает шаги навстречу. Он понимает, что сейчас не обслуживает серверы в России, поэтому трафик сначала уйдет в Москву и Петербург, в основные стыки компании», — сказал гендиректор «Айхоум».
Ярослав Городецкий считает этот шаг со стороны Google вынужденным: «Явно Google делает это не от хорошей жизни. Им приходится выкручиваться в условиях запрета на ввоз оборудования, который является следствием санкций западных стран против России».
Евгений Морозов отметил, что в MSK-IX подобное письмо от Google не приходило, а стыки решат проблему лишь частично: «На сети компании MSK-IX не установлены серверы Google Global Cache. В рамках обеспечения глобальной связности сервисы Google уже более 15 лет подключены к пиринговой сети MSK-IX напрямую. Поэтому такое письмо нам не поступало, — сообщил Евгений Морозов. — Организация прямых стыков с Google поможет операторам избежать проблемы с качеством контента в центральной части РФ, но не решит ее для клиентов из других регионов страны. Исключением может стать Дальний Восток, куда магистральные операторы смогут доставлять трафик Google из Японии».
Коммерческий директор магистрального оператора связи GlobalNet Дмитрий Бурмистров рассказал об уже существующем стыке с Google: «GlobalNet не предвидит каких-либо серьезных последствий в ближайшее время в отношении работоспособности сервисов компании, поскольку наша точка обмена трафиком DATAIX имеет прямые стыки с Google в Санкт-Петербурге, Москве и Европе практически со старта работы. Считаем, что в тех условиях, которые сложились для Google на рынке РФ, действие по организации стыков является вполне логичным. Мы можем оценивать ситуацию только на нашей сети, и здесь наблюдается определенный запас. Тем не менее, вероятность снижения качества контента для конечного пользователя сохраняется, поскольку перемаршрутизация трафика Google может оказать существенное влияние на качество предоставляемых оператором услуг».
Представитель пресс-службы АО «Компания «ТрансТелеКом» (ТТК) сообщил корреспонденту ComNews, что у ТТК уже несколько лет существует прямой стык с Google на площадке в Стокгольме: «Пропускная способность этого стыка регулируется сообразно объему трафика, который в последнее время, действительно, имеет тенденцию к росту. По нашим наблюдениям, комбинация межсетевых стыков и кеширующих серверов в целом позволяет сохранить качественный доступ к сервисам Google».
Google отключает сервера Global Cache в России. Что теперь будет?
Судя по всему, Google твёрдо решила уйти из России, а потому начала активно сжигать все мосты, которые позволяли ей тут оставаться. Сначала компания ограничила работу всех платных сервисов, потом объявила о банкротстве, а теперь ещё и начала отключать сервера Google Global Cache, которые ранее обслуживали Россию. В целом звучит безобидно. Но на самом деле это куда опаснее, чем может показаться на первый взгляд. Чем отключение серверов обернётся для нас с вами, читайте в этой статье.
Google начала отключать сервера Global Cache в России, которые разгоняли Ютуб и другие сервисы
Сервера Google Global Cache, как можно понять из названия, отвечают за кэширование данных. Для рядового пользователя этот термин почти ничего не значит. А, между тем, именно благодаря кэшированию удаётся обеспечить более быструю передачу данных пользователям фирменных сервисов Google.
❗️ПОДПИШИСЬ НА НАШ ЯНДЕКС.ДЗЕН. ТАМ ОЧЕНЬ КРУТО И ПОКА ЧТО БЕСПЛАТНО
Согласен, пока звучит не очень понятно. Но вот вам простой пример. Если вы вспомните, как YouTube работал ещё 7-10 лет назад, то поймёте, что тогда видео грузились очень долго. Чтобы посмотреть 5-минутный ролик, было необходимо прождать минут 10, пока он загрузится полностью. Сейчас таких проблем нет именно благодаря Google Global Cache.
Google уходит из России
Основные сервера Google находятся в США, а сервера Global Cache просто хранили просмотренную другими пользователями информацию в России, чтобы вы могли быстрее загрузить её
Если говорить совсем простым языком, то сервера Google Global Cache как бы запоминают контент, который до вас смотрели другие пользователи. А потом, когда к нему обращаетесь вы, выдают вам. Таким образом вашему оператору не приходится загружать видео с нуля, и оно транслируется без задержек.
Сервера Google Global Cache встроены в магистральную систему российских интернет-провайдеров и получают данные с серверов Google из США. По сути, они хранят просмотренный кем-то контент, позволяя вам воспользоваться тем, что он хранится рядом с вами, а не транслируется через океан, и смотреть его в режиме реального времени, поскольку загрузка происходит практически мгновенно.
❗️ПОДПИСЫВАЙСЯ НА НАШ ТЕЛЕГРАМ-ЧАТИК И ЗАДАВАЙ ВОПРОСЫ НАШИМ АВТОРАМ И ДРУГИМ ЧИТАТЕЛЯМ
Важно понимать, что на мощностях серверов Global Cache работают не только фирменные сервисы Google. Поисковый гигант сдаёт их в аренду и другим компаниям, которые благодаря технологии глобального кэширования сокращают время отклика своих сервисов и повышают скорость загрузки контента, который они предлагают.
Смогут ли российские провайдеры компенсировать отсутствие Google Global Cache? Скорее всего, смогут. По мнению экспертов, современное оборудование, которые есть в распоряжении Ростелекома, Мегафона, МТС и других операторов в целом довольно эффективны, и их пропускной способности хватит, чтобы пользователи не потеряли в скорости.
Что будет с интернетом в России
Скорее всего, Ютуб в России не станет работать медленнее. Но нагрузка на провайдеров вырастет, а значит, могут вырасти и цены на интернет
Но из-за того, что теперь вся нагрузка будет ложиться на самих провайдеров, соответственно, вырастут объёмы трафика, которые им придётся обрабатывать с нуля. В результате возрастёт нагрузка на инфраструктуру, а, чтобы компенсировать это, провайдеры могут увеличить цены на доступ в интернет для конечных пользователей.
На данном этапе Google разрывает договоры только с мелкими — как правило, региональными — провайдерами. А Ростелеком, МТС, Мегафон, Билайн и другие, с их слов, пока не наблюдают отключений. Возможно, Google просто минимизирует издержки, потому что сотрудничество с небольшими операторами для неё не так выгодно, как с крупными.
❗️ПОДПИСЫВАЙСЯ НА ТЕЛЕГРАМ-КАНАЛ СУНДУК АЛИБАБЫ. ТАМ ВЫКЛАДЫВАЮТ ТОЛЬКО ЛУЧШИЕ ТОВАРЫ С АЛИЭКСПРЕСС С ВЫСОКИМ РЕЙТИНГОМ И ОТЗЫВАМИ
Впрочем, Эльдар Муртазин, главный редактор Mobile-Review.com, уверен, что Google всё-таки уберёт свои сервера из России. Но, по его мнению, от этого ничего не изменится:
Пользователи просто не увидят разницы в качестве сервисов, YouTube также точно будет работать, у нас хороший и быстрый телеком, связность на отличном уровне. Для операторов вырастет трафик на точках обмена с Европой, что не принципиально. В целом никакого ужасного ужаса не случилось, все идет в ожидаемом русле.
Выходит, что глобального ухудшения работы онлайн-сервисов не произойдёт? Ну, видимо, нет. Интернет в России правда довольно быстрый, и он должен справиться с возросшей нагрузкой. То есть грузиться видео на Ютубе и правда медленнее не будут. Другое дело, что вся инфраструктура у нас построена на заграничном оборудовании, и, если поставщики откажутся возить его сюда, нам будет уже не до смеха.
Теги
- Компания Google
- Приложения для Андроид
Google Global Cache — для избранных
Одна из характеристик Google — предоставление качественный сервисов, бесплатно и с выгодой для себя.
Google Global Cache (GGC) — одно из решений по оптимизации огромных объемов своего трафика на базе платформы CDN, да еще и с пользой для пользователей (читай провайдеров).
Но что же все-таки это такое?
Взрыв широкополосного доступа и богатый мультимедийный контент постоянно увеличивает спрос от провайдеров Интернета (ISP). GGC позволяет предоставлять Google контент, в первую очередь видео, из собственной сети (провайдера). Это облегчает нагрузки на сеть и снижает затраты на транзитные линки, тем самым экономя деньги провайдеров, в то же время повышая уровень обслуживания пользователей.
Проект GGC находятся на стадии бета, поэтому соглашение с провайдером является коммерческой тайной, и запрещено использовать упоминания об этой услуги в своих целях.
Обзор системы
Без GGC, каждый запрос пользователя из сети провайдера на видео YouTube, Google Apps, etc. создает транзит этого экземпляра видео по сети, от Google к пользователю.
С GGC, только первая копия видео проходит транзит по всей сети. Если другой пользователь запрашивает то же видео, Google обслуживает его из узла GGC.
Особенности GGC
— сокращение трафика через сети: процент запросов через cache варьирует в зависимости от схемы использования пользователей, но типичная производительность близка к 75%,
— быстрый ответ, прозрачный для пользователей: Google прозрачно обслуживает пользователей запросы из кэша внутри сети,
— простота установки: для установки требуется rack (шкаф), ноутбук, копия CD от Google, а также подключение к Интернету. После того как сервера были настроены и доступны из сети, Google будет делать всю остальную работу и мониторить удаленно,
— надежность: узел имеет несколько уровней избыточности. Если узел GGC недоступен по любой причине, запросы пользователей будут отправлены прозрачно для Google.
Как GGC работает
Когда пользователь запрашивает части содержания — например, видео, веб-страницы или изображения — системы Google определяют, если этот ресурс может быть предоставлен из узла GGC внутри сети, и если пользователь имеет право доступа к узлу GGC.
Если узел GGC уже имеет закэшированую версию запрашиваемого контента в своем локальном кэше, он будет предоставлять контент непосредственно конечному потребителю, улучшая работу пользователей и экономя деньги за Интернет транзит.
Если содержимое не хранится на узле GGC, узел скачивает их из Google, предоставляет его пользователю, и хранит его для будущих запросов.
Диаграмма запросов
1. Пользователь запрашивает по ссылке видео или другой контент размещенный на Google. Компьютер генерирует запрос DNS для адреса хоста.
2. DNS провайдера запрашивает DNS Google на адрес IP хоста с содержанием.
3. DNS Google знает, что у вас есть GGC, так что ответы содержат IP адреса GGC узла провайдера.
Это известно, потому что провайдер анонсировал IP адреса DNS резолвера узлу GGC (через BGP) и Google обновил информацию в свой DNS.
4. DNS провайдера отвечает IP-адрес GGC узла пользователю.
5. Компьютер пользователя отправляет запрос на IP адрес который маршрутизируется на GGC узел.
6. Узел подтверждает, что пользователь имеет доступ к этому узлу (делается путем сопоставления IP-адресa пользователя в список блоков IP анонсированных через узел BGP.) Если адрес не является в списке, пользователь перенаправляется на кэш в сети Google.
7. Если контент не содержится на узле GGC, узел запрашивает контент из Google и кэширует его.
8. После того как узел GGC содержит контент, отдает его пользователю. Контент содержится на узле, так что следующий запрос может быть отдан без запроса к Google.
Предоставляемое оборудование от Google
Google предоставляет необходимое оборудование, провайдер должен обеспечить размещение с своем помещении, питание от электросети и подключение к Интернету.
GGC работает на стоечных серверах (rack mountable), по 3-8 в каждом кластере.
Характеристики серверов
• 2 RU Rack-mountable chassis
• 74см Д x 44см Щ x 8.64см В
• Вес: 28 КГ
• Блок питания: 2x 110/220 VAC.
• 4 x 1000Base-T copper Gigabit Ethernet
• IP адресация: выделенная подсеть (один широковещательный домен).
Возможные конфигурации:
3 сервера — 6RU 1200W
4 сервера — 8RU 1600W
6 сервера — 12RU 2400W
8 сервера — 16RU 3200W
Администрирование
Используется сайт ggcadmin.google.com, для конфигурации узла и информации о доставке. Первоначальный пользователь получает доступ к порталу от группы GGC.
После принятия бета-соглашения, пользователь может пригласить дополнительных пользователей.
Остальные детали
— Google сохраняет право собственности на оборудование и программное обеспечение, из которого составлен узел. Google будет отвечать за техническое обслуживание, поддержку и транспортные расходы, связанные с серверным оборудованием,
— По уверениям Google, конфиденциальность пользователей имеет первостепенное значение.
Личная информация (Personally Identifiable Information) или частный контет пользователей не сохраняется на узле GGC,
— Google сохраняет право требовать от провайдеров заверений о неразглашении использования услуги, так как проект находится в стадии бета.
Почему для избранных спросите вы?
Дело в том что Google обычно предлагает сам такие услуги только тем провайдерам, которые присутствуют в крупнейших точках обмена трафиком и если трафик на ресурсоемкие услуги Google (youtube, maps) составляют значительный процент от трафика (>70%).