Алан Игл - Как работает Google. Как работают в Google

Мы выпустили новую книгу «Контент-маркетинг в социальных сетях: Как засесть в голову подписчиков и влюбить их в свой бренд».

Подписаться

Google – это поисковая система с дополнительными инструментами и сервисами.

Можно сказать, что Google.com – это Шерлок Холмс со своей картотекой, в которой по именам и фамилиям разложены данные обо всех деятелях преступного мира, и он с легкостью знает, где и как найти любую информацию. Кроме того, сыщик сыграет для вас на скрипке или развлечет интересным разговором. Естественно, поисковик находит не только информацию о преступниках. Ему доступно исключительно все и обо всем.

Когда появился Google и кто его основал

История Гугл начинается с 1998 года, когда поисковик начал использоваться в Стэнфордском университете, где учились его основатели – Ларри Пейдж (США) и Сергей Брин (эмигрант, родился в СССР).

Оба студента занимались решением проблемы поиска в больших хранилищах данных. В то время уже работали поисковые системы, но результаты их работы были неудовлетворительными. Поиск осуществлялся по ключевым словам, и в выдачу попадал спам. Новая система учитывала обратные ссылки. Если на ресурсе их было много, это означало, что портал релевантен запросу и авторитетен.

В качестве примера разработчики взяли ссылки в научных кругах. Чем больше ученых ссылаются на искомого человека, чем выше их статус – тем авторитетнее становится сам человек. Так появился PR (PageRank) – один из показателей ранжирования и веса страницы и сайта в целом, который поднял качество поиска и вообще совершил принципиальный поворот в его алгоритме.

Математики попросили первых пользователей Стэнфорда высказать впечатления и замечания, в соответствии с которыми дорабатывали поисковик.

Что означает название

Исходным словом послужило понятие Googol – 1 и 100 нулей после нее. Изначально новый поисковик предполагалось назвать GooglePlex (10 в степени googol), но оно показалось создателям незапоминающимся и неудобным при написании. Поэтому остановились на сокращенном варианте.

В 1998 году разработчики зарегистрировали фирму Google-Inc., получившую значительную сумму на развитие от одного спонсора. На эти деньги они приобрели сервера, которые начали обрабатывать растущее количество запросов к Google.com.

Как устроен и как работает Гугл

В Google применяются два важных принципа: анализ текста документа и подсчет входящих ссылок.

На основании текста, ссылочного веса и всех ключей ПС определяет позицию ресурса в выдаче. Поиск ведется по ранее проиндексированной базе обратных индексов. Также в ней остаются сохраненные копии страниц, на основании которых формируются сниппеты.

ПС добавит сайт в свой индекс, если веб-мастер пошлет ссылку на него в аддурилку, или найдет ваш веб-проект по входящей ссылке с другого ресурса. Обратные ссылки собираются при индексации каждой страницы.

Сопутствующие сервисы Гугл

• AdSense, AdWords – системы контекстной рекламы.
• YouTube – самый популярный видео-хостинг.
• Chrome – популярный веб-браузер.
• Analytics – счетчик для анализа посещаемости веб-ресурса.
• Google+ – социальная сеть.
• Play – приложения для мобильных гаджетов.
• Диск – хранилище данных в облаке.
• Почта – обмен электронными письмами.
• Фото – хранение фотоальбомов, обмен фотографиями.
• Docs – работа с документами, текстовые редакторы, просмотр и редактирование документов из любой точки мира.
• Карты – система картографии по всему миру с точками-объектами.
• Календарь – планировщик событий.
• Hangouts – онлайн чат.
• Talk – мессенджер, обмен сообщениями.

Это неполный список. Есть еще Переводчик, Новости, Заметки, Хостинг сайтов, Виртуальный принтер, Вопросы-Ответы и многое другое.

Особенности продвижения в Google

Продвижение в этой поисковой системе отличается от Яндекс. В целом, обе ПС имеют свои особенности и ранжирование сайтов них происходит по-разному.

• Google работает несколько быстрее (индексация, выдача, обход роботом).
• Гугл учитывает анкоры всех ссылок из одного текста, ведущие на страницу-акцептор.
• Структурированные уникальные тексты необходимы для любой поисковой системы.
• В Google регионами являются страны, а в Яндексе – города и субъекты.
• Гугл выделяет вес каждой страницы, в то время как российская ПС придает значение весу сайта в целом.
• Google предпочитает точное вхождение ключевого запроса во входящей ссылке.
• Гугл хранит все страницы в своей базе. А Яндекс отсеивает дублированный контент и другие некачественные документы.
• Гугловская база состоит из основного и supplemental индекса. Документы, попавшие в supplemental, в поиске почти не участвуют.

Причины попадания в supplemental

• Неуникальный контент.
• Небольшое количество текста на странице.
• Не прописаны мета-теги, или они не уникальные, или состоят только из одного слова.

Доля Гугл в России постоянно растет. В последние годы тенденция к росту наметилась по причине выпуска мобильных гаджетов со встроенной ОС, которая по умолчанию привязывает гугловский аккаунт пользователя для корректного функционирования мобильного устройства. Поэтому знать об этой системе и особенностях продвижения в ней должен каждый оптимизатор.

Российское подразделение Google появилось в декабре 2005 года. Первые сотрудники сначала сидели в «Смоленском пассаже», а затем переехали на третий этаж бизнес-центра по адресу Балчуг, дом 7. Затем, по мере расширения штата, части сотрудников пришлось переехать в Lotte Plaza. Как только в «Балчуг Plaza» освободились площади, команда вернулась. Сейчас команда «Google Россия» занимает четвёртый и девятый этажи этого офисного центра. В ней работает около 150 человек: инженеры, юристы, бухгалтеры, маркетологи и специалисты по продажам. После работы у них есть возможность сходить на йогу, массаж или просто поспать. The Village побывал в офисе компании и выяснил, как там работается.

Офис «Google Россия»

место: « Балчуг Plaza»

количество сотрудников: 150 человек

Площадь : 2500 кв. метров

дата открытия: декабрь 2005 года

Набор сотрудников

Все вакансии Google публикуются на сайте, там же есть возможность подать заявку.

Процесс найма на работу в корпорацию отличается тем, что кандидат проходит собеседование не только с руководителем, но и с коллегами. Кандидатам приходится решать нестандартные задачи вроде подсчёта количества теннисных мячиков, которые могут поместиться в самолёт. Здесь не может быть правильного или неправильного ответа - важна скорость реакции и подход к решению.

У Google есть программы для студентов старших курсов - на три месяца или больше можно прийти на стажировку в любой отдел: юридический, маркетинг, продажи. Все ресурсы офиса, в том числе медицинская страховка, предоставляются и стажёрам.

Организация работы

График работников компании строго не фиксирован, соблюдается лишь норма восьми рабочих часов. Инженеры работают часто с коллегами из других офисов по миру, потому по необходимости приходят поздно и основную работу выполняют в ночь.

Каждый сотрудник может использовать 20 % рабочего времени на собственные проекты. Они должны быть в профессиональной плоскости, но могут не иметь отношения к прямым обязанностям. Например, так в своё время появился почтовый сервис Gmail.

Всех новых сотрудников, как правило, отправляют на тренинг в Дублине, где рассказывают про корпоративную культуру компании. По словам сотрудников, она классная, но к ней нужно привыкнуть. В компании отсутствует формальная субординация - все в обязательном порядке обращаются друг к другу на «ты» и по имени. Нет никакого рабочего дресс-кода - прийти можно хоть в тапочках, хоть босиком, ограничением служит лишь здравый смысл.

В Google принято делиться с коллегами знаниями, для этого есть система googler to googler. Каждую пятницу сотрудники собираются на TGIF - неформальные пятничные собрания, где они едят и общаются за бокалом вина или пива. Здесь же представляют новых сотрудников и делятся профессиональными достижениями за неделю (например, запуск нового продукта).

Оформление офиса

Офис Google представляет собой оупенспейс. Поскольку сотрудники очень много времени проводят за расположенными по кругу столами, у них есть возможность заказать стол-трансформер, который можно поднимать и работать стоя.

При разработке концепции офиса учитывалось мнение сотрудников, которым захотелось что-то локальное, что будет отражать русскую историю, поэтому четвёртый этаж оформлен в стиле русских сказок (правда, попадаются советские фильмы и мультики), девятый этаж сделан в стиле московского метро. Его разрабатывал Фёдор Ращевский из бюро OFFCON.

Переговорки имеют соответствующие тематике этажа названия: на четвёртом - «Почтальон Печкин», «12 стульев», «Винни-Пух», на девятом - названия станций метрополитена «Пушкинская», «Полянка», «Комсомольская», и переговорка-студия - «Мосфильм». В переговорных комнатах есть большие плазменные экраны и фитболы - на них тоже можно сидеть на встрече. Если нужно побыть в тишине или поговорить по скайпу, можно воспользоваться переговоркой на одного человека.

Еда в офисе

Вся еда в офисе полностью бесплатна - никаких автоматов с кофе или ограниченных сумм на еду. На четвёртом этаже есть столовая «Самобранка», куда можно приходить на завтрак, обед и ужин. На столе постоянно стоят разные виды сухих хлопьев и мюсли, свежевыжатые соки, сэндвичи.

Также можно перекусить в зоне «Лукоморье» с изображением Бабы-яги с одной стороны и придорожным камнем из сказок - с другой. Здесь находится кофемашина и лотки со снеками - батончиками, хлебцами и т. п. Многие сотрудники придерживаются принципов здорового питания, и компания это поддерживает. Цветные cтикеры на лотках c едой дают рекомендации о том, сколько в день можно потреблять того или иного продукта: зелёный - самый диетический вариант, жёлтый и красный лот, соответственно, калорийнее.

Досуг и развлечения

В офисе Google можно ночевать: для этого там есть душ и спальное место. На девятом этаже находится спортзал с мотивирующими советскими плакатами и капсула сна. Через огромное окно во всю стену здесь открывается фантастический вид на центр столицы.

В офисе также можно поиграть в видеоигры и настольный теннис. На четвёртом этаже есть зона «Лукоморье». Сюда приходят, чтобы пообщаться, попить кофе и отдохнуть. Для этого есть шахматы, гитара (рассказывают, что как-то сотрудники даже собрали на работе бэнд, писали свою музыку и играли) и мини-библиотека. Правда, в библиотеке не обнаружилось ни одной художественной книги - только околопрофессиональная литература и диски с фильмами и сериалами типа Top Gear.

Каждую неделю в офис приходит преподаватель по йоге - под занятия отводят большую переговорную. В офисе работает профессиональный массажист, правда, его услуги не бесплатны и к нему надо записываться на приём заранее. Те, кто не успел записаться, могут воспользоваться массажным креслом в тёмной релаксирующей комнате.

Фотографии: Мария Турыкина

Эрик Шмидт, Джонатан Розенберг, Алан Игл

Как работает Google

Eric Schmidt and Jonathan Rosenberg, with Alan Eagle

HOW GOOGLE WORKS

Copyright © 2014 by Google, Inc.

All illustrations c Nishant Choksi 2014

This edition published by arrangement with Grand Central Publishing, New York, New York, USA. All rights reserved

© Перевод. Дарья Барретт, 2015

© Оформление. ООО «Издательство «Эксмо», 2015

* * *

Нашим любимым умным креативщикам – Венди и Берил

Предисловие

Когда я был моложе и впервые начал задумываться о своем будущем, то решил стать либо профессором, либо бизнесменом. Я считал, что таким образом я в любом случае буду более независимым и обрету свободу мыслить, руководствуясь в первую очередь своими принципами и законами физики, а не мнением большинства, с которым приходилось бы мириться. Мы стараемся применять независимость мышления почти ко всему, что мы делаем в Google, – об этом Эрик и Джонатан рассказывают в своей книге «Как работает Google» . Данный принцип является движущей силой наших самых великих успехов и некоторых серьезных неудач.

Компания Google действительно руководствуется в первую очередь принципами. Однажды ночью мне приснился сон, больше похожий на мечту, и я проснулся с мыслью: «А что, если бы можно было загрузить Всемирную сеть целиком и просто сохранить ссылки?» Я схватил ручку и быстро записал детали, чтобы понять, было ли такое на самом деле возможно. В тот момент мой «радар» даже близко не уловил идею создать поисковую систему. И только позже мы с Сергеем поняли, что ссылочное ранжирование веб-страниц могло дать гораздо лучшие поисковые результаты. Когда мы начинали создавать Gmail, это тоже было похоже на несбыточную мечту. А когда Энди Рубин десять лет назад создавал Android, большинство людей думали, что совмещение мобильной индустрии с открытой операционной системой – это полный бред.

К своему удивлению, с годами я осознал, насколько сложно сделать сотрудников суперамбициозными. Оказывается, большинство людей не обучали мыслить масштабами полета на Луну. Обычно они считают какие-то вещи невозможными, вместо того чтобы, исходя из законов физики, выяснить, что на самом деле возможно. Вот почему мы вложили столько энергии, стремясь поставить перед собой большие цели и привлечь в Google людей с независимым мышлением. Потому что если у вас есть правильные сотрудники и достаточно смелые мечты, то, как правило, у вас все получится.

Справедливо также и то, что многим компаниям удобно жить своей привычной жизнью, постепенно внося лишь некоторые изменения. Благодаря такому подходу все их постепенные изменения со временем оказываются бесполезными. Это особенно актуально для технологий, ведь перемены подразумевают революцию, а не эволюцию. Следовательно, вам необходимо заставить себя сделать большие ставки на будущее. По той же причине мы инвестируем в проекты, которые могут показаться слишком гипотетическими (например, беспилотные автомобили или доступ в Интернет с помощью воздушных шаров). Сложно сейчас поверить, однако когда мы начинали работу над картами Google Maps, люди считали, что наша цель (составить карту всего мира с фотографиями каждой улицы) окажется невыполнимой. Поэтому если прошлое является каким-то индикатором нашего будущего, то через несколько лет сегодняшние большие ставки не будут казаться настолько уж дикими.

Вот лишь некоторые важные, на мой взгляд, принципы. Об остальных вы прочтете в этой книге. Надеюсь, что вы сможете воспользоваться нашими идеями, чтобы самим создать что-то невероятное.

Ларри Пейдж, соучредитель и CEO компании Google

Введение: уроки, полученные с передних рядов

Эрик Шмидт находился на посту CEO компании Google уже два года, когда в июле 2003‑го он получил письмо по электронной почте от одного из инвесторов и членов правления компании Майка Морица, партнера Sequoia Capital. В нем был совет:

Предлагаю подумать над тем, чтобы выделить в своем графике три часа в середине августа, когда руководство представит совету директоров нашу кампанию против финляндии. (Я не думаю, что нам следует ждать сентябрьского совещания. это слишком важная тема, и все мы знаем, что лучший способ понять, насколько коротким может быть год, – это начать конкурировать с финляндией.)

Непосвященных данное письмо может сбить с толку. С чего вдруг пятилетний интернет-стартап Google, расположенный в Маунтин-Вью (штат Калифорния) и имеющий штат всего в несколько сотен сотрудников, собрался конкурировать с Финляндией – дружелюбной и миролюбивой страной с населением пять миллионов, расположенной за пять тысяч миль?

Эрик получил это «финское» послание как раз тогда, когда он начал наконец осваиваться в Google. До этого он проработал в компании Novell на должности CEO, а также в компаниях Sun Microsystems и Bell Labs. Он вырос на севере Виргинии, окончил Принстон со степенью в электротехнике, а также получил степень магистра и степень доктора наук в области информатики от университета Беркли (Калифорния). И ему не чуждо было работать с инженерами и учеными в области информатики. Более того, Эрик сам был одним из них. Тем не менее, придя в Google, он оказался в месте, которое сильно отличалось от любой другой компании, где он когда-либо работал.

Его приход в Google с первых же дней стал для него откровением, которое можно охарактеризовать фразой: «У меня такое ощущение, что мы больше не в Канзасе». Когда Эрик зашел в выделенный ему кабинет, он показался ему довольно скромным по меркам такой важной персоны, как CEO. К тому же, в нем уже разместились несколько программистов. Вместо того чтобы выгнать их, он обосновался в соседней комнате, которая скорее напоминала кладовку с окошком, нежели настоящий кабинет.

Через несколько недель ситуация ухудшилась. Однажды утром Эрик шел по вестибюлю по направлению к своему кабинету и заметил, что его помощница Пэм Шор чем-то обеспокоена. Вскоре выяснилась и причина: в его кабинете появился новый сосед. Им оказался один из инженеров, специализирующихся на поисковых системах, – Амит Патель. Он объяснил Эрику, что в его кабинете уже работают пять сотрудников и вскоре к ним должен присоединиться еще один. Тогда Амит решил распилить один из столов напополам, чтобы создать дополнительное рабочее место, но ничего не вышло. По сравнению с тем, что он имеет сейчас, кабинет Эрика показался этому инженеру довольно просторным, и он переехал. (Команда, которая занималась организацией рабочего пространства в компании, отказалась перенести вещи Амита в комнату Эрика, и он все сделал сам.) В итоге Амит и Эрик проработали в одном кабинете бок о бок несколько месяцев. Было совершенно очевидно, что в этой компании важность сотрудников не измерялась в квадратных метрах.

Как Google обнаруживает веб-страницы, сканирует их и выдает результаты

В этой статье приведены два объяснения принципов работы Google Поиска: краткое и подробное.

Google получает информацию из разных источников. Вот примеры некоторых из них:

• веб-страницы;
• контент, добавленный пользователями, например опубликованный ими в сервисах "Google Мой бизнес" и "Google Карты";
• отсканированные книги;
• открытые базы данных в Интернете;
• множество других источников.

В этой статье речь пойдет только о контенте, размещенном на веб-страницах.

Краткое объяснение

Формирование результатов поиска по веб-страницам проходит в три этапа, которые описаны ниже.

Сканирование

Сначала нужно определить, какие страницы есть в Интернете. Поскольку их официального реестра не существует, роботу Google приходится постоянно искать новые страницы и добавлять их к списку уже известных. Этот процесс называется сканированием .

Информация о существующих страницах поступает нам несколькими способами. В одних случаях робот Google самостоятельно обнаруживает страницы в процессе сканирования. Также он может переходить на них по ссылкам, размещенным на других страницах. Кроме того, владелец сайта может сам отправить в Google файл Sitemap со списком страниц, которые нужно сканировать. Наконец, если вы создали свой сайт с помощью стороннего сервиса, например Wix или Blogger, то такой поставщик услуг хостинга может сообщать Google о том, что нужно просканировать добавленные или измененные вами страницы.

Как повысить эффективность сканирования

• Вы можете запрашивать сканирование отдельных URL , если изменения вносились только на соответствующих страницах.
• На страницах, которые уже известны роботу Google, размещайте ссылки на свои новые страницы при их публикации. Обратите внимание , что наш робот не будет переходить по ссылкам, которые не соответствуют требованиям Руководства Google для веб-мастеров , например указаны в объявлениях и комментариях или размещены за плату.
• Если вам требуется сканирование только одной страницы, выберите для этого главную . Именно она считается наиболее важной страницей вашего сайта. Если вам нужно полное сканирование сайта, убедитесь, что на нем реализована удобная навигация со ссылками на все ключевые разделы и страницы ресурса. Благодаря этому пользователям и роботам Google будет удобно ориентироваться на вашем сайте.

Мы не обеспечиваем более частое сканирование или более высокий рейтинг сайта за плату. Те, кто утверждает обратное, вводят вас в заблуждение.

Индексирование

После обнаружения страницы нужно определить, какой теме посвящено ее содержание. Этот процесс называется индексированием . Он заключается в том, что Google анализирует контент страницы и систематизирует найденные на ней изображения и встроенные видео. Полученная информация сохраняется в индексе Google – огромной базе данных, размещенной на множестве компьютеров.

Как повысить эффективность индексирования

• Придумывайте короткие и информативные заголовки страниц.
• Используйте на страницах подходящие тематические заголовки.
• На ваших страницах должно быть достаточное количество текста. Google умеет распознавать содержание некоторых картинок и роликов, но не так эффективно, как в случае с текстом. По возможности создавайте для своих видео и изображений комментарии с помощью различных атрибутов, например alt.

Выдача результатов и ранжирование

Когда пользователь вводит запрос, Google на основе многочисленных факторов ищет в своем индексе самые подходящие результаты. К таким факторам относятся местоположение, язык, тип устройства пользователя (обычный компьютер или телефон) и т. д. Например, результаты по запросу "ремонт велосипедов" будут различаться в зависимости от того, находитесь вы в Париже или в Гонконге. Ранжирование выполняется по заданным алгоритмам, и Google не повышает рейтинг страниц за плату.

Как повысить эффективность ранжирования

• Обеспечьте быструю загрузку своей страницы и оптимизируйте ее для мобильных устройств.
• Размещайте на странице полезный контент и своевременно обновляйте его.
• Следуйте рекомендациям, представленным в Руководстве Google для веб-мастеров , чтобы обеспечить удобство просмотра сайта.
• Изучите Введение в поисковую оптимизацию .
• Ознакомьтесь с , а также с нашими рекомендациями по оценке качества результатов поиска .

Подробное объяснение

Хотите узнать больше? Мы это предусмотрели.

Версия для любознательных

Сканирование

Сканирование – это процесс, в ходе которого робот Googlebot обнаруживает новые и обновленные страницы для добавления в индекс Google.

Мы используем огромную сеть компьютеров, чтобы просканировать содержание миллиардов веб-страниц. Программа, выполняющая сканирование, называется роботом Google (или пауком). Этот робот действует полностью автоматически: он самостоятельно определяет, какие сайты сканировать, как часто это нужно делать, а также какое количество страниц следует выбрать на каждом из них.

Процесс сканирования Google начинает со списка URL веб-страниц, созданного в ходе предыдущих сеансов сканирования. Его дополняют данные из файлов Sitemap, предоставленных веб-мастерами. Просматривая каждый из этих сайтов, поисковый робот Googlebot находит на каждой странице ссылки и добавляет их в список страниц, подлежащих сканированию. Все новые и измененные сайты, а также неработающие ссылки помечаются, и впоследствии соответствующие данные появляются в индексе Google.

Как Google находит страницы?

Робот Google находит страницы различными способами. Помимо прочего, к ним относятся следующие:

• переход по ссылкам с других сайтов;
• обработка данных в файлах Sitemap.

Как Google определяет, какие страницы не нужно сканировать?

• Если доступ к странице заблокирован в файле robots.txt, она не будет сканироваться, но все равно может быть проиндексирована, если на другом сайте есть ссылка на нее. Обратите внимание, что Google может по содержанию ссылки определить тему страницы и проиндексировать ее, не анализируя опубликованные на ней материалы.
• Робот Google не может сканировать страницы, недоступные анонимным пользователям, то есть те страницы, для просмотра которых нужно выполнить авторизацию или вход.
• Реже сканируются страницы, считающиеся точными копиями уже просканированных страниц.

Как повысить эффективность сканирования

Следуйте представленным ниже инструкциям, чтобы упростить для Google поиск нужных страниц на вашем сайте.

• Используйте простые, удобочитаемые и структурно упорядоченные пути URL , а также продуманные прямые внутренние ссылки.
• Если на вашем сайте используются параметры URL, например для указания страны пользователя в международном интернет-магазине, сообщите Google важные сведения о них с помощью инструмента "Параметры URL" .
• Используйте инструкции в файле robots.txt: чтобы снизить нагрузку на сервер, укажите, какие страницы могут быть добавлены в индекс Google и какие из них нужно сканировать в первую очередь. Не следует рассматривать этот файл только как способ заблокировать доступ к контенту и предотвратить его индексирование.
• С помощью атрибута hreflang указывайте версии страницы на разных языках.
• Укажите каноническую и альтернативные страницы .
• Используйте отчет об индексировании .

Индекс ирование

Робот Googlebot анализирует каждую сканируемую страницу, чтобы составить полный индекс всех найденных слов, а также отметить, в какой части страницы они находятся. Кроме того, мы учитываем данные из основных тегов и атрибутов, например тегов