Ростелеком ТВ 

Cloudflare не работает. FAQ о CDN-сервисе CloudFlare. Защита от атак

Всем-всем привет!

Что делать с семантическим ядром? Этим вопрос задаются, наверное, все новички в SEO-продвижении (сужу по себе) и не зря. Ведь реально на начальных порах человеку не понятно для чего он столько сидел и собирал ключевые слова для сайта, либо с использованием другим инструментов. Коль я тоже мучался с этим вопросом долго, то выпущу, пожалуй, урок на данную тему.

С какой целью собирается семантическое ядро?

Во-первых, давайте разберемся для чего вообще мы собирали семантическое ядро. Итак, все SEO-продвижение строится на использовании ключевых слов, которые вводят в поисковые строки пользователи. Благодаря им, создаются такие вещи, как структура сайта и его контент, что по сути является основными факторами во .

Также не стоит забывать и про внешнюю оптимизацию, в которой семантическое ядро играет немаловажную роль. Но об этом в следующих уроках.

Резюмирую: СЯ необходимо для:

  • Создания структуры сайта, которая будет понятна как поисковым машинам, так и обычным пользователям;
  • Создания контента. Контент в наше время является главным способом продвижения сайта в выдаче. Чем качественнее контент, тем сайт находится выше; чем больше качественного контента, тем сайт находится выше. Подробнее о создании качественного контента , еще ;

Что делать с семантическим ядром после составления?

Итак, после того, как Вы составили семантическое ядро, то есть: собрали ключевые слова, провели чистку и сгруппировали их, можно приступать к формированию структуры сайта. По сути, когда Вы сгруппировали запросы так, как мы делали это в уроке №145, Вы уже создали структуру своего веб-ресурса:

Вам нужно лишь реализовать ее на сайте и все. Таким образом, Вы сформируете структуру не на основе того, что у Вас есть в ассортименте, а на основе спроса у потребителей. Поступив так, Вы принесете пользу не только веб-ресурсу с точки зрения SEO, но и правильно поступите с точки зрения бизнеса в целом. Не зря ведь говорят: если есть спрос, значит должно быть предложение.

Со структурой вроде бы разобрались, теперь перейдем к контенту. Опять таки сгруппировав запросы в Key Collector, Вы нашли темы для своего будущего контента, которым будете наполнять страницы. Для примера, возьмем группу «Горные велосипеды» и разобьем ее на небольшие подгруппы:


Таким образом, мы создали две подгруппы с ключевыми запросами под отдельные страницы. Ваша задача на данном этапе: сформировать группы (кластеры) так, чтобы каждый кластер содержал в себе семантически одинаковые ключевики, то есть одинаковые по смыслу.

Запомните одно правило: каждому кластеру отдельная страница .

Так, конечно, не очень удобно для начинающих группировать, так как нужно иметь определенную сноровку, поэтому покажу и другой способ формирования тем для статей. На этот раз воспользуемся Excel:


Уже на основе получившихся данных Вы можете формировать отдельные страницы.

Так провожу кластеризацию (группировку) я и меня вполне все устраивает. Думаю, что теперь Вы поняли, что делать с семантическим ядром после составления.

Возможно пример, приведенный в данном уроке, слишком общий, так как не дает конкретной картины. Я просто хочу донести до Вас саму суть действия, а дальше Вы уже сами поработайте головой. Поэтому прошу прощения заранее.

Если данный урок стал для Вас полезным и помог в решении проблемы, то поделитесь, пожалуйста, ссылкой в социальных сетях. И, конечно же, подписывайтесь на обновления блога, если Вы этого еще не сделали.

Удачи Вам, друзья!

До скорых встреч!

Предыдущая статья
Следующая статья

Наверное, подобный термин вы уже не раз слышали или он попадался вам как на сайтах компаний, так и в личных блогах. Правда, не все позаботились о том, чтобы объяснить, о чем же конкретно идет речь. Поэтому, я решил написать подробную статью о том, что такое семантическое ядро, зачем оно нужно, как его собрать и использовать для своего сайта.

Семантическое ядро сайта – это список ключевых слов и фраз, под которые оптимизируется как проект в целом, так и отдельные его страницы. При составлении семантического ядра необходимо учитывать, что оно должно содержать целевые запросы, то есть те, которые актуальные для бизнеса или тематики контентного проекта.

Для чего нужно семантическое ядро?

Если речь идет о новом сайте, оно является основой для проектирования его структуры, будущих страниц и формирования контент-плана. При работе над уже существующим веб-проектом, семантическое ядро может быть использовано для улучшения оптимизации разделов и страниц, а также, увеличения количества посадочных страниц, что необходимо для увеличения трафика с поисковых систем.

Страница, которая не оптимизирована под ключевые слова, по сути, не приносит какой-либо пользы владельцу сайта. Поисковые системы не понимают, в ответ на какие запросы пользователей ее показывать, и какая от нее может быть польза. Поэтому, даже если таких страниц на сайте будут сотни, его посещаемость может быть мизерной.

Поэтому, слова из семантического ядра используются для оптимизации как заголовков статей, так и остального текста, в том числе, изображений.

Как составить семантическое ядро

Для этого используются специализированные сервисы и программы. Чтобы собрать максимально полный список ключевых слов, необходимо комбинировать разные источники. Только тогда вы сможете получить максимально полный набор фраз.

Это важно, так как конкуренция в поисковой выдаче ужесточается, и на Топ 10 в некоторых тематиках претендуют сотни сайтов. Чем более популярные ключевые слова, под которые заточена страница, тем больше будет конкуренция, и, соответственно, получить трафик по таким запросам очень сложно. В то же время, существуют тысячи низкочастотных запросов, которые генерируют трафик, но большинство конкурентов не используют их по каким-то причинам.

Поэтому, грамотно составленное семантическое ядро парсится при помощи различных программ и сервисов, в том числе и таких, которые предназначены для анализа конкурентов. Например, я в своей работе, использую ряд следующих источников, комбинируя их в зависимости от задачи:

  • Key Collector
  • Базы ключевых слов
  • Сервисы анализа конкурентов.

Программа Key Collector

Незаменимый инструмент для SEO-специалиста, программа, которая представляет собой настоящий «комбайн» возможностей, для работы с ключевыми словами. Позволяет собирать ключевые слова с сервисов статистики Яндекс и Google, поисковых подсказок, и парсить данные с ряда других источников.

Отдельно, стоит отметить наличие возможностей для эффективной фильтрации и кластеризации запросов, а также, оценки ключевых фраз по несколькими десяткам параметрам.

Базы ключевых слов

В отличие от программ, которые собирают ключевые слова при необходимости, базы уже содержат огромное количество запросов, что позволяет оперативно сделать нужную выборку, и сэкономить большое количество времени. Две наиболее популярные программы такого рода – «База Пастухова» и «Букварикс».

Что первая, что вторая программа, содержат уже более миллиарда запросов. При этом, разница фактически в том, что База Пастухова предоставляет удобные инструмент для работы с ключевыми словами (фильтрация, сортировка и т.п.), а Букварикс, по сути, позволяет просто делать выборки, которые затем нужно обрабатывать в других программах. Но, зато авторы позволяют использовать ее бесплатно.

Сервисы анализа конкурентов

Что может быть более заманчиво, чем узнать семантическое ядро конкурента? Такая идея рано или поздно возникала в уме каждого специалиста, и, надо сказать, существуют сервисы, которые позволяют частично решить данную задачу. Примеры таких сервисов: Prodvigator.ua, Megaindex.ru, Semrush.com и ряд других.

С их помощью можно получить данные относительно ключевых слов, по которым нужный вам сайт показывается в поиске, и даже те запросы, по которым осуществляются переходы на конкретные страницы.

Конечно, это будет только частичная информация, так как полные данные может видеть только сам владелец ресурса. Но, даже этой информации порой достаточно, чтобы расширить собственное семантическое ядро и найти неочевидные запросы, которые генерируют трафик.

В то же время, если вам нужно собрать простой небольшой перечень запросов, например, для написания одной статьи или оптимизации категории в интернет-магазине, можно воспользоваться и напрямую сервисами от самых поисковых систем.

Для таких целей можно использовать Планировщик ключевых слов от Google AdWords и сервис подбора слов от Яндекса.

Комбинируя использование всех перечисленных инструментов, в зависимости от задачи, вы сможете собрать максимально полное семантическое ядро для своего проекта.

Тем не менее, как видите, я даю только перечень программ и сервисов, которые можно использовать, и даже не пытаюсь писать подробные инструкции по работе из каждым из них. Информация по работе с тем же Key Collector была бы достаточно обширной, чтобы хватило на написание целой книги.

Поэтому, если у вас нет времени все это изучать, наиболее правильным решением будет заказать семантическое ядро сайта у профессионалов. Команда нашего проекта тоже предоставляет такую услугу, и вы можете быть уверены в качестве выполненной работы. Написать нам вы можете через форму .

Что делать после составления семантического ядра?

Когда парсинг ключевых слов со всевозможных источников будет закончен, необходимо почистить их от слов-пустышек, неявных дублей и нецелевых запросов. Затем, кластеризовать и распределить по страницам сайта. Или, если речь идет о новом проекте – приступить к проектированию структуры на основе собранных слов и фраз.

Слова-пустышки, это те запросы, у которых очень большая разница в значениях между точным и широким соответствием. Или же, их частотность по точному соответствию, равна нулю.

Такие фразы не являются ценными и, которые под них оптимизированы, в итоге, не будут приносить трафик.

Кластеризация – это распределение ключевых слов по тематическим группам на основе смысла или основного вхождения. Также, есть специализированные сервисы, которые позволяют выполнить кластеризацию запросов на основе поисковой выдачи. Я, правда, придерживаюсь позиции, что наиболее качественную группировку можно выполнить только в ручном или получавтоматическом режиме. Пример результата такой работы:

Каждый кластер – это основа для оптимизации раздела или отдельной страницы сайта. Вот почему так важно, чтобы запросы были подобраны максимально корректно.

Как я уже писал в самом начале, семантическое ядро используется для проектирования структуры сайта или распределения в рамках уже существующей. Для визуального отображения структуры проекта хорошо подходят интеллект-карты. Взгляните на пример одного из проектов:

Как заказать семантическое ядро и сколько это стоит

Как я уже писал, сбор ключевых запросов для сайта является важной составляющей поисковой оптимизации и продвижения. Для выполнения такой работы на хорошем уровне, требуется соответствующий опыт и навыки, а главное – наличие специализированных инструментов и времени. Если вы не уверены в своих силах, или просто не обладаете достаточным количеством времени – вы можете заказать готовое семантическое ядро у нас, отправив .

Наши специалисты свяжутся с вами для уточнения деталей, определят стоимость и сроки выполнения работы. Также, при необходимости, мы дадим вам советы по правильному распределению запросов на страницах сайта, и другие полезные рекомендации.

к.э.н. Лавлинский Николай Евгеньевич, технический директор ООО «Метод Лаб»

Каждый владелец сайта хочет, чтобы он работал быстро. Это не прихоть технических специалистов, а реальная потребность бизнеса. Скорость напрямую влияет на экономические показатели: конверсию, вовлечённость, отказы, подписки, процент возвратов.

Конечно, хочется иметь волшебную кнопку, нажав которую мы получаем быстрый сайт сразу и без проблем. Именно такой кнопкой называет себя сервис Cloudflare. Более того, вы получаете не только скорость, но и безопасность «из коробки». Давайте посмотрим, что нам предлагает Cloudflare с точки зрения скорости сайтов.

Что такое Cloudflare

Cloudflare - это распределённая сеть (CDN), обладающая набором услуг по ускорению сайтов и безопасности. Сеть имеет более 100 точек присутствия по миру и более 15 Тбит суммарной пропускной способности.

Принцип работы аналогичен другим CDN - все запросы пользователей проксируются через точки (сервера) Cloudflare и либо обслуживаются напрямую из сети (если ресурс закеширован), либо производится запрос на исходный сервер (где работает ваш сайт) и затем отправляется ответ пользователю.

Так как сайт обслуживается через сервера Cloudflare, есть возможность сохранять и изменять копии статического и динамического контента сайта.

Ускорение сайтов за счет CDN

Как использование Cloudflare и других CDN поможет нам ускорить сайт?

Ускорение сайта в этом случае можно разделить две части: сетевые и контентные оптимизации.

Сетевые оптимизации заключаются в сокращении задержек между сервером и пользователем за счет использования географически распределённой сети и маршрутизации трафика через ближайший узел. Кроме того, узлы CDN как правило специально настроены на высокую скорость отдачи контента: TCP/IP тюнинг, быстрый TLS, поддержка современных протоколов, быстрое подключение к сети, скоростные диски и т. д.

Контентные оптимизации могут включать в себя: оптимизацию изображений, сжатие текстовых ресурсов, кеширующие заголовки, минификацию кода, отложенную загрузку элементов. Часть из этих оптимизаций прозрачны и не требуют внимания со стороны разработчиков (например, сжатие), другие - могут приводить к ошибкам в работе сайта (например, асинхронная загрузка JS-кода) и требуют осторожности в применении.

Ускорение сайтов в Cloudflare

При подключении к Cloudflare у вас есть выбор тарифных планов: бесплатный, Pro ($20 в месяц), Business ($200 в месяц) или Enterprise (индивидуальный).

Ускорение нам обещают на планах от Pro и выше. Бесплатный план предполагает только использование CDN, без возможностей по оптимизации контента.

В план Pro включены почти все возможности по ускорению: оптимизация изображений (Polish и Mirage), кеширование контента, асинхронная загрузка JS (Rocket loader). Не хватает только Railgun (оптимизация соединения между вашим сервером и сетью Cloudflare), время минимального кеширования 1 час (в Business - 30 минут).

Однако есть важное уточнение, которое не указано напрямую в тарифных планах, но рассмотрено в форуме поддержки: на тарифных планах ниже Business пользователь обслуживается не с ближайшего хоста Cloudflare, а с наиболее дешевого для Cloudflare. Это значит, что весь смысл использования CDN теряется.

Для российских ресурсов возможности CDN Cloudflare на сегодня представляют собой единственную точку присутствия в Москве. Так что, если вы используете хостинг в Москве, то сокращения дистанции до пользователя скорее всего не будет.

Для кого ускорение сайта с Cloudflare будет эффективно?

Мы рассмотрели, какие возможности по ускорению сайта могут предоставлять CDN, какие реализованы в Cloudflare и на каких тарифных планах. Какого эффекта можно ожидать от такого ускорения и кому оно будет действительно полезно. А для наглядности мы посмотрим на альтернативные способы решения проблем скорости и их трудоёмкость.

Сетевые оптимизации . Основная оптимизация - географически распределённая сеть для снижения задержек. В реализации Cloudflare имеет смысл только при наличии международной аудитории сайта и использования планов, начиная с Business. Альтернативные решения: собственная реализация распределённой системы (крайне трудоёмко), использование CDN с большим количеством точек в России (низкая трудоёмкость), раздача контента с собственного оптимизированного сервера (средняя трудоёмкость).

Контентные оптимизации . Оптимизации картинок, сжатие текста, кеширование контента может быть полезно для многих сайтов, которые не внедряют эти технологии на своей стороне. Наиболее полезной будет функция оптимизации изображений, остальные оптимизации гораздо проще во внедрении. Альтернативные решения: настройка сервера (сжатие) - низкая трудоёмокость, оптимизация изображений сторонними сервисами (средняя трудоёмкость), самостоятельная оптимизация (высокая трудоёмкость).

Оптимизация процесса рендеринга . Этот тип оптимизации отсутствует в Cloudflare, хотя может оказывать значительное влияние на реальную скорость сайта. К этому типу относятся оптимизации размещения CSS, JS-кода, отложенная загрузка элементов, оптимизация приоритетов элементов страницы. Дело в том, что этот процесс сложно автоматизируется и требует ручной работы. Трудоёмкость этой работы может варьироваться от средней до высокой, в зависимости от проекта.

Ускорение генерации HTML на сервере . Этот аспект также не учитывается Cloudflare, так как требует вмешательства в серверное окружение. Частичное решение этой проблемы - кеширование динамического контента (страниц) легко реализуемо как с Cloudflare, так и без. Однако для серьезных проектов полное кеширование динамики невозможно. При этом скорость генерации HTML является ограничивающим фактором для всего сайта. Если страница отдаётся с сервера за 10 секунд, уже неважно, какой CDN используется и как оптимизирован контент - пользователь уже закрыл вкладку браузера.

Заключение

Итак, мы рассмотрели возможности применения сервиса Cloudflare для ускорения сайтов. Краткий вывод: он может быть полезен для сайтов с распределённой аудиторией за пределами России, у которых нет проблем с серверной скоростью (время генерации страницы).

Также не стоит забывать о возможных рисках использования Cloudflare: возможность получить заблокированный в России IP-адрес, ограничения тарифных планов (когда вас настоятельно попросят перейти на более старший) и практику совмещённых SSL-сертификатов.

К сожалению, пока не существует единой кнопки «сделать сайт быстрым», несмотря на все маркетинговые заявления.

Как то столкнулся я с мощной DDOS атакой на сайт, когда мне положили его наглухо. Вот тогда и пришлось открыть для себя CloudFlare.

Это популярнейший сервис облачной сети по обслуживанию сайтов и интернет ресурсов с обеспечением их безопасности и оптимизации. Он предоставляет защиту от DDOS атак, SSL сертификаты и ряд других очень полезных инструментов.

Cloudflare - самый большой, самый быстрый и самый надёжный управляемый DNS сервис в мире с более чем 35% долей рынка.

Сайт подключённый к CloudFlare загружается быстрее, при этом потребляя значительно меньше пропускного трафика, а следовательно нагрузки на сервер становятся меньше. При этом сайт или интернет ресурс становится более защищённым от злоумышленников.

Эта облачная сеть была создана тремя америкосами в 2009 году. Она очень быстро развилась и уже в 2011 году удостоилась награды на Всемирном экономическом форуме в Давосе за использование инновационных технологий защиты от угроз . Сеть основывается на усовершенствованной версии Nginx и насчитывает более 100 дата-центров расположенных в различных странах. Количество серверов сети CloudFlare непрерывно растёт по всему миру. Они есть в Москве и Киеве.

Принцип работы сервиса заключается в том, что сайт подключается к системе через прописывание в домене DNS-серверов CloudFlare (каждому пользователю выделяется пара DNS-серверов вида ***.ns.cloudflare.com). В панели управления CloudFlare можно настроить записи, для записей, указывающих на IP-адреса (типа CNAME и A) — определить, идёт ли трафик через CloudFlare (тогда IP-адрес сайта скрывается).

Регистрация бесплатная, плата за трафик передаваемый через CDN не снимается.

В CloudFlare есть 4 тарифных плана:

  • Бесплатный (бесплатный SSL, статистика и блокировка спамботов, кеш для контента, режим атаки);
  • Профессиональный (SSL, статистика в реальном времени, оптимизация для мобильных устройств) — 20$ в месяц за первый сайт, 5$ в месяц за последующие;
  • Бизнес (защита от DDoS, гарантия 100 % доступности сайта) — 200$ в месяц;
  • Корпоративный (компенсация за простой 2500 %, техподдержка по телефону) — 5000$ в месяц.

*В статистике собирается информация об отклонённых подозрительных запросах, общем трафике за месяц и объёме трафика, сэкономленного благодаря кешированию CloudFlare.

Сеть очень популярна и используется во всём мире.

Always Online

Always Online — опция CloudFlare, позволяющая просматривать сайты, у которых сервер в настоящий момент перестал функционировать. Эта функция бесплатна для всех пользователей CloudFlare.

Если она включена, а сайт не работает - то показывается копия страницы сайта и сообщение: «This page сайт is currently offline. However, because the site uses CloudFlare’s Always Online™ technology you can continue to surf a snapshot of the site».

CloudFlare и браузер Tor

После подключения CloudFlare заметно усложняется работа с сайтами через анонимный браузер Tor. На многие простые запросы (отправка личного сообщения, например) появляется запрос сложной каптчи, при этом запрос может быть не выполнен и после введения каптчи может потребоваться вновь отправлять сообщение (если текст не был сохранен вне браузера - он попросту теряется).

Инциденты

Бывают случаи, когда IP от CloudFlare попадают в чёрный список Роскомнадзора, от чего могут страдать невиновные сайты, так как CloudFlare выделяет один и тот же IP для нескольких сайтов.

С апреля 2014 г. роскомнадзор начал предостерегать от использования CloudFlare.

Есть примеры когда от мощнейшего DDoS не помогали даже платные планы подписки. Так в 2015 году был на несколько дней положен сайт Ficbook, подключенный к CloudFlare.

Рекордная атака

По сообщению генерального директора Мэтью Прайса (Matthew Price), CloudFlare подвергалась в феврале 2014 года DDoS-атаке мощностью 400 Гбит/с.

Как подключить Cloudflare

Чтобы подключить сайт к сервису Cloudflare, для начала зарегистрируйтесь https://www.cloudflare.com/a/sign-up

после чего выполните действия показанные в видео инструкции.

Видео: как подключить Cloudflare