Руководство Google для веб-мастеров: все, что нужно знать и понимать!

автор: Brian Harnish

Руководство Google для веб-мастеров является основой для достижения устойчивых результатов в SEO с использованием методов, соответствующих ожиданиям Google.

Если не следовать рекомендациям, можно получить алгоритмическое снижение позиций либо прямой ручной штраф. В исключительных случаях можно вылететь из результатов поиска Google.

Полное понимание указаний Руководства – единственный способ избежать возможных ошибок и последующего вреда для вашего сайта. Конечно же, всегда есть несколько способов интерпретации их указаний.

К счастью, представители Google Джон Мюллер (John Mueller, @JohnMu)и Гари Ильес (Gary 鯨理／경리 Illyes, @methode), доступны на Twitter для ответов на большинство вопросов об этих директивах.

В большинстве своем, рекомендации Руководства являются прямолинейными и понятными, но их следует регулярно пересматривать, поскольку Google имеет привычку обновлять отдельные строки и абзацы.

Одним из недавних изменений в рекомендациях было добавление строки о том, что необходимо разрабатывать сайты на допустимом HTML и CSS, и это должно быть проверено с использованием инструментов W3C. Это не поможет в поиске, но скажется на пользовательском опыте благодаря лучшей совместимости с различными браузерами.

Цель этой главы – предложить потенциальные решения для общих проблем, чтобы вы были вооружены действенными советами для решения проблем на сайте.

Что такое руководство вебмастера Google?

Руководство разделено на категории:

1. Руководство вебмастера.
2. Общие рекомендации.
3. Рекомендации по контенту.
4. Рекомендации по качеству.

Руководство вебмастера поможет разработать сайт так, чтобы его легче было обнаружить в поиске Google.

Общие рекомендации помогут сайту выглядеть наилучшим образом в результатах поиска Google (SERP – страница результатов поиска).

Рекомендации по контенту более конкретны и касаются различных типов контента на вашем сайте, таких как изображения, видео и другие.

Рекомендации по качеству включают в себя перечень техник, запрещенных и могущих привести к блокировке сайта в SERP. Их использование может привести к наложению ручного штрафа на сайт. Эти рекомендации направлены на то, чтобы убедиться, что вы не генерируете спам-контент, предназначенный для поисковых роботов, а не для людей.

Разработка сайтов, соответствующих руководству Google для веб-мастеров, представляет собой некоторую сложность. Следующим вызовом является применение рекомендаций к контенту таким образом, чтобы он им соответствовал.

Убедитесь, что ваши ключевые слова релевантны

Ваш сайт должен быть легко обнаруживаемым.

Один из способов определить актуальность ключевых слов – изучить сайты, занимающие верхние позиции, и посмотреть, какие ключевые слова они используют в заголовке страницы и мета-описании. Другой способ – провести анализ конкурентов среди лучших сайтов в вашей нише.

Существует много инструментов, которые помогут определить, как сайты используют ключевые слова на странице.

Общая проблема

Заказчик предоставил список ключевых слов, для которых надо оптимизировать сайт. Проблема в том, что список состоит только из брендированных ключевых слов, и не уделено никакого внимания оптимизации веб-сайта.

Решение

Решение здесь не так просто. Вам потребуется провести исследование ключевых слов и глубокий анализ конкурентов, чтобы найти оптимальное решение.

Убедитесь, что страницы на вашем сайте можно достичь по ссылке с другой доступной страницы

Google рекомендует, чтобы каждая страница вашего сайта получала хоть одну ссылку с другой страницы. Ссылки создают всемирную паутину, поэтому логично, что основным средством навигации являются ссылки. Это можно сделать через меню навигации, хлебные крошки или контекстные ссылки.

Ссылки должны быть доступны для обработки поисковыми роботами. Создание обрабатываемых ссылок обеспечивает отличный пользовательский опыт, и Google легко может индексировать и понимать ваш сайт. Избегайте использования общих анкорных текстов для создания этих ссылок и используйте ключевые фразы под описание страницы, на которую ведет ссылка.

Архитектура веб-сайта с силосной структурой является наилучшей, потому что она способствует поддержанию тематической актуальности страниц на вашем сайте и распределяет их в иерархическую структуру, которую Google может понять. Это также помогает укрепить тематическую направленность.

Справка: силосная архитектура (siloed website architecture)

"Силосная архитектура вебсайта" – это метод организации веб-сайта, при котором контент разделяется на тематические группы или "силосы". Каждый силос содержит информацию, относящуюся к определенной теме или категории. Такая структура помогает подчеркнуть тематическую связность страниц внутри каждого силоса и упорядочивает их в иерархическую систему.

Преимущества силосной архитектуры включают улучшение тематической релевантности страниц для поисковых систем, облегчение навигации для пользователей и улучшение понимания структуры сайта поисковыми роботами.

Важным аспектом силосной структуры является то, что каждая тематическая группа имеет четкую иерархию, и страницы внутри силоса связаны между собой тематически. Это помогает укрепить тематическую фокусировку и повысить эффективность SEO.

Общая проблема

Вы сталкиваетесь с сайтом, на котором повсюду встречаются брошенные страницы.

Решение

Убедитесь, что на каждую потенциальную страницу на вашем сайте ведет хотя бы одна ссылка с сайта. Если страница не является частью вашего сайта, либо удалите ее полностью, либо добавьте мета-тег noindex.

Ограничьте количество ссылок на странице до разумного количества

В прошлом Google заявлял, что не следует использовать более 100 ссылок на странице.

Лучше иметь ссылки, которые полезны пользователю, чем придерживаться конкретного количества. Фактически придерживание определенных количеств может быть вредным, если они негативно сказываются на пользовательском опыте.

Согласно рекомендациям Google, разрешено иметь несколько тысяч (максимум) ссылок на странице. Кажется, что Google считает огромное количество ссылок явным сигналом о спаме.

Если вы хотите плодить бесчисленные ссылки, делайте это на свой страх и риск.

Общая проблема

У вас есть сайт, на котором более 10 000 ссылок на странице. Это приведет к проблемам при индексации вашего сайта Google.

Решение

Это зависит от масштаба и типа вашего сайта. Раздробите страницу, не забыв о том, чтобы каждая новая страница содержала вразумительный контент. Убедитесь, что количество ссылок на страницах уменьшено до нескольких тысяч, если вашему сайту это необходимо.

Используйте файл robots.Txt для управления вашим индексированием

Оптимизация бюджета индексации – важная часть обеспечения эффективности и легкости индексации вашего сайта Google.

Через этот процесс вы делаете индексацию сайта более эффективной и удобной для Google. Вы оптимизируете свой бюджет индексации двумя способами – через ссылки на вашем сайте и файл robots.txt.

Метод, который в первую очередь беспокоит на этом этапе – использование robots.txt для оптимизации бюджета индексации. Руководство от Google расскажет все, что нужно знать о файле robots.txt и о том, как он может влиять на индексацию.

Общая проблема

Вы сталкиваетесь с сайтом, у которого в файле robots.txt указана следующая строка:

• Disallow: /

Это означает, что файл robots.txt запрещает индексацию всего сайта.

Решение

Удалите эту строку. Этого достаточно. Не такая великая проблема.

Общая проблема

Вы сталкиваетесь с сайтом, у которого в файле robots.txt отсутствует директива sitemap.xml.

Решение

Убедитесь, что вы добавили директиву, указывающую местоположение вашего файла sitemap, например:

• Sitemap: https://www.example.com/sitemap.xml

Убедитесь что файл по этому адресу существует и доступен для чтения. Это считается лучшей практикой с точки зрения SEO.

Создайте полезный, насыщенный информацией сайт и напишите страницы, которые ясно и точно описывают ваш контент

Как указано в рекомендациях, Google предпочитает сайты, насыщенные информацией.

Это определяется отраслью, поэтому анализ конкуренции критичен для выявления сайтов, считающихся "насыщенными информацией". Требование к "насыщенности информацией" может варьироваться в зависимости от отрасли, поэтому анализ конкуренции является необходимым.

Анализ должен раскрывать:

• О чем пишут другие сайты.
• Каким образом они пишут о этих темах.
• Как устроены их сайты.

С такими данными можно создать сайт, соответствующий рекомендациям Google. Иначе кокуренты не оказалисьбы в топе выдачи.

Общая проблема

У вас есть сайт, наполненный поверхностным, коротким контентом, не имеющим ценности. Давайте сразу уточним – количество слов не является единственным исключительным фактором для контента. Здесь важны качество, глубина и ширина контента. Вернемся к сайту – вы обнаруживаете, что он полон бестолкового контента.

Решение

Общего решения нет. Сначала потребуется потребуется разработать комплексную стратегию контента и переписать под нее имеющиеся страницы. те, которые переписать не удалось – закрыть для индексирования директивами в файле robot.txt.

Думайте о словах, которые пользователи ввели бы в поиск для нахождения ваших страниц

При проведении ключевого анализа критически важно удостовериться, что вы определяете, как пользователи ищут ваш сайт. Если вы не знаете слова, которые пользователи вводят в поиск, то ключевой анализ будет бесполезным.

Именно здесь на сцену выходит эффективный ключевой анализ.

При эффективном ключевом анализе вы должны учитывать такие вещи, как намерение потенциального клиента при поиске фразы.

Например, пользователь в начале воронки покупок, скорее ищет не товар, а информацию для изучения. Ему не нужны ключевые слова, которые ищет человек, находящийся в конце воронки покупок и готовый потратить деньги прямо сейчас.

Кроме того, следует учитывать мышление потенциального клиента – о чем они думают, когда ищут эти ключевые слова?

После завершения этапа ключевого анализа необходимо провести оптимизацию на страницах сайта. Процесс оптимизации обычно заключается в проверке, чтобы каждая страница сайта имела целевую ключевую фразу.

Без эффективного ключевого анализа и выбора целевых запросов невозможно провести SEO. В противном случае это не SEO.

Общая проблема

Вы сталкиваетесь с сайтом, который содержит только брендированные ключевые фразы и не сделал ничего для позиционирования на рынке.

Исследования показали, что они не обновляли свой блог разнообразными темами ключевых слов, а вместо этого сосредотачивались только на брендированных сообщениях.

Решение

Решение довольно простое – убедитесь, что вы используете целевые ключевые фразы, более широко относящиеся к теме, чтобы создавать контент, вместо брендированных ключевых слов.

Это возвращает к основам SEO: составьте список ключевых слов, которые пользователи вводят для поиска, и убедитесь, что ваш сайт содержит эти слова на своих страницах. Это, фактически, является частью общих рекомендаций от Google по помощи пользователям в понимании ваших страниц.

Разрабатывайте структуру сайта с ясной иерархией страниц

Что такое ясная концептуальная иерархия страниц? Это значит, что сайт организован по тематической релевантности.

Основные темы вашего сайта расположены как основные темы, с подтемами расположенными под основными темами. Это называется SEO-силосами. SEO-силосы – отличный способ организации страниц на вашем сайте по темам. Чем глубже ясная концептуальная иерархия страниц, тем лучше. Это говорит Google, что ваш сайт обладает знаниями по теме.

Существует два подхода к этой рекомендации. Один считает, что вы никогда не должны отходить от плоской архитектуры, то есть любая страница не должна быть глубже трех кликов от главной страницы.

Другая точка зрения включает в себя использование SEO-силосов – создание ясной концептуальной иерархии страниц, которая углубляется в ширину и в глубину вашей темы.

Идеальной будет архитектура веб-сайта, раскрывающая смысл вашей темы. SEO-силосы помогают достичь этого, обеспечивая максимальную глубину изучения вашей темы.

SEO-силосы также представляют собой взаимосвязанную организацию тематических страниц и обсуждений. Замечено, что использование SEO-силосов приводит к отличным результатам, я рекомендую, чтобы большинство сайтов, занимающихся тематически насыщенными вопросами, создавали структуру силоса, соответствующую этой теме.

Общая проблема

Вы сталкиваетесь с сайтом, на котором страницы раскиданы повсюду, без должной организации, связи или другой архитектуры сайта. Эти страницы также мозаично составлены, что означает отсутствие четкого организационного порядка.

Решение

Эту проблему можно решить, создав структуру веб-сайта с силосной архитектурой, соответствующей тому, что делают ваши конкуренты. Идея заключается в том, что такая архитектура сайта поможет укрепить тематическую направленность и, следовательно, улучшить рейтинги благодаря взаимосвязям между вашими страницами и укреплению темы.

Это укрепление темы создает большую релевантность для ваших ключевых фраз.

Гарантируйте полную индексацию всех ресурсов сайта

Вы, наверное, задаетесь вопросом: почему все ресурсы не могут быть полностью проиндексированы? Существуют ситуации, когда блокировка файлов CSS (каскадные таблицы стилей) и JS (JavaScript) допустима.

• Во-первых, если вы блокируете их из-за проблем с их взаимодействием на сервере.
• Во-вторых, если вы блокируете их из-за какого-то другого конфликта, в любом случае у Google также есть рекомендации по этому вопросу.

Рекомендации Google по этой теме гласят:

"Чтобы помочь Google полностью понять содержимое вашего сайта, разрешите индексацию всех ресурсов сайта, которые могут значительно влиять на отображение страницы, например, файлов CSS и JavaScript, влияющих на понимание страниц. Система индексации Google отображает веб-страницу так, как ее видит пользователь, включая изображения, файлы CSS и JavaScript. Чтобы увидеть, какие ресурсы страницы не могут быть проиндексированы Googlebot, используйте инструмент инспекции URL, чтобы отладить директивы в вашем файле robots.txt, используйте инструмент для тестирования robots.txt."

Это важно! Не стоит блокировать CSS и JavaScript.

Все элементы критически важны для того, чтобы Google полностью понимал контекст вашей страницы. Большинство владельцев сайтов блокируют CSS и JavaScript с помощью robots.txt. Иногда это происходит из-за конфликтов с другими файлами сайта. В других случаях они создают больше проблем, чем пользы, когда они полностью рендерятся.

Если файлы сайта вызывают проблемы при рендеринге, пришло время переделать сайт.

Общая проблема

Вы сталкиваетесь с сайтом, у которого CSS и JavaScript заблокированы в файле robots.txt.

Решение

Разблокируйте CSS и JavaScript в файле robots.txt. И если они вызывают такие конфликты (и в целом создают беспорядок), вам следует заменить их на работающие без конфликтов.

Сделайте важный контент сайта видимым по умолчанию

Рекомендации Google говорят о том, что самый важный контент вашего сайта должен быть виден по умолчанию. Это означает, что кнопки, вкладки и другие элементы навигации не нужны для отображения этого контента.

Google также объясняет, что они "считают этот контент менее доступным для пользователей и считают, что вы должны сделать вашу наиболее важную информацию видимой в представлении страницы по умолчанию". Вкладочный контент – да, он попадает под категорию контента, который менее доступен для пользователей.

Почему?

Представьте следующее: у вас есть блок с вкладками. Первая вкладка единственная, которая полностью видна и доступна пользователям, пока вы не нажмете на вкладку вверху, чтобы перейти ко второй. И так далее.

Google считает, что такой контент менее доступен.

Хотя это может быть довольно малозаметным аспектом, вам не стоит делать это грубо, особенно на главной странице. Убедитесь, что весь вкладочный контент полностью виден.

Общая проблема

Вам поручено работать с веб-сайтом, на котором есть вкладочный контент. Что делать?

Решение

Рекомендуйте клиенту создать версию контента, которая полностью видна. Например, превратите вкладочный контент в параграфированный контент, идущий вверх и вниз по странице.

Руководства Google для веб-мастеров – действительно руководства

Для специалистов по SEO руководства Google для веб-мастеров – это именно руководства.

Можно сказать, что это просто "рекомендации" и не обязательно правила. Но будьте осторожны – если вы нарушите их явно, вас могут исключить из результатов поиска. Я предпочитаю оставаться на хорошем счету у Google. Действия по исключению из поиска выглядят неприятно.

Не говорите, что мы вас не предупреждали.

Конечно, наказания могут варьироваться от алгоритмических обесцениваний до прямых исключений. Все зависит от того, насколько серьезным является нарушение этого руководства. И страницы, и папки могут быть обесценены в случае проблем с Penguin.

Не забывайте, что реальное время работы Penguin по своей природе очень детализировано в этом отношении. Однако важно отметить, что не все нарушения рекомендаций приведут к наказаниям.

Некоторые могут вызвать проблемы с индексацией и краулингом, что может повлиять на ваш рейтинг. Другие могут привести к исключениям, таким как наличие спамных ссылок на вашем сайте.

Когда наступает исключение, важно сохранять спокойствие. Вы, вероятно, сами привлекли это своим спамом по ссылкам или другим типом спама на вашем сайте. Лучшее, что вы можете сделать сейчас, это исследовать и работать с Google для устранения исключения.

В общем, если вы много времени тратили на проблемы, Google ожидает, что вы потратите столько же времени, чтобы избавиться от проблем, прежде чем вернуть их благосклонность. Иногда сайт настолько плох, что единственным решением является его уничтожение и разработка нового.

Обладая этими знаниями, вы способны определить, вызвали ли определенные методики у вас серьезные проблемы.

К слову, определенно стоит следовать рекомендациям Google с самого начала.

Хотя результаты при использовании этого метода могут быть медленнее по сравнению с другими, более агрессивными методами, мы настоятельно рекомендуем выбрать этот подход.

Этот подход поможет вам поддерживать более стабильное онлайн-присутствие, и вам не придется сталкиваться с ручными действиями или алгоритмическим обесцениванием. Выбор за вами.