Git Product home page Git Product logo

indexing_tools's Introduction

Инструменты по индексации в ПС

Этот репозиторий содержит коллекцию инструментов для индексации в поисковых системах.

Специально для tg канала: seo_code

Инструменты

Google Indexing API

Модуль google_indexing_api представляет инструмент для отправки страниц на индексацию с помощью Google Indexing API.

Т.к. в Indexing API есть суточный лимит на отправку запросов, то в скрипте реализована ротация аккаунтов. Как только в конкретном аккаунте заканчиваются лимиты - происходит его замена и скрипт продолжает отправку.

NOTE: Пока что отправка запросов реализована последовательно и это занимает определенное время. У Indexing API есть поддержка batch запросов, что позволит отправлять запросы пачкой. Но скрипт пока так делать не умеет.

Как пользоваться?

В папку credits кладем креды от аккаунтов. Где их взять?

  1. Перейдите https://console.cloud.google.com/ -> APIs & Services -> Credentials. Если у вас еще нет проектов - создайте его.
  2. Нажмите "Create Credentials" -> "OAuth client ID" (Application type = Desktop app) и нажмите "Create".
  3. Скачайте JSON файл и положите его в папку credits
  4. На странице APIs & Services -> перейдите в Library и активируйте сервис "Indexing API".

NOTE: все созданные аккаунты должны быть добавлены в Search Console, доступ должен быть ко всем доменам, с которыми вы планируете работать. Права у аккаунтов - Owner.

Далее, положите все свои урлы, которые вы хотите проиндексировать, в файл urls.txt. И запустите скрипт:

cd google_indexing_api
poetry run python api.py

Yandex IndexNow

Модуль ya_index_now предоставляет инструмент для индексации страниц с использованием Yandex IndexNow.

По ссылкам ниже описано, что нужно сделать для начала работы.

Документация:

parse_sitemap.py

Скрипт parse_sitemap.py парсит URL-адреса из карты сайта (sitemap) и сохраняет их в файле sitemap_urls.txt.

Ping Google Sitemap.xml

Скрипт ping.py пингует указанные сайтмапы в гугле. Тесты показали, что пинг пока все еще работает, боты приходят.

Как установить

  1. Убедитесь, что у вас установлена версия Python 3.10. Вы можете проверить версию Python с помощью команды:
python --version
  1. Скачайте и установите Poetry, инструмент для управления зависимостями и виртуальным окружением Python:
curl -sSL https://install.python-poetry.org | python3 -
  1. Установите зависимости с помощью Poetry:
poetry install
  1. Теперь вы можете запустить скрипты. Например:
poetry run python parse_sitemap.py
poetry run python ya_index_now/index_now.py

indexing_tools's People

Contributors

bigevilbanana avatar

Stargazers

 avatar  avatar  avatar  avatar  avatar  avatar

Watchers

 avatar

Forkers

br3t drhema

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.