Кластер Elasticsearch на 200 Тб+ / Петр Зайцев (Одноклассники)
Оглавление:
Elasticsearch - это движок полнотекстового поиска и аналитики с открытым исходным кодом. Он поддерживает операции RESTful и позволяет хранить, искать и анализировать большие объемы данных в режиме реального времени.
Elasticsearch - одна из самых популярных поисковых систем, которая работает с приложениями, имеющими сложные поисковые запросы, такими как крупные магазины электронной коммерции и аналитические приложения.
Этот учебник проведет вас через процесс установки Elasticsearch на Debian 9.
Предпосылки
Вы должны войти в систему как пользователь с привилегиями sudo, чтобы иметь возможность устанавливать пакеты на вашем сервере Debian.
Установка Elasticsearch
Самый простой способ установить Elasticsearch на Debian - через официальный репозиторий Elasticsearch. На момент написания этой статьи последняя версия Elasticsearch была
7.0.0
и требует, чтобы в системе была установлена Java 8.
Начните с обновления индекса пакетов и установки пакета
apt-transport-https
, необходимого для доступа к хранилищу через
sudo apt update
sudo apt install apt-transport-https
Установите OpenJDK 8:
sudo apt install openjdk-8-jdk
Проверьте установку Java, распечатав версию Java:
java -version
Вывод должен выглядеть примерно так:
openjdk version "1.8.0_181" OpenJDK Runtime Environment (build 1.8.0_181-8u181-b13-2~deb9u1-b13) OpenJDK 64-Bit Server VM (build 25.181-b13, mixed mode)
Следующим шагом является добавление хранилища Elasticsearch.
Импортируйте открытый ключ репозитория с помощью следующей команды
wget
:
wget -qO - https://artifacts.elastic.co/GPG-KEY-elasticsearch | sudo apt-key add -
Приведенная выше команда должна вывести
OK
что означает, что ключ был успешно импортирован и пакеты из этого хранилища будут считаться доверенными.
Затем добавьте репозиторий Elasticsearch в систему, выполнив:
sudo sh -c 'echo "deb https://artifacts.elastic.co/packages/7.x/apt stable main" > /etc/apt/sources.list.d/elastic-7.x.list'
Если вы хотите установить другую версию Elasticsearch, измените
7.x
в приведенной выше команде на нужную вам версию.
Обновите индекс пакетов и установите механизм Elasticsearch:
sudo apt update
sudo apt install elasticsearch
Когда процесс установки завершится, запустите и включите службу, используя следующие команды:
sudo systemctl enable elasticsearch.service
sudo systemctl start elasticsearch.service
Чтобы убедиться, что Elasticsearch запущен, отправьте HTTP-запрос на порт 9200 на localhost, используя следующую команду curl:
curl -X GET "localhost:9200/"
Вывод должен выглядеть примерно так:
{ "name": "stretch", "cluster_name": "elasticsearch", "cluster_uuid": "Nj2W3PswRuWvJW8JG75O1Q", "version": { "number": "7.0.0", "build_flavor": "default", "build_type": "deb", "build_hash": "b7e28a7", "build_date": "2019-04-05T22:55:32.697037Z", "build_snapshot": false, "lucene_version": "8.0.0", "minimum_wire_compatibility_version": "6.7.0", "minimum_index_compatibility_version": "6.0.0-beta1" }, "tagline": "You Know, for Search" }
Запуск службы может занять 5-10 секунд. Если вы видите
curl: (7) Failed to connect to localhost port 9200: Connection refused
, подождите несколько секунд и повторите попытку.
Чтобы просмотреть сообщения, зарегистрированные службой Elasticsearch, используйте команду ниже:
sudo journalctl -u elasticsearch
Вот и все. Elasticsearch был установлен на вашем сервере Debian.
Настройка Elasticsearch
Данные Elasticsearch хранятся в каталоге
/var/lib/elasticsearch
. Файлы конфигурации находятся в
/etc/elasticsearch
а параметры запуска Java можно настроить в
/etc/default/elasticsearch
.
По умолчанию Elasticsearch настроен на прослушивание только на локальном хосте. Если клиент, подключающийся к базе данных, также работает на том же хосте, и вы настраиваете кластер с одним узлом, вам не нужно включать удаленный доступ.
Удаленный доступ
Из коробки Elasticsearch не реализует аутентификацию, поэтому доступ к ней может получить любой, кто имеет доступ к HTTP API. Если вы хотите разрешить удаленный доступ к серверу Elasticsearch, вам необходимо настроить брандмауэр и разрешить доступ к порту Elasticsearch 9200 только от доверенных клиентов.
sudo ufw allow from 192.168.100.20 to any port 9200
Не забудьте изменить
192.168.100.20
на свой удаленный IP-адрес.
В противном случае, если вы используете простой старый iptables, выполните:
sudo iptables -A INPUT -p tcp -s 192.168.100.20 --dport 9200 -j ACCEPT
После настройки брандмауэра следующим шагом будет редактирование конфигурации и настройка Elasticsearch для прослушивания внешних подключений.
Для этого откройте файл конфигурацииasticsearch.yml:
sudo nano /etc/elasticsearch/elasticsearch.yml
Найдите строку, содержащую
network.host
, раскомментируйте ее и измените значение на
0.0.0.0
:
network.host: 0.0.0.0
Перезапустите сервис Elasticsearch, чтобы изменения вступили в силу:
sudo systemctl restart elasticsearch
На этом этапе вы сможете подключиться к серверу Elasticsearch из своего удаленного местоположения.
Вывод
Вы успешно установили Elasticsearch в своей системе Debian 9. Для получения дополнительной информации о том, как начать работу с Elasticsearch, посетите их официальную страницу документации.
база данных JavaКак добавлять и удалять пользователей в Debian 9
Знание того, как добавлять и удалять пользователей, является одним из базовых навыков, которые должен знать пользователь Linux. В этом руководстве мы покажем вам, как добавлять и удалять пользователей в Debian 9.
Как установитьasticsearch на Ubuntu 18.04
Elasticsearch - это движок полнотекстового поиска и аналитики с открытым исходным кодом. Он поддерживает операции RESTful и позволяет хранить, искать и анализировать большие объемы данных в режиме реального времени. В этом уроке мы покажем вам, как установить Elasticsearch на Ubuntu 18.04.
Как обновить Debian 9 натяжки DEBiAN 10 попойки
После более чем двухлетней разработки новая стабильная версия Debian, Debian 10 под кодовым названием Buster, была выпущена 6 июля 2019 года. В этом руководстве мы покажем вам, как обновить систему Debian 9 Stretch до Debian 10 Buster.







