MediaWiki Extension CirrusSearch and Elasticsearch Setup

De­vOps and SRE

Lin­ux Serv­er

Elas­tic­Search и Ja­va

Ela­sic­Search 6.5.4, кой­то е ин­с­та­ли­ран ра­бо­ти с open­jdk-11, ко­я­то е вер­си­я­та по под­раз­би­ра­не в Ubun­tu 20.04. При усло­вие, че въз­ник­нат проб­ле­ми със ста­бил­ност­та, ще се на­ло­жи пре­ми­на­ва­не към Ela­sic­Search 5.6.16, ко­я­то ра­бо­ти с openjdk‑8. За под­роб­нос­ти: виж тук.

sudo apt install -y apt-transport-https default-jdk default-jre

cd ~/Downloads
wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.6.16.deb
wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.5.4.deb
sudo apt install ./elasticsearch-6.5.4.deb

# wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.0.1-amd64.deb

sudo systemctl enable elasticsearch.service
sudo systemctl start elasticsearch.service
sudo systemctl status elasticsearch.service

На­ма­ля­ва­не на раз­ре­ше­на­та па­мет. До­ри и та­зи ми се виж­да мно­го в bg​.trivictoria​.org e 128m. Ако има мно­го ед­нов­ре­мен­ни за­яв­ки мо­же да над­хвър­ли на­лич­на­та па­мет и да се счу­пи. От дру­га сра­на ако е мно­го мал­ко пак се чу­пи.

sudo nano /etc/elasticsearch/jvm.options

#-Xms1g
#-Xmx1g
-Xms512m
-Xmx512m

До­ба­вя­не на ди­рек­ти­ви за ав­то­ма­тич­но рес­тар­ти­ра­не в system.d unit‑а.

sudo cp /lib/systemd/system/elasticsearch.service ~/Downloads/elasticsearch.service.default
sudo nano /lib/systemd/system/elasticsearch.service

[Service]
# В края на секцията
Restart=always
RestartSec=3

При­ла­га­не на про­ме­ни­те.

sudo systemctl daemon-reload
sudo systemctl restart elasticsearch.service
sudo systemctl status elasticsearch.service

Про­вер­ка.

curl 'http://127.0.0.1:9200'

{
  "name" : "HFrziWt",
  "cluster_name" : "elasticsearch",
  "cluster_uuid" : "5qMVv8CHT3q2vv1sd8hLOw",
  "version" : {
    "number" : "6.5.4",
    "build_flavor" : "default",
    "build_type" : "deb",
    "build_hash" : "d2ef93d",
    "build_date" : "2018-12-17T21:17:40.758843Z",
    "build_snapshot" : false,
    "lucene_version" : "7.5.0",
    "minimum_wire_compatibility_version" : "5.6.0",
    "minimum_index_compatibility_version" : "5.0.0"
  },
  "tagline" : "You Know, for Search"
}

За да за­поч­не ре­гу­ляр­но ин­дек­си­ра­не на съ­дър­жа­ни­е­то на уики­то, спря­мо кон­фи­гу­ра­ци­я­та, напра­ве­на в /var/­www/­*/­Local­Sett­ings.php и до­ку­мен­та­ци­я­та на mw:Extension­:­CirrusSearch тряб­ва да напра­ви пър­во­на­чал­на ин­дек­са­ция, да се из­пъл­нят за­да­чи­те, ко­и­то ще съз­да­де тя, да се ре­ге­не­ри­ра ин­дек­са на съ­дър­жа­ни­е­то и от­но­во да се из­праз­ни опаш­ка­та със за­да­чи­те. За цел­та мо­гат да се из­пол­з­ват скрип­то­ве­те за под­дръж­ка, опи­са­ни в сек­ци­я­та Me­di­aWi­ki.

mw-maintenance-elasticsearch-index.sh
mw-maintenance-runJobs.sh cli
mw-maintenance-rebuildAll.sh
mw-maintenance-runJobs.sh cli

В до­пъл­не­ние е раз­ра­бо­тен скрип­та elasticsearch​-watch​.sh, ка­то чрез crontab за­да­ча се пра­ви пе­ри­о­дич­на про­вер­ка и при не­об­хо­ди­мост рес­тар­ти­ра­не. Скрип­та из­пра­ща пис­мо до vectoria@altclavis.com, ако настъ­пи съ­би­тие.

sudo crontab -e

# ElasticSearch Watch
*/5 * * * * /usr/local/bin/elasticsearch-watch.sh

Ре­фе­рен­ции:

• How to in­stall Elas­tic­search on Ubun­tu 20.04 LTS
• In­stall Elas­tic­search 6.x on Ubun­tu 18.04 LTS
• mw:Extension:CirrusSearch, Ext:CirrusSearch и Cir­rusSearch Talk: Ja­va ver­sion com­pat­i­bil­i­ty.

Ac­cess Elas­tic­search via SSH

• SSH Per­sis­tent Tun­nel and SSHFS Mount via "sys­temd" units

---

-RE­VIEW-

Elas­tic­Search

Re­quired by MW:Extension:CirrusSearch, some oth­er mw:extensions and some ex­ten­sions of NextCloud.

~/Downloads/elastic-search/
sido apt install ./elasticsearch-5.6.16.deb

До­ба­вя­не на фун­к­ция за ав­то­ма­ти­чен рес­тарт за elasticsearch.service, тъй ка­то по ня­кой път се „чу­пи“:

sudo nano /lib/systemd/system/elasticsearch.service

    [Service]
    ...
    Restart=always
    RestartSec=3

Ja­va

Down­grade re­quired by MW:Extension:CirrusSearch and Elas­tic­Search 5.6.16.

sudo apt install openjdk-8-jre-headless 
sudo apt install openjdk-8-jdk-headless
sudo update-alternatives --config java
sudo update-alternatives --config javac
sudo systemctl restart elasticsearch.service 
curl 'http://127.0.0.1:9200' # do a test

Reg­is­ter: De­vOps and SRE

Идентифициране

Разработване

Авторизиране

Утвърждаване

Spas

Spas

5.07.2022

29.08.2022

27720

30791