« Organigramme d'installation » : différence entre les versions

De Documentation
Aller à la navigationAller à la recherche
Aucun résumé des modifications
 
(63 versions intermédiaires par le même utilisateur non affichées)
Ligne 1 : Ligne 1 :
  _______________________
== Gestion du changement d'IP de la livebox chez Ionos ==
  | |
=== Installer python ===
  | Installation complète |
Vérifier si python et pip sont installés :
  |_______________________|
python --version
 
pip --version


Installer python 3 :
apt update
apt upgrade
apt install software-properties-common
apt-get install python3


A. Les outils
=== Installer le client multi-plateforme ===
pip install domain-connect-dyndns
=== Configurer et automatiser ===
Ajouter le domaine :
domain-connect-dyndns setup --domain NOM_DU_DOMAINE
Suivre les étapes et noter le chemin du fichier de configuration (*.txt)</br>
Pour mettre à jour tous les domaines :
domain-connect-dyndns update --all
Pour automatiser le processus de surveillance et de mise à jour :</br>
Éditer crontab :
crontab -e
Ajouter la ligne :
*/1 * * * * /usr/bin/flock -n /tmp/ipupdate.lck /usr/local/bin/domain-connect-dyndns update --all --config /Chemin de sauvegarde/settings.txt
C'est tout !
== Les outils ==
=== Conteneur proxy : [[Proxy|Voir la page]] ===
::* Création du conteneur
::* Installation et configuration de nginx
::* Installation de certbot pour let's encrypt
::* Voir pour installer des outils de sécurité (fail2ban,...)
<br>
=== Conteneur Mariadb : [[Mariadb|Voir la page]] ===
::* Création du conteneur
::* Installation de mariadb
::* Configuration
::* Création d'un utilisateur
<br>
=== Conteneur PhpMyadmin : [[Phpma|Voir la page]] ===
::* Création du conteneur
::* Installation d'apache2 et de phpmyadmin
::* Configuration d'apache2 et de phpmyadmin
<br>


1. '''Conteneur proxy :''' cf nginx sur alpine léger
== Les applis ==
<br>
=== Conteneur tables : [[Tables|Voir la page]] ===
:*Installation du serveur web avec apache
:*Installation de ''tables'' et corrections des fichiers
:*Installation et configuration de goaccess


Création du conteneur
=== Conteneur pmb : [[Pmb|Voir la page]]===
''(cf pmb sur alpine léger (historique dans pmb sur alpine lourd)''
<br>


Installation et configuration de nginx
=== Conteneur wiki : [[Wiki|Voir la page]] ===
::* Création d'un utilisateur et d'une base de donnée vide pour le wiki
::* Transfert de la base de données
::* Création du conteneur
::* Installation du serveur web
::* Installation de la nouvelle version de mediawiki
::* Initialisation de l'application
::* Modification de LocalSettings.php
::* Récupération du contenu sur l'ancien serveur et transfert des données
::* Corrections


Installation de certbot pour let's encrypt
=== Conteneur wp : [[Wp|Voir la page]] ===
''(cf wordpress sur alpine léger mais sauter à la fin. Mariadb et phpmyadmin dans d'autres conteneurs...)''
<br>


Voir pour installer des outils de sécurité (fail2ban,...)
== Stockage et sauvegardes ==
création d'un volume pour les sauvegardes :
2. '''Conteneur Mariadb :''' cf mariadb sur alpinele
Création du conteneur
Installation de mariadb
Configuration
Création d'un utilisateur
3. '''Conteneur PhpMyadmin :''' cf phpma sur alpineLe


Création du conteneur
<nowiki>#</nowiki> lxc storage volume create default sauvegarde-lxc size=50GB


Installation d'apache2 et de phpmyadmin
Montage du volume dans chaque conteneur :


Configuration d'apache2 et de phpmyadmin
<nowiki>#</nowiki> lxc config device add <nom du conteneur> sauvegarde-mount disk source=sauvegarde-lxc pool=default path=/sauvegardes


B. Les applis
4. '''Conteneur tables''' : cf tables sur alpine léger & pmb sur alpine léger pour apache2
5. '''Conteneur pmb''' : cf pmb sur alpine léger (historique dans pmb sur alpine lourd)
6. '''Conteneur wiki''' : Cf wiki (mediawiki) sur alpine léger


Création d'un utilisateur et d'une base de donnée vide pour le wiki
logiciel : borg sauvegarde et rétention de données. Comte chez Kiki, à pousser en ssh.<br>


Transfert de la base de données
== Sécurisation ==
=== Mises à jour automatiques [[Mises à jour automatiques|Voir la page]]===


Création du conteneur
Afin d'automatiser la mise à jour des conteneurs, on crée un script qui va
:*Mettre à jour les conteneurs alpine en fonctionnement
:*Créer un fichier de log
:*Corriger le fichier de log pour ne garder la trace que des deux dernières mises à jour
:*Envoyer un mail d'alerte en cas d'erreur
:*Redémarrer les conteneurs en prenant soin de démarrer le conteneur '''proxy''' en dernier


Installation du serveur web
===Sauvegardes automatiques des données des conteneurs web===
On va programmer une sauvegarde automatique pour chaque conteneur web, ainsi que pour le conteneur '''mariadb'''. Ces sauvegardes se feront dans un espace commun qui sera à son tour sauvegardé sur un site distant à intervalles réguliers en gérant la rotation des sauvegardes.<br>
Les conteneurs :
::* mariadb
::* wiki
::* pmb
::* wp
bénéficieront de ce mécanisme.<br>
Pour les conteneurs '''proxy''', '''phpma''' et '''tables''', une simple sauvegarde à la main suffira.<br>
On commence par créer un volume de 50Gb et on le monte dans les conteneurs concernés :
lxc storage volume create default sauvegarde-lxc size=50GB
lxc config device add wp sauvegarde-mount disk source=sauvegarde-lxc pool=default path=/sauvegardes
lxc config device add wiki sauvegarde-mount disk source=sauvegarde-lxc pool=default path=/sauvegardes
lxc config device add mariadb sauvegarde-mount disk source=sauvegarde-lxc pool=default path=/sauvegardes
lxc config device add pmb sauvegarde-mount disk source=sauvegarde-lxc pool=default path=/sauvegardes
====mariadb====
:* On commence par créer un utilisateur spécifique à la sauvegarde.<br> Sous phpMyAdmin, création de l'utilisateur ''backup_user'' avec les privilèges ''SELECT'' et ''LOCK TABLES'' pour les tables ''pmb'', ''wiki'' et ''wordpress''.<br><br>
:* Création du script de sauvegarde des tables<br>On sauvegarde les tables ''pmb'', ''wordpress'' et ''wiki'' en générant un fichier de log dans /var/log/'''backup_mariadb.log'''.<br>
<div class="toccolours mw-collapsible mw-collapsed">
'''/usr/local/bin/backup_mariadb.sh''' :
<div class="mw-collapsible-content">
#!/bin/sh
DATE=$(date +%Y%m%d_%H%M)
OUTPUT_FILE="/sauvegardes/db_backup_${DATE}.sql.gz"
USER="backup_user"  <br>PASSWORD="*********" # ''Mot de passe de backup_user''
# Liste des bases de données à sauvegarder
DATABASES="pmb wiki wordpress"
# Exporte chaque base de données et la compresse
for DB in $DATABASES; do
  echo "Sauvegarde de la base de données : $DB"
  mysqldump -u "$USER" -p"$PASSWORD" "$DB" | gzip >> "$OUTPUT_FILE"
done
chmod 600 "$OUTPUT_FILE" # Restreindre les permissions
echo "Sauvegarde des bases de données terminée : $OUTPUT_FILE" >> /var/log/backup_mariadb.log
</div></div>
:* Rendre le script exécutable :<br>
chmod +x /usr/local/bin/backup_mariadb.sh<br>
:* Automatiser le script le samedi à 2h du matin :<br>Avec '''crontab -e''', ajouter la ligne :
0 2 * * 6 /usr/local/bin/backup_mariadb.sh


Installation de la nouvelle version de mediawiki
====wiki====
MediaWiki installe par défaut des extensions et des skins. La sauvegarde de ces extension alourdit considérablement le fichier. Le script parcourt le dossier pour les exclure et ne tenir compte que de celles nouvellement installées.<br>
Il crée également un fichier de log /var/log/'''backup_wiki.log'''<br><br>


Initialisation de l'application
<div class="toccolours mw-collapsible mw-collapsed">
/usr/local/bin/'''backup_wiki.sh''':
<div class="mw-collapsible-content">
#!/bin/sh
DATE=$(date +%Y%m%d_%H%M)
OUTPUT_FILE="/sauvegardes/wiki_backup_${DATE}.tar.gz"
MEDIAWIKI_ROOT="/var/www/localhost/htdocs/"
BASE_EXTENSIONS="AbuseFilter CategoryTree Cite CiteThisPage CodeEditor ConfirmEdit DiscussionTools Echo Gadgets ImageMap InputBox Interwiki Linter LoginNotify Math MultimediaViewer Nuke OATHAuth PageImages ParserFunctions PdfHandler Poem ReplaceText Scribunto SecureLinkFixer SpamBlacklist SyntaxHighlight_GeSHi TemplateData TextExtracts Thanks TitleBlacklist VisualEditor WikiEditor"
FILES_TO_BACKUP="images
LocalSettings.php
extensions-custom/
skins-custom/"
echo "--- Début du script ---"
echo "Date de la sauvegarde : $DATE"
echo "Fichier de sortie : $OUTPUT_FILE"
echo "Racine de MediaWiki : $MEDIAWIKI_ROOT"
echo "Extensions de base : $BASE_EXTENSIONS"
echo "Fichiers de base à sauvegarder : $FILES_TO_BACKUP"
echo "---"
cd "$MEDIAWIKI_ROOT" || { echo "Erreur lors du changement de répertoire vers $MEDIAWIKI_ROOT"; exit 1; }
echo "Répertoire courant : $(pwd)"
echo "--- Identification des extensions personnalisées ---"
echo "Création du fichier temporaire /tmp/backup_list.txt"
echo "$FILES_TO_BACKUP" > /tmp/backup_list.txt
cat /tmp/backup_list.txt | while IFS= read -r LINE; do
  echo "Ajout de '$LINE' à la liste de sauvegarde."
done
echo "---"
echo "Traitement des extensions dans $MEDIAWIKI_ROOT/extensions/"
for EXTENSION_DIR in "$MEDIAWIKI_ROOT"extensions/*; do
    if [ -d "$EXTENSION_DIR" ]; then
        EXTENSION_NAME=$(basename "$EXTENSION_DIR")
        echo "Extension trouvée : $EXTENSION_NAME \(chemin complet : $EXTENSION_DIR\)"
        IS_BASE=0
        for BASE_EXT in $BASE_EXTENSIONS; do
            if [ "$EXTENSION_NAME" = "$BASE_EXT" ]; then
                IS_BASE=1
                echo "  '$EXTENSION_NAME' est une extension de base."
                break
            fi
        done
        if [ "$IS_BASE" -eq 0 ]; then
            echo "  '$EXTENSION_NAME' est une extension personnalisée. Ajout à la liste de sauvegarde."
            echo "extensions/$EXTENSION_NAME" >> /tmp/backup_list.txt
        fi
    fi
done
echo "--- Liste de sauvegarde complète ---"
cat /tmp/backup_list.txt
echo "---"
echo "Création de l'archive : $OUTPUT_FILE"
tar czf "$OUTPUT_FILE" -T /tmp/backup_list.txt --exclude='./tmp/backup_list.txt'
echo "Commande tar exécutée."
if [ -f "$OUTPUT_FILE" ]; then
    chmod 600 "$OUTPUT_FILE"
    echo "Permissions du fichier de sauvegarde mises à 600."
    echo "Sauvegarde des données essentielles et des extensions personnalisées de MediaWiki terminée : $OUTPUT_FILE" >> /var/log/backup_wiki.log
    echo "--- Fin du script ---"
else
    echo "Erreur : Le fichier de sauvegarde $OUTPUT_FILE n'a pas été créé."
    echo "--- Fin du script \(avec erreur\) ---"
    exit 1
fi
rm /tmp/backup_list.txt
echo "Fichier temporaire /tmp/backup_list.txt supprimé."
</div></div>
'''NB :''' Les nombreuses lignes ''echo'' ont été ajoutées à des fin de corrections en cours de programmation et peuvent être simplifiées...
:* Rendre le script exécutable :<br>
chmod +x /usr/local/bin/backup_wiki.sh<br>
:* Automatiser le script le samedi à 3h30 du matin :<br>Avec '''crontab -e''', ajouter la ligne :
30  3  *  *  6  /usr/local/bin/backup_wiki.sh


Modifications de LocaSettings.php
====wp====
 
====pmb====
Récupération du contenu sur l'ancien serveur et transfert des données
 
Corrections
 
7. '''Conteneur wp''' : cf wordpress sur alpine léger, mais sauter à la fin. Mariadb et phpmyadmin dans d'autres conteneurs...
 
C. Stockage et sauvegardes
 
D. Sécurisation

Dernière version du 6 septembre 2025 à 16:54

Gestion du changement d'IP de la livebox chez Ionos

Installer python

Vérifier si python et pip sont installés :

python --version
pip --version

Installer python 3 :

apt update
apt upgrade
apt install software-properties-common
apt-get install python3

Installer le client multi-plateforme

pip install domain-connect-dyndns

Configurer et automatiser

Ajouter le domaine :

domain-connect-dyndns setup --domain NOM_DU_DOMAINE

Suivre les étapes et noter le chemin du fichier de configuration (*.txt)
Pour mettre à jour tous les domaines :

domain-connect-dyndns update --all

Pour automatiser le processus de surveillance et de mise à jour :
Éditer crontab :

crontab -e

Ajouter la ligne :

*/1 * * * * /usr/bin/flock -n /tmp/ipupdate.lck /usr/local/bin/domain-connect-dyndns update --all --config /Chemin de sauvegarde/settings.txt

C'est tout !

Les outils

Conteneur proxy : Voir la page

  • Création du conteneur
  • Installation et configuration de nginx
  • Installation de certbot pour let's encrypt
  • Voir pour installer des outils de sécurité (fail2ban,...)


Conteneur Mariadb : Voir la page

  • Création du conteneur
  • Installation de mariadb
  • Configuration
  • Création d'un utilisateur


Conteneur PhpMyadmin : Voir la page

  • Création du conteneur
  • Installation d'apache2 et de phpmyadmin
  • Configuration d'apache2 et de phpmyadmin


Les applis


Conteneur tables : Voir la page

  • Installation du serveur web avec apache
  • Installation de tables et corrections des fichiers
  • Installation et configuration de goaccess

Conteneur pmb : Voir la page

(cf pmb sur alpine léger (historique dans pmb sur alpine lourd)

Conteneur wiki : Voir la page

  • Création d'un utilisateur et d'une base de donnée vide pour le wiki
  • Transfert de la base de données
  • Création du conteneur
  • Installation du serveur web
  • Installation de la nouvelle version de mediawiki
  • Initialisation de l'application
  • Modification de LocalSettings.php
  • Récupération du contenu sur l'ancien serveur et transfert des données
  • Corrections

Conteneur wp : Voir la page

(cf wordpress sur alpine léger mais sauter à la fin. Mariadb et phpmyadmin dans d'autres conteneurs...)

Stockage et sauvegardes

création d'un volume pour les sauvegardes :

# lxc storage volume create default sauvegarde-lxc size=50GB

Montage du volume dans chaque conteneur :

# lxc config device add <nom du conteneur> sauvegarde-mount disk source=sauvegarde-lxc pool=default path=/sauvegardes


logiciel : borg sauvegarde et rétention de données. Comte chez Kiki, à pousser en ssh.

Sécurisation

Mises à jour automatiques Voir la page

Afin d'automatiser la mise à jour des conteneurs, on crée un script qui va

  • Mettre à jour les conteneurs alpine en fonctionnement
  • Créer un fichier de log
  • Corriger le fichier de log pour ne garder la trace que des deux dernières mises à jour
  • Envoyer un mail d'alerte en cas d'erreur
  • Redémarrer les conteneurs en prenant soin de démarrer le conteneur proxy en dernier

Sauvegardes automatiques des données des conteneurs web

On va programmer une sauvegarde automatique pour chaque conteneur web, ainsi que pour le conteneur mariadb. Ces sauvegardes se feront dans un espace commun qui sera à son tour sauvegardé sur un site distant à intervalles réguliers en gérant la rotation des sauvegardes.
Les conteneurs :

  • mariadb
  • wiki
  • pmb
  • wp

bénéficieront de ce mécanisme.
Pour les conteneurs proxy, phpma et tables, une simple sauvegarde à la main suffira.
On commence par créer un volume de 50Gb et on le monte dans les conteneurs concernés :

lxc storage volume create default sauvegarde-lxc size=50GB
lxc config device add wp sauvegarde-mount disk source=sauvegarde-lxc pool=default path=/sauvegardes
lxc config device add wiki sauvegarde-mount disk source=sauvegarde-lxc pool=default path=/sauvegardes
lxc config device add mariadb sauvegarde-mount disk source=sauvegarde-lxc pool=default path=/sauvegardes
lxc config device add pmb sauvegarde-mount disk source=sauvegarde-lxc pool=default path=/sauvegardes

mariadb

  • On commence par créer un utilisateur spécifique à la sauvegarde.
    Sous phpMyAdmin, création de l'utilisateur backup_user avec les privilèges SELECT et LOCK TABLES pour les tables pmb, wiki et wordpress.

  • Création du script de sauvegarde des tables
    On sauvegarde les tables pmb, wordpress et wiki en générant un fichier de log dans /var/log/backup_mariadb.log.

/usr/local/bin/backup_mariadb.sh :

#!/bin/sh
DATE=$(date +%Y%m%d_%H%M)
OUTPUT_FILE="/sauvegardes/db_backup_${DATE}.sql.gz"
USER="backup_user"  
PASSWORD="*********" # Mot de passe de backup_user # Liste des bases de données à sauvegarder DATABASES="pmb wiki wordpress" # Exporte chaque base de données et la compresse for DB in $DATABASES; do echo "Sauvegarde de la base de données : $DB" mysqldump -u "$USER" -p"$PASSWORD" "$DB" | gzip >> "$OUTPUT_FILE" done chmod 600 "$OUTPUT_FILE" # Restreindre les permissions echo "Sauvegarde des bases de données terminée : $OUTPUT_FILE" >> /var/log/backup_mariadb.log
  • Rendre le script exécutable :
chmod +x /usr/local/bin/backup_mariadb.sh
  • Automatiser le script le samedi à 2h du matin :
    Avec crontab -e, ajouter la ligne :
0 2 * * 6 /usr/local/bin/backup_mariadb.sh

wiki

MediaWiki installe par défaut des extensions et des skins. La sauvegarde de ces extension alourdit considérablement le fichier. Le script parcourt le dossier pour les exclure et ne tenir compte que de celles nouvellement installées.
Il crée également un fichier de log /var/log/backup_wiki.log

/usr/local/bin/backup_wiki.sh:

#!/bin/sh
DATE=$(date +%Y%m%d_%H%M)
OUTPUT_FILE="/sauvegardes/wiki_backup_${DATE}.tar.gz"
MEDIAWIKI_ROOT="/var/www/localhost/htdocs/"
BASE_EXTENSIONS="AbuseFilter CategoryTree Cite CiteThisPage CodeEditor ConfirmEdit DiscussionTools Echo Gadgets ImageMap InputBox Interwiki Linter LoginNotify Math MultimediaViewer Nuke OATHAuth PageImages ParserFunctions PdfHandler Poem ReplaceText Scribunto SecureLinkFixer SpamBlacklist SyntaxHighlight_GeSHi TemplateData TextExtracts Thanks TitleBlacklist VisualEditor WikiEditor"
FILES_TO_BACKUP="images
LocalSettings.php
extensions-custom/
skins-custom/"

echo "--- Début du script ---"
echo "Date de la sauvegarde : $DATE"
echo "Fichier de sortie : $OUTPUT_FILE"
echo "Racine de MediaWiki : $MEDIAWIKI_ROOT"
echo "Extensions de base : $BASE_EXTENSIONS"
echo "Fichiers de base à sauvegarder : $FILES_TO_BACKUP"
echo "---"

cd "$MEDIAWIKI_ROOT" || { echo "Erreur lors du changement de répertoire vers $MEDIAWIKI_ROOT"; exit 1; }
echo "Répertoire courant : $(pwd)"
echo "--- Identification des extensions personnalisées ---"

echo "Création du fichier temporaire /tmp/backup_list.txt"
echo "$FILES_TO_BACKUP" > /tmp/backup_list.txt
cat /tmp/backup_list.txt | while IFS= read -r LINE; do
  echo "Ajout de '$LINE' à la liste de sauvegarde."
done
echo "---"

echo "Traitement des extensions dans $MEDIAWIKI_ROOT/extensions/"
for EXTENSION_DIR in "$MEDIAWIKI_ROOT"extensions/*; do
    if [ -d "$EXTENSION_DIR" ]; then
        EXTENSION_NAME=$(basename "$EXTENSION_DIR")
        echo "Extension trouvée : $EXTENSION_NAME \(chemin complet : $EXTENSION_DIR\)"
        IS_BASE=0
        for BASE_EXT in $BASE_EXTENSIONS; do
            if [ "$EXTENSION_NAME" = "$BASE_EXT" ]; then
                IS_BASE=1
                echo "  '$EXTENSION_NAME' est une extension de base."
                break
            fi
        done
        if [ "$IS_BASE" -eq 0 ]; then
            echo "  '$EXTENSION_NAME' est une extension personnalisée. Ajout à la liste de sauvegarde."
            echo "extensions/$EXTENSION_NAME" >> /tmp/backup_list.txt
        fi
    fi
done
echo "--- Liste de sauvegarde complète ---"
cat /tmp/backup_list.txt
echo "---"

echo "Création de l'archive : $OUTPUT_FILE"
tar czf "$OUTPUT_FILE" -T /tmp/backup_list.txt --exclude='./tmp/backup_list.txt'
echo "Commande tar exécutée."

if [ -f "$OUTPUT_FILE" ]; then
    chmod 600 "$OUTPUT_FILE"
    echo "Permissions du fichier de sauvegarde mises à 600."
    echo "Sauvegarde des données essentielles et des extensions personnalisées de MediaWiki terminée : $OUTPUT_FILE" >> /var/log/backup_wiki.log
    echo "--- Fin du script ---"
else
    echo "Erreur : Le fichier de sauvegarde $OUTPUT_FILE n'a pas été créé."
    echo "--- Fin du script \(avec erreur\) ---"
    exit 1
fi

rm /tmp/backup_list.txt
echo "Fichier temporaire /tmp/backup_list.txt supprimé."

NB : Les nombreuses lignes echo ont été ajoutées à des fin de corrections en cours de programmation et peuvent être simplifiées...

  • Rendre le script exécutable :
chmod +x /usr/local/bin/backup_wiki.sh
  • Automatiser le script le samedi à 3h30 du matin :
    Avec crontab -e, ajouter la ligne :
30  3  *  *  6  /usr/local/bin/backup_wiki.sh

wp

pmb