133 lines
4.4 KiB
Bash
133 lines
4.4 KiB
Bash
#!/bin/bash
|
|
# Synct die Paket-Whitelist aus Git und laedt die selektierten Pakete
|
|
# (inkl. Abhaengigkeiten) aus den jeweils angegebenen Fremd-Repos.
|
|
# Erzeugt anschliessend RPM- und AppStream-Metadaten.
|
|
set -euo pipefail
|
|
|
|
CONFIG_DIR=/etc/mirror
|
|
CONFIG_REPO_URL="${CONFIG_REPO_URL:?CONFIG_REPO_URL ist nicht gesetzt}"
|
|
CONFIG_REPO_BRANCH="${CONFIG_REPO_BRANCH:-main}"
|
|
PACKAGES_FILE="$CONFIG_DIR/packages.yaml"
|
|
DEST=/data/repo/rpms
|
|
TMP_REPO_DIR=/etc/yum.repos.d
|
|
LOCKFILE=/tmp/sync.lock
|
|
APPSTREAM_GEN=/usr/local/bin/appstream-gen.py
|
|
|
|
exec 200>"$LOCKFILE"
|
|
if ! flock -n 200; then
|
|
echo "[sync] Ein anderer Sync-Lauf ist bereits aktiv, breche ab."
|
|
exit 0
|
|
fi
|
|
|
|
echo "[sync] $(date -Iseconds) Starte Sync-Lauf"
|
|
|
|
# --- 1. Whitelist aus Git holen ---------------------------------------
|
|
mkdir -p "$CONFIG_DIR"
|
|
|
|
if [ -n "${GIT_SSH_KEY_PATH:-}" ] && [ -f "${GIT_SSH_KEY_PATH:-}" ]; then
|
|
export GIT_SSH_COMMAND="ssh -i ${GIT_SSH_KEY_PATH} -o StrictHostKeyChecking=accept-new"
|
|
fi
|
|
|
|
if [ -d "$CONFIG_DIR/.git" ]; then
|
|
git -C "$CONFIG_DIR" fetch --depth=1 origin "$CONFIG_REPO_BRANCH"
|
|
git -C "$CONFIG_DIR" reset --hard "origin/$CONFIG_REPO_BRANCH"
|
|
else
|
|
git clone --depth=1 --branch "$CONFIG_REPO_BRANCH" "$CONFIG_REPO_URL" "$CONFIG_DIR"
|
|
fi
|
|
|
|
if [ ! -f "$PACKAGES_FILE" ]; then
|
|
echo "[sync] FEHLER: $PACKAGES_FILE nicht gefunden."
|
|
exit 1
|
|
fi
|
|
|
|
mkdir -p "$DEST"
|
|
|
|
# --- 2. Pro Quelle: temporaeres Repo aktivieren, Pakete gezielt ziehen --
|
|
source_count=$(yq -o=json '.sources | length' "$PACKAGES_FILE")
|
|
|
|
for i in $(seq 0 $((source_count - 1))); do
|
|
src=$(yq -o=json ".sources[$i]" "$PACKAGES_FILE")
|
|
name=$(echo "$src" | jq -r '.name')
|
|
baseurl=$(echo "$src" | jq -r '.baseurl')
|
|
gpgkey=$(echo "$src" | jq -r '.gpgkey // empty')
|
|
|
|
# Paketeintraege koennen Strings ODER Mappings mit Metadaten sein.
|
|
mapfile -t packages < <(
|
|
echo "$src" | jq -r '.packages[] | if type == "string" then . else .name end'
|
|
)
|
|
|
|
if [ "${#packages[@]}" -eq 0 ]; then
|
|
echo "[sync] Quelle '$name': keine Pakete gelistet, ueberspringe."
|
|
continue
|
|
fi
|
|
|
|
echo "[sync] Quelle '$name': ${#packages[@]} Paket(e) -> $baseurl"
|
|
|
|
repofile="$TMP_REPO_DIR/tmp-${name}.repo"
|
|
{
|
|
echo "[tmp-${name}]"
|
|
echo "name=${name}"
|
|
echo "baseurl=${baseurl}"
|
|
echo "enabled=1"
|
|
if [ -n "$gpgkey" ]; then
|
|
echo "gpgcheck=1"
|
|
echo "gpgkey=${gpgkey}"
|
|
else
|
|
echo "gpgcheck=0"
|
|
fi
|
|
} > "$repofile"
|
|
|
|
# Bei Fehlschlag (z.B. Paket nicht gefunden) diese Quelle nicht den
|
|
# gesamten Lauf abbrechen lassen, aber laut melden.
|
|
if ! dnf download --resolve --alldeps \
|
|
--disablerepo='*' --enablerepo="tmp-${name}" \
|
|
--destdir="$DEST" "${packages[@]}"; then
|
|
echo "[sync] WARNUNG: Download fuer Quelle '$name' teilweise fehlgeschlagen."
|
|
fi
|
|
|
|
rm -f "$repofile"
|
|
done
|
|
|
|
# --- 3. Alte Paketversionen aufraeumen -----------------------------------
|
|
echo "[sync] Raeume veraltete Paketversionen auf"
|
|
dnf repomanage --old "$DEST" | xargs -r rm -f || \
|
|
echo "[sync] WARNUNG: repomanage fehlgeschlagen, ueberspringe Aufraeumen."
|
|
|
|
# --- 4. RPM-Metadaten neu erzeugen ---------------------------------------
|
|
echo "[sync] Aktualisiere Repo-Metadaten"
|
|
createrepo_c --update "$DEST"
|
|
|
|
# --- 5. AppStream-Katalog erzeugen und einhaengen -------------------------
|
|
# Ohne diesen Schritt sind die Pakete zwar per dnf installierbar, tauchen
|
|
# aber weder in Discover noch in GNOME Software auf.
|
|
echo "[sync] Erzeuge AppStream-Katalog"
|
|
|
|
ASWORK=$(mktemp -d)
|
|
trap 'rm -rf "$ASWORK"' EXIT
|
|
|
|
# Welche Pakete liegen tatsaechlich im Repo? Verhindert, dass Discover
|
|
# Eintraege anzeigt, deren RPM gar nicht da ist.
|
|
if compgen -G "$DEST"/*.rpm > /dev/null; then
|
|
rpm -qp --qf '%{NAME}\n' "$DEST"/*.rpm 2>/dev/null \
|
|
| sort -u > "$ASWORK/vorhanden.txt"
|
|
else
|
|
echo "[sync] WARNUNG: Keine RPMs in $DEST gefunden."
|
|
: > "$ASWORK/vorhanden.txt"
|
|
fi
|
|
|
|
python3 "$APPSTREAM_GEN" "$PACKAGES_FILE" \
|
|
--output "$ASWORK/appstream.xml.gz" \
|
|
--available-packages "$ASWORK/vorhanden.txt"
|
|
|
|
# Optionale Validierung, falls appstreamcli im Image vorhanden ist.
|
|
if command -v appstreamcli > /dev/null 2>&1; then
|
|
if ! appstreamcli validate --no-net "$ASWORK/appstream.xml.gz"; then
|
|
echo "[sync] WARNUNG: AppStream-Katalog hat Validierungshinweise."
|
|
fi
|
|
fi
|
|
|
|
# modifyrepo_c MUSS nach createrepo_c laufen, da createrepo_c die
|
|
# repomd.xml komplett neu schreibt.
|
|
modifyrepo_c --mdtype=appstream "$ASWORK/appstream.xml.gz" "$DEST/repodata/"
|
|
|
|
echo "[sync] $(date -Iseconds) Sync-Lauf abgeschlossen" |