Suppression éclairage solaire, GPU accéléré, --file multi, tests unitaires
- Suppression de generate_solar (éclairage solaire) des visualisations - Accélération GPU de hillshade, slope, aspect, curvature, depressions, anomalies, roughness, texture GLCM, flow (sink filling) - Nettoyage mémoire GPU entre visualisations (gpu_cleanup) - Correction OOM texture GLCM: calcul entropie bin par bin au lieu d'un tableau 3D massif sur GPU - Correction bug: xp_minimum_filter manquant dans imports visualizations - Option --file accepte plusieurs noms complets sans extension - run.sh affiche l'aide si appelé sans arguments - Option --test pour exécuter les tests unitaires dans Docker - Filtre ReturnNumber>=1 intégré dans le pipeline PDAL (plus d'erreur SMRF) - 60 tests unitaires: GPU, visualisations, rendering, DTM, pipeline, CLI - Ajout pytest au Dockerfile Co-Authored-By: Claude Opus 4.6 <noreply@anthropic.com>
This commit is contained in:
Jacquin Antoine
93
run.sh
93
run.sh
@ -9,11 +9,39 @@
|
||||
# -v Mode verbeux (timestamps + niveaux)
|
||||
# --debug Mode debug (détails internes fichier:ligne)
|
||||
# -f / --force Régénérer tous les fichiers même si existants
|
||||
# --file NOM Traiter un seul fichier LAZ (pour tests)
|
||||
# --file NOM... Traiter un ou plusieurs fichiers LAZ spécifiques
|
||||
# --test Exécuter les tests unitaires
|
||||
# -h Afficher l'aide complète
|
||||
|
||||
set -e
|
||||
|
||||
# Afficher l'aide si aucun argument
|
||||
if [ $# -eq 0 ]; then
|
||||
echo "Pipeline LiDAR Archéologique"
|
||||
echo ""
|
||||
echo "Usage: $0 [options]"
|
||||
echo ""
|
||||
echo " -r RESOLUTION Résolution en m/px (défaut: 0.5)"
|
||||
echo " -w WORKERS Nombre de workers CPU parallèles (défaut: 1)"
|
||||
echo " -g Activer l'accélération GPU NVIDIA"
|
||||
echo " -v Mode verbeux (timestamps + niveaux)"
|
||||
echo " --debug Mode debug (détails internes fichier:ligne)"
|
||||
echo " -f / --force Régénérer tous les fichiers même si les WebP existent"
|
||||
echo " --file NOM... Traiter un ou plusieurs fichiers LAZ (nom complet sans .laz/.las)"
|
||||
echo " --test Exécuter les tests unitaires"
|
||||
echo " -h Afficher cette aide"
|
||||
echo ""
|
||||
echo "Exemples:"
|
||||
echo " $0 -g # Avec accélération GPU"
|
||||
echo " $0 -g -w 4 # GPU + 4 workers parallèles"
|
||||
echo " $0 -g -v # GPU + mode verbeux"
|
||||
echo " $0 -r 0.2 -g --debug # Haute résolution + GPU + debug"
|
||||
echo " $0 -f # Forcer la régénération de tous les fichiers"
|
||||
echo " $0 --file LHD_FXX_1000_6882_PTS_LAMB93_IGN69.copc # Un fichier"
|
||||
echo " $0 --file LHD_...6881.copc LHD_...6882.copc # Plusieurs fichiers"
|
||||
exit 0
|
||||
fi
|
||||
|
||||
SCRIPT_DIR="$(cd "$(dirname "$0")" && pwd)"
|
||||
INPUT_DIR="${SCRIPT_DIR}/input"
|
||||
OUTPUT_DIR="${SCRIPT_DIR}/output"
|
||||
@ -23,7 +51,7 @@ WORKERS=1
|
||||
GPU_FLAG=""
|
||||
VERBOSE_FLAG=""
|
||||
FORCE_FLAG=""
|
||||
FILE_FILTER=""
|
||||
FILE_ARGS=""
|
||||
|
||||
while getopts "r:w:gvf-:" opt; do
|
||||
case $opt in
|
||||
@ -51,27 +79,58 @@ while getopts "r:w:gvf-:" opt; do
|
||||
echo " -v Mode verbeux (timestamps + niveaux)"
|
||||
echo " --debug Mode debug (détails internes fichier:ligne)"
|
||||
echo " -f / --force Régénérer tous les fichiers même si les WebP existent"
|
||||
echo " --file NOM Traiter un seul fichier LAZ (pour tests)"
|
||||
echo " --file NOM... Traiter un ou plusieurs fichiers LAZ (nom complet sans .laz/.las)"
|
||||
echo " -h Afficher cette aide"
|
||||
echo ""
|
||||
echo "Exemples:"
|
||||
echo " $0 # Traitement standard"
|
||||
echo " $0 -g # Avec accélération GPU"
|
||||
echo " $0 -g -w 4 # GPU + 4 workers parallèles"
|
||||
echo " $0 -g -v # GPU + mode verbeux"
|
||||
echo " $0 -r 0.2 -g --debug # Haute résolution + GPU + debug"
|
||||
echo " $0 -f # Forcer la régénération de tous les fichiers"
|
||||
echo " $0 --file 6881 # Traiter un seul fichier (pour tests)"
|
||||
echo " $0 -g -w 4 # GPU + 4 workers parallèles"
|
||||
echo " $0 -g -v # GPU + mode verbeux"
|
||||
echo " $0 -r 0.2 -g --debug # Haute résolution + GPU + debug"
|
||||
echo " $0 -f # Forcer la régénération de tous les fichiers"
|
||||
echo " $0 --file 6881 # Traiter un seul fichier"
|
||||
echo " $0 --file 6881 6882 # Traiter deux fichiers spécifiques"
|
||||
exit 0
|
||||
;;
|
||||
*) echo "Option invalide. Utilisez -h pour l'aide." >&2; exit 1 ;;
|
||||
esac
|
||||
done
|
||||
|
||||
# Handle --file option separately (not easily done in getopts)
|
||||
if [[ " $@ " == *" --file "* ]]; then
|
||||
# Extract the argument after --file
|
||||
FILE_FILTER=$(echo "$@" | sed -n 's/.*--file *\([^ ]*\).*/\1/p')
|
||||
# Check for --test flag first
|
||||
if [[ " $* " == *" --test "* ]]; then
|
||||
# Build l'image si elle n'existe pas
|
||||
if ! docker image inspect "$IMAGE_NAME" >/dev/null 2>&1; then
|
||||
echo "Build de l'image Docker..."
|
||||
docker build -t "$IMAGE_NAME" "$SCRIPT_DIR"
|
||||
fi
|
||||
echo "============================================"
|
||||
echo " Tests unitaires LiDAR Pipeline"
|
||||
echo "============================================"
|
||||
docker run --rm $GPU_FLAG \
|
||||
"$IMAGE_NAME" \
|
||||
python3 -m pytest -v --pyargs lidar_pipeline.tests
|
||||
exit $?
|
||||
fi
|
||||
|
||||
# Collect --file arguments (everything after --file until next option)
|
||||
if [[ "$*" == *" --file "* ]] || [[ "$*" == *" --file"* && "$*" == *"--file "* ]]; then
|
||||
# Extract all arguments after --file
|
||||
PAST_FILE=false
|
||||
for arg in "$@"; do
|
||||
if [ "$arg" = "--file" ]; then
|
||||
PAST_FILE=true
|
||||
continue
|
||||
fi
|
||||
if $PAST_FILE; then
|
||||
# Stop if we hit another option
|
||||
if [[ "$arg" == -* ]]; then
|
||||
PAST_FILE=false
|
||||
else
|
||||
FILE_ARGS="$FILE_ARGS $arg"
|
||||
fi
|
||||
fi
|
||||
done
|
||||
FILE_ARGS=$(echo "$FILE_ARGS" | xargs)
|
||||
fi
|
||||
|
||||
# Build l'image si elle n'existe pas
|
||||
@ -92,14 +151,14 @@ echo " Workers : ${WORKERS}"
|
||||
echo " GPU : $([ -n "$GPU_FLAG" ] && echo 'OUI' || echo 'non')"
|
||||
echo " Verbeux : $([ -n "$VERBOSE_FLAG" ] && echo 'OUI' || echo 'non')"
|
||||
echo " Force : $([ -n "$FORCE_FLAG" ] && echo 'OUI' || echo 'non')"
|
||||
if [ -n "$FILE_FILTER" ]; then
|
||||
echo " Fichier : ${FILE_FILTER}"
|
||||
if [ -n "$FILE_ARGS" ]; then
|
||||
echo " Fichiers :${FILE_ARGS}"
|
||||
fi
|
||||
echo "============================================"
|
||||
|
||||
CMD_ARGS="-o /data/output -r $RESOLUTION -w $WORKERS $VERBOSE_FLAG $FORCE_FLAG"
|
||||
if [ -n "$FILE_FILTER" ]; then
|
||||
CMD_ARGS="$CMD_ARGS --file $FILE_FILTER"
|
||||
if [ -n "$FILE_ARGS" ]; then
|
||||
CMD_ARGS="$CMD_ARGS --file $FILE_ARGS"
|
||||
fi
|
||||
|
||||
docker run --rm $GPU_FLAG \
|
||||
|
||||
Reference in New Issue
Block a user