source: client/shared/scripts/createDiffImage @ 5ccac26

918-git-images-111dconfigfileconfigure-oglivegit-imageslgromero-new-oglivemainmaint-cronmount-efivarfsmultivmmultivm-ogboot-installerogClonningEngineogboot-installer-jenkinsoglive-ipv6test-python-scriptsticket-301ticket-50ticket-50-oldticket-577ticket-585ticket-611ticket-612ticket-693ticket-700ubu24tplunification2use-local-agent-oglivevarios-instalacionwebconsole3
Last change on this file since 5ccac26 was cd1f048, checked in by irina <irinagomez@…>, 12 years ago

#565 optimiza tamaño de las imágenes

git-svn-id: https://opengnsys.es/svn/branches/version1.0@3808 a21b9725-9963-47de-94b9-378ad31fedc9

  • Property mode set to 100755
File size: 8.3 KB
Line 
1#!/bin/bash
2
3#/**
4#         createDiffImage
5#@brief   Script de ejemplo para crear una imagen diferencial de un sistema de archivos.
6#@brief (puede usarse como base para el programa de creación de imágenes usado por OpenGnSys Admin).
7#@param 1 disco
8#@param 2 particion
9#@param 3 REPO|CACHE
10#@param 4 imagen_completa
11#@param 5 imagen_diferencial
12#@return 
13#@exception OG_ERR_FORMAT     # 1 formato incorrecto.
14#@exception OG_ERR_PARTITION  # 3 Error en partición de disco o en su sistema de archivos
15#@exception OG_ERR_NOTFOUND   # Fichero de registro no encontrado.
16#@exception OG_ERR_IMAGE      # 5 Error en funcion ogCreateImage o ogRestoreImage.
17#@exception OG_ERR_NOTWRITE   # 14 error de escritura
18#@exception OG_ERR_NOTCACHE   # 15 si cache no existe 15
19#@exception OG_ERR_CACHESIZE  # 16 si espacio de la cache local o remota no tiene espacio 16
20#@exception OG_ERR_LOCKED          # 4 Partición o fichero bloqueado.
21#@exception OG_ERR_DONTMOUNT_IMAGE # 70 Error al montar una imagen sincronizada.
22#@exception OG_ERR_DONTSYNC_IMAGE  # 71 Imagen no sincronizable (es monolitica)
23#@note  Se toma como punto de partida el script createImage.
24#@todo: que hacer, si el tamaño de la cache es sufciente, pero no tiene espacio libre
25#@version 1.0 - creacion de la diferencial con rsync y btrfs
26#@author 
27#@date   2012-12-04
28#*/ ##
29trap "onexit $1 $2 $3 \"$4\" \"$5\"" 1 2 3 6 9 14 15 ERR
30function onexit() {
31    local exit_status=$?
32    ogUnmountImage $3 "$5" $DIFFEXT &>/dev/null
33    ogUnmountImage $3 "$4" $IMGEXT &>/dev/null
34    # Si la partición/imagen no estaba bloqueada -> la desbloqueo
35    if [ $exit_status -ne 4 ]; then
36        ogUnlockImage "$3" "/$4.$IMGEXT" &>/dev/null
37        ogUnlockImage "$3" "/$5.$DIFFEXT" &>/dev/null
38        ogUnlock $1 $2 &>/dev/null
39    fi
40    exit $exit_status
41}
42
43# Establecemos factor de compresion
44COMPRESS=90/100
45COMPRESSLINUX=70/100
46
47#Carga el configurador del engine desde el fichero engine.cfg
48[ -z $OGENGINECONFIGURATE ] &&  source /opt/opengnsys/etc/engine.cfg
49
50# Factor de calculo de Time out al crear imagen: valor por defecto en engine.cfg
51CREATESPEED=${CREATESPEED:-"100000*4"}
52
53TIME1=$SECONDS
54
55PROG="$(basename $0)"
56# Si se solicita, mostrar ayuda.
57if [ "$*" == "help" ]; then
58    ogHelp  "$PROG: $MSG_HELP_createDiffImage" \
59            "$PROG ndisco nparticion REPO|CACHE base_image diff_image" \
60            "$PROG 1 1 REPO Windows7 Win7aula23"
61   exit 0
62fi
63
64[ $# -lt 5 ] && ogRaiseError $OG_ERR_FORMAT "$MSG_FORMAT: $PROG ndisco nparticion REPO|CACHE base_image diff_image"
65
66# Valores por defecto en etc/engine.cfg
67IMGEXT="img"
68DIFFEXT="diff"
69
70echo "[1] $MSG_SCRIPTS_START $0 $*" | tee -a $OGLOGSESSION $OGLOGFILE
71
72# Comprobamos si la imagen diferencial o la particion estan bloqueada:
73ogIsImageLocked "$3" "$5.$DIFFEXT" && ogRaiseError $OG_ERR_LOCKED "$3 $5.$DIFFEXT"
74ogIsLocked "$1" "$2" && ogRaiseError $OG_ERR_LOCKED  "$1 $2"
75
76# Comprobar si la imagen completa existe.
77IMGFILE=$(ogGetPath "$3" "$4.$IMGEXT") || ogRaiseError $OG_ERR_NOTFOUND "$3 $4.$IMGEXT"
78
79# Comprobar que la imagen completa es sincronizable
80file $IMGFILE | grep " BTRFS Filesystem" >/dev/null || ogRaiseError $OG_ERR_DONTSYNC_IMAGE "$3 $4"
81# Comprobar que no está bloqueada
82ogIsImageLocked "$3" "$4.$IMGEXT" && ogRaiseError $OG_ERR_LOCKED "$3 $4.$IMGEXT"
83
84echo " " > $OGLOGCOMMAND
85# Si el repositorio es CACHE comprobamos que exista
86if [ "$3" == "CACHE" -o "$3" == "cache" ]; then
87        ! ogFindCache >/dev/null && ogRaiseError $OG_ERR_NOTCACHE "CACHE "
88fi
89
90echo " " > $OGLOGCOMMAND
91
92# Obtener información de los parámetros de entrada.
93PART=$(ogDiskToDev "$1" "$2" 2>/dev/null) || ogRaiseError $OG_ERR_PARTITION "$1 $2"
94#Comprobamos que la partición se puede montar.
95ORIG=$(ogMount $1 $2) ||  ogRaiseError $OG_ERR_PARTITION "$1 $2"
96
97#Comprobamos acceso de escritura.
98DIRTEMP=$(date +%Y%m%d-%H%M%S)
99ogMakeDir $3 /$4$DIRTEMP 2>/dev/null || ogRaiseError $OG_ERR_NOTWRITE "$3" && ogDeleteTree $3 /$4$DIRTEMP
100DIFFDIR="$(ogGetParentPath "$3" "/$5")"
101DIFFFILE="$DIFFDIR/$5.$DIFFEXT"
102
103ogLockImage "$3"  "/$4.$IMGEXT"
104ogLockImage "$3"  "/$5.$DIFFEXT"
105LOOPDEVICE=$(losetup -f)
106
107# Comprobar consistencia del sistema de archivos.
108echo " " > $OGLOGCOMMAND
109SIZEFS=$(ogGetFsSize  $1 $2)
110echo "[20] $MSG_HELP_ogCheckFs  $1 $2 $SIZEFS (KB) " | tee -a $OGLOGSESSION $OGLOGFILE
111ogUnmount $1 $2
112ogCheckFs $1 $2 >$OGLOGCOMMAND || ogRaiseError $OG_ERR_PARTITION "ogCheckFs $1 $2"
113
114TIMEAUX1=$[SECONDS-TIME1]
115echo "      $MSG_SCRIPTS_TASK_END, $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX1/60]m $[TIMEAUX1%60]s" | tee -a $OGLOGSESSION $OGLOGFILE
116
117# Borramos ficheros de paginacion y configuracion
118case "$(ogGetFsType $1 $2)" in
119    EXT[234])
120        ogCleanLinuxDevices $1 $2
121        rm -rf $ORIG/tmp/*
122        COMPRESS=$COMPRESSLINUX
123        ;;
124    NTFS)
125        ogDeleteFile $1 $2 pagefile.sys
126        ogDeleteFile $1 $2 hiberfil.sys
127        ;;
128esac
129
130# Crear la imagen.
131echo " " > $OGLOGCOMMAND
132TIME2=$SECONDS
133echo "[40] $MSG_HELP_createDiffImage: $1 $2 $3 $4" | tee -a $OGLOGSESSION $OGLOGFILE
134# Creamos la lista del contenido y lo situamos en la particion a copiar.
135FSTYPE=$(ogGetFsType $1 $2)
136
137IMGDIRAUX=$(ogGetMountDir "$4" $IMGEXT)
138
139# Montamos imagen completa (con la que vamos a comparar)
140ogMountImage $3 "$4" $IMGEXT >/dev/null
141
142# Comprobar que la imagen completa se ha montado
143ogWaitMountImage $3 "$4" $IMGEXT || ogRaiseError $OG_ERR_DONTMOUNT_IMAGE "$3 $4 $IMGEXT: time_out."
144
145# Creamos la informacion de la imagen.
146echo "[50] $MSG_HELP_ogCreateInfoImage " | tee -a $OGLOGSESSION $OGLOGFILE
147ogCreateInfoImage $1 $2 $3 "$4" "$DIFFEXT"
148TIMEAUX3=$[SECONDS-TIME2]
149echo "      $MSG_SCRIPTS_TASK_END $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX3/60]m $[TIMEAUX3%60]s" | tee -a $OGLOGSESSION $OGLOGFILE
150#Calculamos el tamaño de la imagen:
151ogMount $1 $2 >/dev/null
152ogLock $1 $2
153
154echo -n "     $MSG_SCRIPTS_CREATE_SIZE" | tee -a $OGLOGSESSION $OGLOGFILE
155cd $ORIG
156SIZEDATA=$(cat /tmp/ogimg.info | tr '\n' '\0'| du -c --files0-from=- 2>/dev/null|tail -n1 |cut -f1)
157let SIZEREQUIRED=$SIZEDATA*$COMPRESS
158# Tamaño minimo fichero imagen 300000
159[ $SIZEREQUIRED -lt 300000 ] && SIZEREQUIRED=300000
160TIMEAUX4=$[SECONDS-TIMEAUX3]
161
162# Comprueba que quepa en el repositorio
163[ "$3" == "CACHE" -o "$3" == "cache" ] && SIZEFREE=$(ogGetFreeSize `ogFindCache`) && ogMountCache >/dev/null
164[ "$3" == "REPO"  -o "$3" == "repo"  ] && SIZEFREE=$(df -k | grep $OGIMG | awk '{print $4}')
165echo  " $SIZEREQUIRED $SIZEFREE" | tee -a $OGLOGSESSION $OGLOGFILE
166
167[ $SIZEREQUIRED -gt $SIZEFREE ] && ogRaiseError $OG_ERR_CACHESIZE "$3"
168echo "      $MSG_SCRIPTS_TASK_END, $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX4/60]m $[TIMEAUX4%60]s" | tee -a $OGLOGSESSION $OGLOGFILE
169
170# Configuro la informacion del tamaño de los datos en /tmp/ogimg.info
171sed -i s/SIZEDATA/"$SIZEDATA"/g /tmp/ogimg.info
172
173# Creamos o redimensionamos la imagen
174echo "[60] $MSG_HELP_ogCreateFileImage."  | tee -a $OGLOGSESSION $OGLOGFILE
175ogCreateFileImage $3 "$5" $DIFFEXT $SIZEREQUIRED
176
177# Esperamos que se monte la imagen despues de crarla en el servidor
178ogWaitMountImage "$3" "$5" "$DIFFEXT" $SIZEREQUIRED  || ogRaiseError $OG_ERR_DONTMOUNT_IMAGE "$3 $5 $DIFFEXT: time_out."
179TIMEAUX6=$[SECONDS-TIMEAUX5]
180echo  -e "      $MSG_SCRIPTS_TASK_END, $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX6/60]m $[TIMEAUX6%60]s" | tee -a $OGLOGSESSION $OGLOGFILE
181
182echo  "[80] $MSG_HELP_ogSyncCreate" | tee -a $OGLOGSESSION $OGLOGFILE
183# Copio los datos a la imagen diferecial :
184ogSyncCreate $1 $2 $3 "$5" $DIFFEXT
185
186# Reducimos la imagen diferencial
187echo "[90] $MSG_HELP_ogReduceImage: $3 /$4.$IMGEXT" | tee -a $OGLOGSESSION $OGLOGFILE
188ogReduceImage  $3 "$5" $DIFFEXT
189ogUnmountImage $3 "$4" $IMGEXT
190
191
192TIMEAUX7=$[SECONDS-TIMEAUX6]
193echo "      $MSG_SCRIPTS_TASK_END, $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX7/60]m $[TIMEAUX7%60]s" | tee -a $OGLOGSESSION $OGLOGFILE
194
195
196TIMEAUX8=$[SECONDS-TIME2]
197echo "      $MSG_SCRIPTS_TIME_PARTIAL : $[TIMEAUX8/60]m $[TIMEAUX8%60]s" | tee -a $OGLOGSESSION $OGLOGFILE
198
199ogUnlockImage "$3" "/$4.$IMGEXT"
200ogUnlockImage "$3" "/$5.$DIFFEXT"
201ogUnlock $1 $2
202
203# Comprobamos que la imagen esta bien
204file "$DIFFFILE" |grep "BTRFS Filesystem" >/dev/null ||  ogRaiseError $OG_ERR_IMAGE "$3 $4"
205
206#resumen de la operacion
207IMGSIZE=$(ls -s ${DIFFFILE[CACHE]}| cut -f1 -d" ")
208TIME=$[SECONDS-TIME1]
209echo "[100] $MSG_SCRIPTS_TIME_TOTAL $[TIME/60]m $[TIME%60]s" | tee -a $OGLOGSESSION $OGLOGFILE
210echo "      FileSystem $PART with $SIZEDATA KB data created onto file-image as $4 and used $IMGSIZE KB acros DFS rsync " | tee -a $OGLOGSESSION $OGLOGFILE
Note: See TracBrowser for help on using the repository browser.