source: client/shared/scripts/createDiffImage @ 0b91489

918-git-images-111dconfigfileconfigure-oglivegit-imageslgromero-new-oglivemainmaint-cronmount-efivarfsmultivmmultivm-ogboot-installerogClonningEngineogboot-installer-jenkinsoglive-ipv6test-python-scriptsticket-301ticket-50ticket-50-oldticket-577ticket-585ticket-611ticket-612ticket-693ticket-700ubu24tplunification2use-local-agent-oglivevarios-instalacionwebconsole3
Last change on this file since 0b91489 was 0b91489, checked in by irina <irinagomez@…>, 11 years ago

#565 Se controla el error en la transferencia de rsync y se muestra aviso

git-svn-id: https://opengnsys.es/svn/branches/version1.0@4195 a21b9725-9963-47de-94b9-378ad31fedc9

  • Property mode set to 100755
File size: 8.8 KB
Line 
1#!/bin/bash
2
3#/**
4#         createDiffImage
5#@brief   Script de ejemplo para crear una imagen diferencial de un sistema de archivos.
6#@brief (puede usarse como base para el programa de creación de imágenes usado por OpenGnSys Admin).
7#@param 1 disco
8#@param 2 particion
9#@param 3 REPO|CACHE
10#@param 4 imagen_completa
11#@param 5 imagen_diferencial
12#@return 
13#@exception OG_ERR_FORMAT     # 1 formato incorrecto.
14#@exception OG_ERR_PARTITION  # 3 Error en partición de disco o en su sistema de archivos
15#@exception OG_ERR_NOTFOUND   # Fichero de registro no encontrado.
16#@exception OG_ERR_IMAGE      # 5 Error en funcion ogCreateImage o ogRestoreImage.
17#@exception OG_ERR_NOTWRITE   # 14 error de escritura
18#@exception OG_ERR_NOTCACHE   # 15 si cache no existe 15
19#@exception OG_ERR_CACHESIZE  # 16 si espacio de la cache local o remota no tiene espacio 16
20#@exception OG_ERR_LOCKED          # 4 Partición o fichero bloqueado.
21#@exception OG_ERR_DONTMOUNT_IMAGE # 70 Error al montar una imagen sincronizada.
22#@exception OG_ERR_DONTSYNC_IMAGE  # 71 Imagen no sincronizable (es monolitica)
23#@note  Se toma como punto de partida el script createImage.
24#@todo: que hacer, si el tamaño de la cache es sufciente, pero no tiene espacio libre
25#@version 1.0 - creacion de la diferencial con rsync y btrfs
26#@author 
27#@date   2012-12-04
28#*/ ##
29trap "onexit $1 $2 $3 \"$4\" \"$5\"" 1 2 3 6 9 14 15 EXIT
30
31function onexit() {
32    local exit_status=$?
33    ogUnmountImage $3 "$5" $DIFFTYPE &>/dev/null
34    ogUnmountImage $3 "$4" $IMGEXT &>/dev/null
35    if [ $exit_status -ne 4 ]; then
36        if [ "$3" == "CACHE" -o "$3" == "cache" ]; then
37                ogUnlockImage "$3" "/$4.$IMGEXT" &>/dev/null
38                ogUnlockImage "$3" "/$5.$DIFFEXT" &>/dev/null
39        else
40                hose $REPOIP 2009 --out sh -c "echo -ne UNLOCK_IMAGE \"$4.$IMGEXT\" "
41                hose $REPOIP 2009 --out sh -c "echo -ne UNLOCK_IMAGE \"$5.$DIFFEXT\" "
42        fi
43        ogUnlock $1 $2 &>/dev/null
44    fi
45    exit $exit_status
46}
47
48#Carga el configurador del engine desde el fichero engine.cfg
49[ -z $OGENGINECONFIGURATE ] &&  source /opt/opengnsys/etc/engine.cfg
50
51# Factor de calculo de Time out al crear imagen: valor por defecto en engine.cfg
52CREATESPEED=${CREATESPEED:-"100000*4"}
53# Sistema de fichero de la imagen según kernel, menor que 3.7 EXT4. comparamos revision
54[  $(uname -r|cut -d. -f2) -lt 7 ] &&  IMGFS="EXT4" || IMGFS="BTRFS"
55# % de compresion para estimacion tamaño imagen IMGFS="EXT4"
56ZSYNC=${ZSYNC:-"120"}
57# Si IMGFS="BTRFS" la compresion es mayor.
58[ $IMGFS == "BTRFS" ] && let ZSYNC=$ZSYNC-30
59
60TIME1=$SECONDS
61
62PROG="$(basename $0)"
63# Si se solicita, mostrar ayuda.
64if [ "$*" == "help" ]; then
65    ogHelp  "$PROG: $MSG_HELP_createDiffImage" \
66            "$PROG ndisco nparticion REPO|CACHE base_image diff_image" \
67            "$PROG 1 1 REPO Windows7 Win7aula23"
68   exit 0
69fi
70
71[ $# -lt 5 ] && exit $(ogRaiseError session $OG_ERR_FORMAT "$MSG_FORMAT: $PROG ndisco nparticion REPO|CACHE base_image diff_image"; echo $?)
72
73# Valores por defecto en etc/engine.cfg
74IMGEXT="img"
75DIFFEXT="img.diff"
76DIFFTYPE="diff"
77REPOIP=$(ogGetRepoIp)
78
79# Limpiamos los archivo de log
80echo -n "" >$OGLOGCOMMAND
81[ "$(ogGetCaller)" == "RestaurarSoftIncremental" ] ||  echo -n "" > $OGLOGSESSION
82
83ogEcho log session  "[1] $MSG_SCRIPTS_START $0 $*"
84
85# Comprobamos si la imagen diferencial o la particion estan bloqueada:
86ogIsImageLocked "$3" "$5.$DIFFEXT" && exit $(ogRaiseError session $OG_ERR_LOCKED "$3 $5.$DIFFEXT"; echo $?)
87ogIsLocked "$1" "$2" && exit $(ogRaiseError session $OG_ERR_LOCKED  "$1 $2"; echo $?)
88
89# Comprobar si la imagen completa existe.
90IMGFILE="$(ogGetPath "$3" "$4.$IMGEXT")" || exit $(ogRaiseError session $OG_ERR_NOTFOUND "$3 $4.$IMGEXT"; echo $?)
91
92# Comprobar que la imagen completa es sincronizable
93ogIsSyncImage "$3" "$4" "img" || exit $(ogRaiseError session $OG_ERR_DONTSYNC_IMAGE "$3 $4"; echo $?)
94# Comprobar que no está bloqueada
95ogIsImageLocked "$3" "$4.$IMGEXT" && exit $(ogRaiseError session $OG_ERR_LOCKED "$3 $4.$IMGEXT"; echo $?)
96
97# Si el repositorio es CACHE comprobamos que exista
98if [ "$3" == "CACHE" -o "$3" == "cache" ]; then
99        ! ogFindCache >/dev/null && exit $(ogRaiseError session $OG_ERR_NOTCACHE "CACHE "; echo $?)
100fi
101
102echo " " > $OGLOGCOMMAND
103
104# Obtener información de los parámetros de entrada.
105PART=$(ogDiskToDev "$1" "$2" 2>/dev/null) || exit $(ogRaiseError session $OG_ERR_PARTITION "$1 $2"; echo $?)
106#Comprobamos que la partición se puede montar.
107ORIG=$(ogMount $1 $2) ||   exit $(ogRaiseError session $OG_ERR_PARTITION "$1 $2"; echo $?)
108
109DIFFDIR="$(ogGetParentPath "$3" "/$5")"
110DIFFFILE="$DIFFDIR/$5.$DIFFEXT"
111
112if [ "$3" == "CACHE" -o "$3" == "cache" ]; then
113        ogLockImage "$3"  "/$4.$IMGEXT"
114        ogLockImage "$3"  "/$5.$DIFFEXT"
115else
116        hose $REPOIP 2009 --out sh -c "echo -ne LOCK_IMAGE \"$4.$IMGEXT\" "
117        hose $REPOIP 2009 --out sh -c "echo -ne LOCK_IMAGE \"$5.$DIFFEXT\" "
118fi
119
120# Comprobar consistencia del sistema de archivos.
121echo " " > $OGLOGCOMMAND
122SIZEFS=$(ogGetFsSize  $1 $2)
123ogEcho log session "[20] $MSG_HELP_ogCheckFs  $1 $2 $SIZEFS (KB) "
124ogUnmount $1 $2
125ogCheckFs $1 $2 >$OGLOGCOMMAND || exit $(ogRaiseError session $OG_ERR_PARTITION "ogCheckFs $1 $2" ; echo $?)
126
127# Borramos ficheros de paginacion y configuracion
128FSTYPE=$(ogGetFsType $1 $2)
129case "$FSTYPE" in
130    EXT[234])
131        ogCleanLinuxDevices $1 $2
132        rm -rf $ORIG/tmp/*
133        ;;
134    NTFS)
135        [ $(ogGetPath $1 $2 pagefile.sys) ] && ogDeleteFile $1 $2 pagefile.sys
136        [ $(ogGetPath $1 $2 hiberfil.sys) ] && ogDeleteFile $1 $2 hiberfil.sys
137        [ $(ogGetPath $1 $2 swapfile.sys) ] && ogDeleteFile $1 $2 swapfile.sys
138        ;;
139esac
140
141# Crear la imagen.
142echo " " > $OGLOGCOMMAND
143TIME2=$SECONDS
144ogEcho log session "[40] $MSG_HELP_createDiffImage: $1 $2 $3 $4"
145# Creamos la lista del contenido y lo situamos en la particion a copiar.
146
147# Montamos imagen completa (con la que vamos a comparar)
148ogMountImage $3 "$4" $IMGEXT >/dev/null
149
150# Comprobar que la imagen completa se ha montado
151ogWaitMountImage $3 "$4" $IMGEXT || exit $(ogRaiseError session $OG_ERR_DONTMOUNT_IMAGE "$3 $4 $IMGEXT: time_out."; echo $?)
152
153# Creamos la informacion de la imagen.
154ogEcho log session "[50] $MSG_HELP_ogCreateInfoImage "
155ogCreateInfoImage $1 $2 $3 "$4" "${DIFFTYPE}"
156
157#Calculamos el tamaño de la imagen:
158ogMount $1 $2 >/dev/null
159ogLock $1 $2
160ogEcho log session  "     $MSG_SCRIPTS_CREATE_SIZE"
161cd $ORIG
162SIZEDATA=$(grep -v "\/$" /tmp/ogimg.info | tr '\n' '\0'| du -x -c --files0-from=- 2>/dev/null|tail -n1 |cut -f1)
163let SIZEREQUIRED=$SIZEDATA*$ZSYNC/100
164# Tamaño minimo fichero imagen 300000
165[ $SIZEREQUIRED -lt 300000 ] && SIZEREQUIRED=300000
166
167# Comprueba que quepa en el repositorio
168[ "$3" == "CACHE" -o "$3" == "cache" ] && SIZEFREE=$(ogGetFreeSize `ogFindCache`) && ogMountCache >/dev/null
169[ "$3" == "REPO"  -o "$3" == "repo"  ] && SIZEFREE=$(df -k | grep $OGIMG | awk '{print $4}')
170ogEcho log session  "      $SIZEREQUIRED $SIZEFREE"
171[ $SIZEREQUIRED -gt $SIZEFREE ] && exit $(ogRaiseError session $OG_ERR_CACHESIZE "$3"; echo $?)
172
173TIMEAUX3=$[SECONDS-TIME2]
174ogEcho log session "      $MSG_SCRIPTS_TASK_END $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX3/60]m $[TIMEAUX3%60]s"
175
176# Del fichero de acl de la partición extraemos las acl de los ficheros de la diferencial
177if [ "$FSTYPE" == "NTFS" ]; then
178        ogEcho log session "[55] $MSG_HELP_ogAclFilter "
179        ogAclFilter
180        TIMEAUX4=$[SECONDS-TIMEAUX3]
181        ogEcho log session "      $MSG_SCRIPTS_TASK_END $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX4/60]m $[TIMEAUX4%60]s"
182fi
183TIMEAUX5=$[SECONDS-TIMEAUX3]
184
185# Configuro la informacion del tamaño de los datos en /tmp/ogimg.info
186sed -i s/SIZEDATA/"$SIZEDATA"/g /tmp/ogimg.info
187
188# Creamos o redimensionamos la imagen
189ogEcho log session "[60] $MSG_HELP_ogCreateFileImage."
190ogCreateFileImage $3 "$5" $DIFFTYPE $SIZEREQUIRED
191
192# Esperamos que se monte la imagen despues de crarla en el servidor
193ogWaitMountImage "$3" "$5" "$DIFFTYPE" $SIZEREQUIRED  || exit $(ogRaiseError session $OG_ERR_DONTMOUNT_IMAGE "$3 $5 $DIFFTYPE: time_out."; echo $?)
194
195ogEcho log session  "[70] $MSG_HELP_ogSyncCreate"
196# Copio los datos a la imagen diferecial :
197ogSyncCreate $1 $2 $3 "$5" $DIFFTYPE
198[ $? == 0 ] || ogEcho session warning "$MSG_ERR_SYNCHRONIZING"
199TIMEAUX6=$[SECONDS-TIMEAUX5]
200ogEcho log session   "      $MSG_SCRIPTS_TASK_END, $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX6/60]m $[TIMEAUX6%60]s"
201
202# Reducimos la imagen diferencial -> solo para kernel <= 3.7, imagenes con FS ext4
203ogEcho log session "[80] $MSG_HELP_ogReduceImage: $3 /$4.$IMGEXT"
204ogReduceImage  $3 "$5" $DIFFTYPE
205sleep 10
206
207echo " " > $OGLOGCOMMAND
208# Comprobamos que la imagen esta bien
209ogEcho log session "[95] $MSG_HELP_ogCheckSyncImage"
210ogCheckSyncImage $3 "$5" diff ||  exit $(ogRaiseError session $OG_ERR_IMAGE "$3 $5 diff"; echo $?)
211
212#resumen de la operacion
213IMGSIZE=$(ls -l --block-size=1024 "${DIFFFILE}"| cut -f5 -d" ")
214TIME=$[SECONDS-TIME1]
215ogEcho log session "[100] $MSG_SCRIPTS_TIME_TOTAL $[TIME/60]m $[TIME%60]s"
216ogEcho log session "      FileSystem $PART with $SIZEDATA KB data created onto file-image as $5 and used $IMGSIZE KB acros DFS rsync "
Note: See TracBrowser for help on using the repository browser.