1 | #!/bin/bash |
---|
2 | |
---|
3 | #/** |
---|
4 | # createDiffImage |
---|
5 | #@brief Script de ejemplo para crear una imagen diferencial de un sistema de archivos. |
---|
6 | #@brief (puede usarse como base para el programa de creación de imágenes usado por OpenGnSys Admin). |
---|
7 | #@param 1 disco |
---|
8 | #@param 2 particion |
---|
9 | #@param 3 REPO|CACHE |
---|
10 | #@param 4 imagen_completa |
---|
11 | #@param 5 imagen_diferencial |
---|
12 | #@return |
---|
13 | #@exception OG_ERR_FORMAT # 1 formato incorrecto. |
---|
14 | #@exception OG_ERR_PARTITION # 3 Error en partición de disco o en su sistema de archivos |
---|
15 | #@exception OG_ERR_NOTFOUND # Fichero de registro no encontrado. |
---|
16 | #@exception OG_ERR_IMAGE # 5 Error en funcion ogCreateImage o ogRestoreImage. |
---|
17 | #@exception OG_ERR_NOTWRITE # 14 error de escritura |
---|
18 | #@exception OG_ERR_NOTCACHE # 15 si cache no existe 15 |
---|
19 | #@exception OG_ERR_CACHESIZE # 16 si espacio de la cache local o remota no tiene espacio 16 |
---|
20 | #@exception OG_ERR_LOCKED # 4 Partición o fichero bloqueado. |
---|
21 | #@exception OG_ERR_DONTMOUNT_IMAGE # 70 Error al montar una imagen sincronizada. |
---|
22 | #@exception OG_ERR_DONTSYNC_IMAGE # 71 Imagen no sincronizable (es monolitica) |
---|
23 | #@note Se toma como punto de partida el script createImage. |
---|
24 | #@todo: que hacer, si el tamaño de la cache es sufciente, pero no tiene espacio libre |
---|
25 | #@version 1.0 - creacion de la diferencial con rsync y btrfs |
---|
26 | #@author |
---|
27 | #@date 2012-12-04 |
---|
28 | #*/ ## |
---|
29 | trap "onexit $1 $2 $3 \"$4\" \"$5\"" 1 2 3 6 9 14 15 ERR |
---|
30 | |
---|
31 | function onexit() { |
---|
32 | local exit_status=$? |
---|
33 | echo -e "\n $PROG error: ${MSG_INTERFACE_END#*\]} $exit_status" |tee -a $OGLOGFILE $OGLOGSESSION |
---|
34 | ogUnmountImage $3 "$5" $DIFFTYPE &>/dev/null |
---|
35 | ogUnmountImage $3 "$4" $IMGEXT &>/dev/null |
---|
36 | if [ $exit_status -ne 4 ]; then |
---|
37 | ogUnlockImage "$3" "/$4.$IMGEXT" &>/dev/null |
---|
38 | ogUnlockImage "$3" "/$5.$DIFFEXT" &>/dev/null |
---|
39 | ogUnlock $1 $2 &>/dev/null |
---|
40 | fi |
---|
41 | exit $exit_status |
---|
42 | } |
---|
43 | |
---|
44 | #Carga el configurador del engine desde el fichero engine.cfg |
---|
45 | [ -z $OGENGINECONFIGURATE ] && source /opt/opengnsys/etc/engine.cfg |
---|
46 | |
---|
47 | # Factor de calculo de Time out al crear imagen: valor por defecto en engine.cfg |
---|
48 | CREATESPEED=${CREATESPEED:-"100000*4"} |
---|
49 | # Sistema de fichero de la imagen según kernel, menor que 3.7 EXT4. comparamos revision |
---|
50 | [ $(uname -r|cut -d. -f2) -lt 7 ] && IMGFS="EXT4" || IMGFS="BTRFS" |
---|
51 | # % de compresion para estimacion tamaño imagen IMGFS="EXT4" |
---|
52 | ZSYNC=${ZSYNC:-"120"} |
---|
53 | # Si IMGFS="BTRFS" la compresion es mayor. |
---|
54 | [ $IMGFS == "BTRFS" ] && let ZSYNC=$ZSYNC-30 |
---|
55 | |
---|
56 | |
---|
57 | TIME1=$SECONDS |
---|
58 | |
---|
59 | PROG="$(basename $0)" |
---|
60 | # Si se solicita, mostrar ayuda. |
---|
61 | if [ "$*" == "help" ]; then |
---|
62 | ogHelp "$PROG: $MSG_HELP_createDiffImage" \ |
---|
63 | "$PROG ndisco nparticion REPO|CACHE base_image diff_image" \ |
---|
64 | "$PROG 1 1 REPO Windows7 Win7aula23" |
---|
65 | exit 0 |
---|
66 | fi |
---|
67 | |
---|
68 | [ $# -lt 5 ] && ogRaiseError $OG_ERR_FORMAT "$MSG_FORMAT: $PROG ndisco nparticion REPO|CACHE base_image diff_image" |
---|
69 | |
---|
70 | # Valores por defecto en etc/engine.cfg |
---|
71 | IMGEXT="img" |
---|
72 | DIFFEXT="img.diff" |
---|
73 | DIFFTYPE="diff" |
---|
74 | |
---|
75 | # Limpiamos los archivo de log |
---|
76 | echo -n "" >$OGLOGCOMMAND |
---|
77 | [ "$(ogGetCaller)" == "RestaurarSoftIncremental" ] || echo -n "" > $OGLOGSESSION |
---|
78 | |
---|
79 | echo "[1] $MSG_SCRIPTS_START $0 $*" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
80 | |
---|
81 | # Comprobamos si la imagen diferencial o la particion estan bloqueada: |
---|
82 | ogIsImageLocked "$3" "$5.$DIFFEXT" && ogRaiseError $OG_ERR_LOCKED "$3 $5.$DIFFEXT" |
---|
83 | ogIsLocked "$1" "$2" && ogRaiseError $OG_ERR_LOCKED "$1 $2" |
---|
84 | |
---|
85 | # Comprobar si la imagen completa existe. |
---|
86 | IMGFILE="$(ogGetPath "$3" "$4.$IMGEXT")" || ogRaiseError $OG_ERR_NOTFOUND "$3 $4.$IMGEXT" |
---|
87 | |
---|
88 | # Comprobar que la imagen completa es sincronizable |
---|
89 | ogIsSyncImage "$3" "$4" "img" || ogRaiseError $OG_ERR_DONTSYNC_IMAGE "$3 $4" |
---|
90 | # Comprobar que no está bloqueada |
---|
91 | ogIsImageLocked "$3" "$4.$IMGEXT" && ogRaiseError $OG_ERR_LOCKED "$3 $4.$IMGEXT" |
---|
92 | |
---|
93 | # Si el repositorio es CACHE comprobamos que exista |
---|
94 | if [ "$3" == "CACHE" -o "$3" == "cache" ]; then |
---|
95 | ! ogFindCache >/dev/null && ogRaiseError $OG_ERR_NOTCACHE "CACHE " |
---|
96 | fi |
---|
97 | |
---|
98 | echo " " > $OGLOGCOMMAND |
---|
99 | |
---|
100 | # Obtener información de los parámetros de entrada. |
---|
101 | PART=$(ogDiskToDev "$1" "$2" 2>/dev/null) || ogRaiseError $OG_ERR_PARTITION "$1 $2" |
---|
102 | #Comprobamos que la partición se puede montar. |
---|
103 | ORIG=$(ogMount $1 $2) || ogRaiseError $OG_ERR_PARTITION "$1 $2" |
---|
104 | |
---|
105 | #Comprobamos acceso de escritura. |
---|
106 | DIRTEMP="/$4$(date +%Y%m%d-%H%M%S)" |
---|
107 | ogMakeDir $3 "$DIRTEMP" 2>/dev/null || ogRaiseError $OG_ERR_NOTWRITE "$3" && ogDeleteTree $3 "$DIRTEMP" |
---|
108 | DIFFDIR="$(ogGetParentPath "$3" "/$5")" |
---|
109 | DIFFFILE="$DIFFDIR/$5.$DIFFEXT" |
---|
110 | |
---|
111 | ogLockImage "$3" "/$4.$IMGEXT" |
---|
112 | ogLockImage "$3" "/$5.$DIFFEXT" |
---|
113 | |
---|
114 | # Comprobar consistencia del sistema de archivos. |
---|
115 | echo " " > $OGLOGCOMMAND |
---|
116 | SIZEFS=$(ogGetFsSize $1 $2) |
---|
117 | echo "[20] $MSG_HELP_ogCheckFs $1 $2 $SIZEFS (KB) " | tee -a $OGLOGSESSION $OGLOGFILE |
---|
118 | ogUnmount $1 $2 |
---|
119 | ogCheckFs $1 $2 >$OGLOGCOMMAND || ogRaiseError $OG_ERR_PARTITION "ogCheckFs $1 $2" |
---|
120 | |
---|
121 | |
---|
122 | # Borramos ficheros de paginacion y configuracion |
---|
123 | FSTYPE=$(ogGetFsType $1 $2) |
---|
124 | case "$FSTYPE" in |
---|
125 | EXT[234]) |
---|
126 | ogCleanLinuxDevices $1 $2 |
---|
127 | rm -rf $ORIG/tmp/* |
---|
128 | ;; |
---|
129 | NTFS) |
---|
130 | [ $(ogGetPath $1 $2 pagefile.sys) ] && ogDeleteFile $1 $2 pagefile.sys |
---|
131 | [ $(ogGetPath $1 $2 hiberfil.sys) ] && ogDeleteFile $1 $2 hiberfil.sys |
---|
132 | [ $(ogGetPath $1 $2 swapfile.sys) ] && ogDeleteFile $1 $2 swapfile.sys |
---|
133 | ;; |
---|
134 | esac |
---|
135 | |
---|
136 | # Crear la imagen. |
---|
137 | echo " " > $OGLOGCOMMAND |
---|
138 | TIME2=$SECONDS |
---|
139 | echo "[40] $MSG_HELP_createDiffImage: $1 $2 $3 $4" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
140 | # Creamos la lista del contenido y lo situamos en la particion a copiar. |
---|
141 | |
---|
142 | # Montamos imagen completa (con la que vamos a comparar) |
---|
143 | ogMountImage $3 "$4" $IMGEXT >/dev/null |
---|
144 | |
---|
145 | # Comprobar que la imagen completa se ha montado |
---|
146 | ogWaitMountImage $3 "$4" $IMGEXT || ogRaiseError $OG_ERR_DONTMOUNT_IMAGE "$3 $4 $IMGEXT: time_out." |
---|
147 | |
---|
148 | # Creamos la informacion de la imagen. |
---|
149 | echo "[50] $MSG_HELP_ogCreateInfoImage " | tee -a $OGLOGSESSION $OGLOGFILE |
---|
150 | ogCreateInfoImage $1 $2 $3 "$4" "${DIFFTYPE}" |
---|
151 | |
---|
152 | #Calculamos el tamaño de la imagen: |
---|
153 | ogMount $1 $2 >/dev/null |
---|
154 | ogLock $1 $2 |
---|
155 | echo -n " $MSG_SCRIPTS_CREATE_SIZE" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
156 | cd $ORIG |
---|
157 | SIZEDATA=$(grep -v "\/$" /tmp/ogimg.info | tr '\n' '\0'| du -x -c --files0-from=- 2>/dev/null|tail -n1 |cut -f1) |
---|
158 | let SIZEREQUIRED=$SIZEDATA*$ZSYNC/100 |
---|
159 | # Tamaño minimo fichero imagen 300000 |
---|
160 | [ $SIZEREQUIRED -lt 300000 ] && SIZEREQUIRED=300000 |
---|
161 | |
---|
162 | # Comprueba que quepa en el repositorio |
---|
163 | [ "$3" == "CACHE" -o "$3" == "cache" ] && SIZEFREE=$(ogGetFreeSize `ogFindCache`) && ogMountCache >/dev/null |
---|
164 | [ "$3" == "REPO" -o "$3" == "repo" ] && SIZEFREE=$(df -k | grep $OGIMG | awk '{print $4}') |
---|
165 | echo " $SIZEREQUIRED $SIZEFREE" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
166 | [ $SIZEREQUIRED -gt $SIZEFREE ] && ogRaiseError $OG_ERR_CACHESIZE "$3" |
---|
167 | |
---|
168 | TIMEAUX3=$[SECONDS-TIME2] |
---|
169 | echo " $MSG_SCRIPTS_TASK_END $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX3/60]m $[TIMEAUX3%60]s" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
170 | |
---|
171 | # Del fichero de acl de la partición extraemos las acl de los ficheros de la diferencial |
---|
172 | if [ "$FSTYPE" == "NTFS" ]; then |
---|
173 | echo "[55] $MSG_HELP_ogAclFilter " | tee -a $OGLOGSESSION $OGLOGFILE |
---|
174 | ogAclFilter |
---|
175 | TIMEAUX4=$[SECONDS-TIMEAUX3] |
---|
176 | echo " $MSG_SCRIPTS_TASK_END $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX4/60]m $[TIMEAUX4%60]s" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
177 | fi |
---|
178 | TIMEAUX5=$[SECONDS-TIMEAUX3] |
---|
179 | |
---|
180 | |
---|
181 | # Configuro la informacion del tamaño de los datos en /tmp/ogimg.info |
---|
182 | sed -i s/SIZEDATA/"$SIZEDATA"/g /tmp/ogimg.info |
---|
183 | |
---|
184 | # Creamos o redimensionamos la imagen |
---|
185 | echo "[60] $MSG_HELP_ogCreateFileImage." | tee -a $OGLOGSESSION $OGLOGFILE |
---|
186 | ogCreateFileImage $3 "$5" $DIFFTYPE $SIZEREQUIRED |
---|
187 | |
---|
188 | # Esperamos que se monte la imagen despues de crarla en el servidor |
---|
189 | ogWaitMountImage "$3" "$5" "$DIFFTYPE" $SIZEREQUIRED || ogRaiseError $OG_ERR_DONTMOUNT_IMAGE "$3 $5 $DIFFTYPE: time_out." |
---|
190 | |
---|
191 | echo "[70] $MSG_HELP_ogSyncCreate" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
192 | # Copio los datos a la imagen diferecial : |
---|
193 | ogSyncCreate $1 $2 $3 "$5" $DIFFTYPE |
---|
194 | TIMEAUX6=$[SECONDS-TIMEAUX5] |
---|
195 | echo -e " $MSG_SCRIPTS_TASK_END, $MSG_SCRIPTS_TIME_PARTIAL: $[TIMEAUX6/60]m $[TIMEAUX6%60]s" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
196 | |
---|
197 | # Reducimos la imagen diferencial -> solo para kernel <= 3.7, imagenes con FS ext4 |
---|
198 | echo "[80] $MSG_HELP_ogReduceImage: $3 /$4.$IMGEXT" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
199 | ogReduceImage $3 "$5" $DIFFTYPE |
---|
200 | |
---|
201 | # Desmontamos las imagenes |
---|
202 | ogUnmountImage $3 "$5" $DIFFTYPE |
---|
203 | ogUnmountImage $3 "$4" $IMGEXT |
---|
204 | |
---|
205 | # Desbloqueo las imagenes y la particion. |
---|
206 | ogUnlockImage "$3" "/$4.$IMGEXT" |
---|
207 | ogUnlockImage "$3" "/$5.$DIFFEXT" |
---|
208 | ogUnlock $1 $2 |
---|
209 | |
---|
210 | echo " " > $OGLOGCOMMAND |
---|
211 | # Comprobamos que la imagen esta bien |
---|
212 | echo "[95] $MSG_HELP_ogCheckSyncImage" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
213 | ogCheckSyncImage $3 "$5" diff |
---|
214 | [ ${PIPESTATUS[0]} -eq 0 ] || ogRaiseError $OG_ERR_IMAGE "$3 $5 diff" |
---|
215 | |
---|
216 | #resumen de la operacion |
---|
217 | IMGSIZE=$(ls -l --block-size=1024 "${DIFFFILE}"| cut -f5 -d" ") |
---|
218 | TIME=$[SECONDS-TIME1] |
---|
219 | echo "[100] $MSG_SCRIPTS_TIME_TOTAL $[TIME/60]m $[TIME%60]s" | tee -a $OGLOGSESSION $OGLOGFILE |
---|
220 | echo " FileSystem $PART with $SIZEDATA KB data created onto file-image as $5 and used $IMGSIZE KB acros DFS rsync " | tee -a $OGLOGSESSION $OGLOGFILE |
---|