source: client/engine/Cache.lib @ 13ff5a5

ogClonningEnginetest-python-scriptsticket-577ticket-585ticket-693ticket-700
Last change on this file since 13ff5a5 was 8a97c87, checked in by Irina Gómez <irinagomez@…>, 3 years ago

#1066 #1033: Formatear la caché compatible con versiones 4.x y 5.x de Linux.

  • Property mode set to 100755
File size: 15.4 KB
RevLine 
[311532f]1#!/bin/bash
2#/**
3#@file    Cache.lib
4#@brief   Librería o clase Cache
5#@class   Cache
6#@brief   Funciones para gestión de la caché local de disco.
[d959834]7#@version 1.1.1
[311532f]8#@warning License: GNU GPLv3+
9#*/
10
11
12#/**
[de088a3]13#         ogCreateCache [int_ndisk] int_partsize
[80519e1]14#@brief   Define la caché local, por defecto en partición 4 del disco 1.
[de088a3]15#@param   int_ndisk  numero de disco donde crear la cache, si no se indica es el 1 por defecto
[80519e1]16#@param   int_npart      número de partición (opcional, 4 por defecto)
[311532f]17#@param   int_partsize   tamaño de la partición (en KB)
18#@return  (nada, por determinar)
19#@exception OG_ERR_FORMAT   formato incorrecto.
20#@note    Requisitos: sfdisk, parted, awk, sed
[4c475a32]21#@warning El tamaño de caché debe estar entre 50 MB y la mitad del disco.
22#@warning La caché no puede solaparse con las particiones de datos.
[f4b737d]23#@version 0.9.1 - Definición de caché local.
[311532f]24#@author  Ramon Gomez, ETSII Universidad de Sevilla
25#@date    2010/03/09
[f4b737d]26#@version 0.9.2 - Corrección definición de límites.
27#@author  Ramon Gomez, ETSII Universidad de Sevilla
28#@date    2010/06/01
[d1f50e9]29#@version 1.0.4 - Soporte para discos GPT.
30#@author  Universidad de Huelva
31#@date    2012/03/13
[de088a3]32#@version 1.0.5 - Posibilidad de crear la cache en cualquier disco duro
33#@author  Universidad de Huelva
34#@date    2012/09/18
[80519e1]35#@version 1.1.0 - Posibilidad de crear la caché en cualquier partición.
36#@author  Ramon Gomez, ETSII Universidad de Sevilla
37#@date    2016/05/25
[9f9a3b8]38#@version 1.1.0 - Soporte discos con sectores de 4k
39#@date    2017/01/09
40#@version 1.0.6b - Al crear las particiones ordenamos los dispositivos en el fichero auxiliar.
41#@author  Irina Gomez, ETSII Universidad de Sevilla
42#@date    2017/01/09
[311532f]43#*/ ##
44function ogCreateCache ()
45{
46# Variables locales.
[d959834]47local FINDCACHE IOSIZE NDSK SIZECACHE PART DISK START END ENDPREVPART SIZE MINSIZE MAXSIZE
48local PTTYPE ID TMPFILE NVME_PREFIX
[311532f]49# Si se solicita, mostrar ayuda.
50if [ "$*" == "help" ]; then
[80519e1]51    ogHelp "$FUNCNAME" "$FUNCNAME [int_ndisk [int_npart]] int_partsize" \
52           "$FUNCNAME 10000000" "$FUNCNAME 1 10000000" "$FUNCNAME 1 4 10000000"
[311532f]53    return
54fi
[de088a3]55# Si se recibe un parametro, sera el tamano de la cache
56case $# in
57    1)  # Error, si no es un entero positivo
58        [[ $1 =~ ^[1-9][0-9]*$ ]] || ogRaiseError $OG_ERR_FORMAT "$1" || return $?
59        NDSK=1
[80519e1]60        PART=4
[de088a3]61        SIZECACHE=$1
62        ;;
63    2)  # Error, si no son enteros positivos
64        [[ $1 =~ ^[1-9][0-9]*$ ]] || ogRaiseError $OG_ERR_FORMAT "$1" || return $?
65        [[ $2 =~ ^[1-9][0-9]*$ ]] || ogRaiseError $OG_ERR_FORMAT "$2" || return $?
66        NDSK=$1
[80519e1]67        PART=4
[de088a3]68        SIZECACHE=$2
69        ;;
[80519e1]70    3)  # Error, si no son enteros positivos
71        [[ $1 =~ ^[1-9][0-9]*$ ]] || ogRaiseError $OG_ERR_FORMAT "$1" || return $?
72        [[ $2 =~ ^[1-9][0-9]*$ ]] || ogRaiseError $OG_ERR_FORMAT "$2" || return $?
73        [[ $3 =~ ^[1-9][0-9]*$ ]] || ogRaiseError $OG_ERR_FORMAT "$3" || return $?
74        NDSK=$1
75        PART=$2
76        SIZECACHE=$3
77        ;;
[de088a3]78    *)  ogRaiseError $OG_ERR_FORMAT
79        return $?
80        ;;
81esac
82
[16f28b7]83TMPFILE=/tmp/sfdisk$$
[b1f1311]84DISK=$(ogDiskToDev $NDSK) || return $?
[30fa5b4]85
86 # PATCH Para discos nvme la particion debe ser p1, p2, etc...en lugar de 1,2, sino falla sfdisk
87NVME_PREFIX=""
88if [[ $DISK == *"nvme"* ]]; then
89        NVME_PREFIX="p"
90fi
91
92
[5792125]93END=$[$(ogGetLastSector $NDSK 2>/dev/null)]  # Sector final del disco.
[de088a3]94SIZE=$[$SIZECACHE*2]                            # Tamaño en sectores de 512 B.
[9f9a3b8]95# Inicio partición cache según el disco tenga sectores de 4k o menores
96IOSIZE=$(fdisk -l $DISK | awk '/I\/O/ {print $4}')
97if [ $IOSIZE -eq 4096 ]; then
98    END=$[$END-8192]
[8076226]99    START=$[END-SIZE+2048-(END-SIZE)%2048]
[9f9a3b8]100else
101    START=$[END-SIZE+1]
102fi
[5792125]103ENDPREVPART=$[$(ogGetLastSector $NDSK $[PART-1] 2>/dev/null)]
[b1f1311]104# Error si tamaño no está entre límites permitidos o si se solapa con la partición anterior.
[de088a3]105MINSIZE=25000                   # Error de formateo si tamaño < 50 MB.
106MAXSIZE=$END                    # Para restringir tamaño > mitad del disco:  MAXSIZE=$[END/2]
[d1f50e9]107if [ $SIZE -lt $MINSIZE -o $SIZE -gt $MAXSIZE -o $START -le $ENDPREVPART ]; then
[311532f]108    ogRaiseError $OG_ERR_FORMAT "$1" || return $?
109fi
110
111# Desmontar todos los sistemas de archivos del disco.
[de088a3]112ogUnmountAll $NDSK 2>/dev/null
[311532f]113# Definir particiones y notificar al kernel.
[5792125]114# En el caso de ser disco GPT, de momento se borra la particion y se vuelve a crear,
115# por lo que se pierden los datos.
116PTTYPE=$(ogGetPartitionTableType $NDSK)
117if [ -z "$PTTYPE" ]; then
118    PTTYPE="MSDOS"                      # Por defecto para discos vacíos.
119    ogCreatePartitionTable $NDSK $PTTYPE
120fi
[b1f1311]121case "$(ogGetPartitionTableType $NDSK)" in
[d1f50e9]122    GPT)
123        # Si la tabla de particiones no es valida, volver a generarla.
[80519e1]124        [ ! $(sgdisk -p $DISK &>/dev/null) ] || echo -e "2\nw\nY\n" | gdisk $DISK
[d1f50e9]125        # Si existe la cache se borra previamente
[a39c456]126        [ -n "$(ogFindCache)" ] && ogDeleteCache
[d1f50e9]127        # Capturamos el codigo de particion GPT para cache
[102a50e]128        # PATCH - Cuando es GPT, la particion con codigo CACHE (CA00) no existe y no puede crearse, se cambia por LINUX (8300)
129        ID=$(ogTypeToId LINUX GPT)
[9f9a3b8]130        sgdisk $DISK -n$PART:$START:$END -c$PART:CACHE -t$PART:$ID 2>/dev/null
[d1f50e9]131        ;;
132    MSDOS)
133        # Si la tabla de particiones no es valida, volver a generarla.
[80519e1]134        parted -s $DISK print &>/dev/null || fdisk $DISK <<< "w"
[d1f50e9]135        # Definir particiones y notificar al kernel.
[5af5d5f]136        ID=$(ogTypeToId CACHE MSDOS)
[16f28b7]137        # Salvamos la configuración de las particiones e incluimos la cache.
138        trap "rm -f $TMPFILE" 1 2 3 9 15
139        sfdisk --dump $DISK | grep -v $DISK$PART > $TMPFILE
[30fa5b4]140        echo  "$DISK$NVME_PREFIX$PART : start= $START, size= $SIZE, Id=$ID" >> $TMPFILE
[9f9a3b8]141        # Ordenamos las líneas de los dispositivos
142        UNIT=$(grep unit $TMPFILE)
143        grep ^/dev $TMPFILE|sort -o $TMPFILE
144        sed -i "1i $UNIT\n" $TMPFILE
[16f28b7]145        # Guardamos nueva configuración en el disco.
[9f9a3b8]146        sfdisk --no-reread  $DISK < $TMPFILE
[16f28b7]147        rm -f $TMPFILE
[d1f50e9]148        ;;
149esac
[9f9a3b8]150# Actualiza la tabla de particiones en el kernel.
151ogUpdatePartitionTable
[311532f]152}
153
154
155#/**
156#         ogDeleteCache
157#@brief   Elimina la partición de caché local.
158#@return  (nada, por determinar)
159#@exception OG_ERR_FORMAT   formato incorrecto.
[c59b3d1]160#@note    Requisitos: fdisk, sgdisk, partprobe
[311532f]161#@version 0.91 - Definición de caché local.
162#@author  Ramon Gomez, ETSII Universidad de Sevilla
163#@date    2010/03/11
[d1f50e9]164#@version 1.0.4 - Soporte para discos GPT.
165#@author  Universidad de Huelva
166#@date    2012/03/13
[64a9cb5]167#@version 1.0.6b - llamada correcta a ogUpdatePartitionTable
168#@author  Antonio Doblas Universidad de Málaga
169#@date    2016/11/16
[c59b3d1]170#@version 1.1.0 - Sustituir "sfdisk" por "fdisk" para discos MSDOS.
171#@author  Ramon Gomez, ETSII Universidad de Sevilla
172#@date    2016/05/25
[311532f]173#*/ ##
174function ogDeleteCache ()
175{
176# Variables locales.
177local NDISK NPART DISK
178# Si se solicita, mostrar ayuda.
179if [ "$*" == "help" ]; then
180    ogHelp "$FUNCNAME" "$FUNCNAME"
181    return
182fi
183# Error si no se encuentra partición de caché.
184read NDISK NPART <<<"$(ogFindCache)"
[5a4f399]185[ -n "$NDISK" -a -n "$NPART" ] || ogRaiseError $OG_ERR_PARTITION "$MSG_NOCACHE" || return $?
[311532f]186DISK=$(ogDiskToDev $NDISK)
187
188# Desmontar todos los sistemas de archivos del disco.
189ogUnmountAll $NDISK 2>/dev/null
[eb1f900]190case "$(ogGetPartitionTableType $NDISK)" in
[d1f50e9]191    GPT)
192        # Si la tabla de particiones no es valida, volver a generarla.
193        [ ! $(sgdisk -p $DISK 2>&1 >/dev/null) ] || echo -e "2\nw\nY\n" | gdisk $DISK
[64a9cb5]194        sgdisk $DISK -d$NPART 2>/dev/null
[d1f50e9]195        ;;
196    MSDOS)
197        # Si la tabla de particiones no es valida, volver a generarla.
[c59b3d1]198        parted -s $DISK print &>/dev/null || fdisk $DISK <<< "w"
199        # Eliminar la partición de caché.
[64a9cb5]200        echo -e "d\n$NPART\nw" | fdisk $DISK 2>/dev/null
[80519e1]201        ;;
[d1f50e9]202esac
[311532f]203# Borrar etiqueta de la caché.
204rm -f /dev/disk/by-label/CACHE
[64a9cb5]205#Actualiza la tabla de particiones en el kernel.
206ogUpdatePartitionTable $NDISK
[311532f]207}
208
209
210#/**
211#         ogFindCache
212#@brief   Detecta la partición caché local.
213#@param   No requiere parametros
214#@return  int_ndisk int_npart - devuelve el par nº de disco-nº de partición .
215#@warning Si no hay cache no devuelve nada
[985bef0]216#@version 0.1 - Integracion para Opengnsys - EAC: FindCache() en ATA.lib -  HIDRA: DetectarCache.sh
217#@author Ramon Gomez, ETSII Universidad de Sevilla
218#@Date    2008/06/19
219#@author  Antonio J. Doblas Viso. Universidad de Malaga
220#@Date    2008/10/27
221#@version 0.91 - Adaptacion a la cache local de OpenGnSys.
[311532f]222#@author  Ramon Gomez, ETSII Universidad de Sevilla
223#@date    2010/03/16
[3156760]224#@version 1.0.5 - Obtener caché en discos GPT.
225#@author  Alberto García, Universidad de Málaga y Ramon Gomez, ETSII Universidad de Sevilla
226#@date    2014/05/28
[311532f]227#*/ ##
228function ogFindCache ()
229{
230# Variables locales
[3156760]231local DISK PART
[311532f]232# Si se solicita, mostrar ayuda.
233if [ "$*" == "help" ]; then
234    ogHelp "$FUNCNAME" "$FUNCNAME" "$FUNCNAME  =>  1 4"
235    return
236fi
[3156760]237# Obtener el dispositivo del sistema de archivos etiquetado como "CACHE".
238PART=$(blkid -L "CACHE")
[102a50e]239# En discos nvme con particiones GPT la partición se detecta usando el tag PARTLABEL
240PART=${PART:-$(blkid -t PARTLABEL=CACHE | awk -F: '{print $1}')}
[3156760]241# Si no se detecta, obtener particiones marcadas de tipo caché en discos MSDOS.
[ad3f531]242PART=${PART:-$(sfdisk -l 2>/dev/null | awk '$6~/ca|a7/ {print $1}')}
[311532f]243
[3156760]244# Por último revisar todos los discos GPT y obtener las particiones etiquetadas como caché.
245if [ -z "$PART" ]; then
246    for DISK in $(ogDiskToDev); do
[786fc3a]247        # Nota: se añade espacio separador solo si existe valor previo.
248        PART="${PART:+"$PART "}$(sgdisk -p $DISK 2>/dev/null | awk -v d=$DISK '$7~/CACHE/ {printf "%s%s",d,$1;}')"
[102a50e]249    done
[3156760]250fi
[1cbf9e0]251
[3156760]252# Devolver número de disco y número de partición de la 1ª partición encontrada.
253ogDevToDisk ${PART%% *} 2>/dev/null
[311532f]254}
255
256
257#/**
258#         ogFormatCache
259#@brief   Formatea el sistema de ficheros para la caché local.
260#@return  (por determinar)
261#@warning Prueba con formato Reiser.
262#@attention
263#@note    El sistema de archivos de la caché se queda montado.
[985bef0]264#@version 0.1 -  Integracion para Opengnsys  - EAC: FormatCache() en ATA.lib
[311532f]265#@author  Antonio J. Doblas Viso. Universidad de Malaga
[985bef0]266#@date   2008/10/27
267#@version 0.91 - Creacion cache local.
[311532f]268#@author  Ramon Gomez, ETSII Universidad de Sevilla
269#@date    2010-03-11
[bd597f6]270#@version 1.1.0 - llamada a updateBootCache.
271#@author  Antonio J. Doblas Viso. Universidad de Malaga
272#@date    2018-01-21
273
[311532f]274#*/ ##
275function ogFormatCache ()
276{
277# Variables locales.
[8a97c87]278local DEV MNTDIR OPTIONS
[311532f]279# Si se solicita, mostrar ayuda.
280if [ "$*" == "help" ]; then
281    ogHelp "$FUNCNAME" "$FUNCNAME"
282    return
283fi
284
[b0a4c8c]285# Error si no hay definida partición de caché.
286DEV=$(ogFindCache) || ogRaiseError $OG_ERR_PARTITION "$MSG_NOCACHE" || return $?
287DEV=$(ogDiskToDev $DEV) || return $?
288
289# Formatear sistema de ficheros.
290ogUnmountCache 2>/dev/null
[8a97c87]291OPTIONS="extent,large_file"
292[[ $(uname -r) =~ ^5 ]] && OPTIONS+=",uninit_bg,^metadata_csum,^64bit"
293mkfs.ext4 -q -F $DEV -L "CACHE" -O "$OPTIONS" 2>/dev/null || ogRaiseError $OG_ERR_PARTITION "CACHE" || return $?
[b0a4c8c]294
295# Crear estructura básica.
296MNTDIR=$(ogMountCache)
297mkdir -p $MNTDIR/$OGIMG
[bd597f6]298
299# Incluir kernel e Initrd del ogLive
300updateBootCache 2>&1>/dev/null
[311532f]301}
302
303
304#/**
305#         ogGetCacheSize
306#@brief   Devuelve el tamaño definido para la partición de caché.
307#@return  int_partsize   tamaño de la partición (en KB)
308#@exception OG_ERR_PARTITION  No existe partición de caché.
[985bef0]309#@version 0.1 -  Integracion para Opengnsys  -  EAC: InfoCache() en FileSystem.lib
310#@author  Antonio J. Doblas Viso. Universidad de Malaga
311#@date   2008/10/27
312#@version 0.91 - Definicion de cache local.
[311532f]313#@author  Ramon Gomez, ETSII Universidad de Sevilla
314#@date    2010/03/09
315#*/ ##
316function ogGetCacheSize ()
317{
318# Variables locales
319local PART
320
321# Si se solicita, mostrar ayuda.
322if [ "$*" == "help" ]; then
323    ogHelp "$FUNCNAME" "$FUNCNAME" "$FUNCNAME  =>  10000000"
324    return
325fi
326# Error si no se encuentra partición de caché.
[5a4f399]327PART=$(ogFindCache) || ogRaiseError $OG_ERR_PARTITION "$MSG_NOCACHE" || return $?
[311532f]328
329# Devuelve tamaño de la partición de caché.
330ogGetPartitionSize $PART
331}
332
333
334#/**
335#         ogGetCacheSpace
336#@brief   Devuelve el espacio de disco disponible para la partición de caché.
337#@return  int_size   tamaño disponible (en KB)
338#@note    El espacio disponible es el que hay entre el límite superior de la partición 3 del disco 1 y el final de dicho disco, y no puede ser superior a la mitad de dicho disco.
[985bef0]339#@version 0.1 -  Integracion para Opengnsys  -  EAC: InfoCache() en FileSystem.lib
340#@author  Antonio J. Doblas Viso. Universidad de Malaga
341#@date   2008/10/27
342#@version 0.91 - Definicion de cache local.
[311532f]343#@author  Ramon Gomez, ETSII Universidad de Sevilla
344#@date    2010/03/09
[de088a3]345#@version 1.0.5 - Uso de ogFindCache para detectar disco y particion
346#@author  Universidad de Huelva
347#@date    2012/09/18
[311532f]348#*/ ##
349function ogGetCacheSpace ()
350{
351# Variables locales.
[de088a3]352local NDISK DISK NPART SECTORS CYLS ENDPART3
[311532f]353# Si se solicita, mostrar ayuda.
354if [ "$*" == "help" ]; then
355    ogHelp "$FUNCNAME" "$FUNCNAME" "$FUNCNAME  =>  23165386"
356    return
357fi
[de088a3]358# Parche UHU para usar ogFindCache en lugar de 1
359# Error si no se encuentra partición de caché.
360read NDISK NPART <<<"$(ogFindCache)"
361[ -n "$NDISK" -a -n "$NPART" ] || ogRaiseError $OG_ERR_PARTITION "$MSG_NOCACHE" || return $?
362DISK=$(ogDiskToDev $NDISK) || return $?
[311532f]363
364SECTORS=$(awk -v D=${DISK#/dev/} '{if ($4==D) {print $3*2}}' /proc/partitions)
365CYLS=$(sfdisk -g $DISK | cut -f2 -d" ")
366SECTORS=$[SECTORS/CYLS*CYLS-1]
367ENDPART3=$(sfdisk -uS -l $DISK | awk -v P="${DISK}3" '{if ($1==P) print $3}')
368# Mostrar espacio libre en KB (1 KB = 2 sectores)
369if [ $ENDPART3 -gt $[SECTORS/2] ]; then
370    echo $[(SECTORS-ENDPART3)/2]
371else
372    echo $[SECTORS/4]
373fi
374}
375
376
377#/**
378#         ogMountCache
379#@brief   Monta la partición Cache y exporta la variable $OGCAC
380#@param   sin parametros
381#@return  path_mountpoint - Punto de montaje del sistema de archivos de cache.
382#@warning Salidas de errores no determinada
[985bef0]383#@version 0.1 -  Integracion para Opengnsys  -  EAC: MountCache() en FileSystem.lib - HIDRA: MontarCache.sh
384#@author  Ramon Gomez, ETSII Universidad de Sevilla
385#@date    2008/06/19
[311532f]386#@author  Antonio J. Doblas Viso. Universidad de Malaga
[985bef0]387#@Date    2008/10/27
388#@version 0.91 - Adaptacion a la cache local de OpenGnSys.
[311532f]389#@author  Ramon Gomez, ETSII Universidad de Sevilla
390#@date    2010/03/16
[92a6c37]391#@version 1.0 - Correccion multiples montajes de cache.
392#@author  Antonio J. Doblas Viso, Universidad de Malaga
393#@date    2011/02/24
[311532f]394#*/ ##
395function ogMountCache ()
396{
397# Si se solicita, mostrar ayuda.
398if [ "$*" == "help" ]; then
399    ogHelp "$FUNCNAME" "$FUNCNAME" "$FUNCNAME  ==>  /mnt/sda4"
400    return
401fi
402
[92a6c37]403ogMountFs $(ogFindCache) 2>/dev/null || ogRaiseError $OG_ERR_PARTITION "$MSG_NOCACHE" || return $?
[311532f]404}
405
406
407#/**
408#         ogUnmountCache
409#@brief   Desmonta la particion Cache y elimina la variable $OGCAC
410#@param   sin parametros
411#@return  nada
412#@warning Salidas de errores no determinada
[985bef0]413#@version 0.1 -  Integracion para Opengnsys  -  EAC: UmountCache() en FileSystem.lib
[311532f]414#@author  Antonio J. Doblas Viso. Universidad de Malaga
[985bef0]415#@Date    2008/10/27
416#@version 0.91 - Adaptacion a la cache local de OpenGnSys.
[311532f]417#@author  Ramon Gomez, ETSII Universidad de Sevilla
418#@date    2010/03/16
[92a6c37]419#@version 1.0 - Correccion multiples montajes de cache.
420#@author  Antonio J. Doblas Viso, Universidad de Malaga
421#@date    2011/02/24
[311532f]422#*/ ##
423function ogUnmountCache ()
424{
[5a4f399]425# Variables locales.
426local CACHE
[311532f]427# Si se solicita, mostrar ayuda.
428if [ "$*" == "help" ]; then
429    ogHelp "$FUNCNAME" "$FUNCNAME"
430    return
431fi
432
[5a4f399]433CACHE=$(ogFindCache) || ogRaiseError $OG_ERR_PARTITION "$MSG_NOCACHE"
[92a6c37]434ogIsMounted $CACHE || return 0
[5a4f399]435ogUnmountFs $CACHE
436# Borrar enlace simbólico de /mnt/ParticiónCache.
437rm -f $(ogDiskToDev $CACHE | sed 's/dev/mnt/')
[311532f]438}
439
Note: See TracBrowser for help on using the repository browser.