Archivado o migración de datos.¿Qué elegir?

Archivado de datos

Para que el archivado de datos funcione bien será necesario que haya una persona responsable de él. Las funciones de esta persona serán las siguientes:

  • Conocerá la ubicación de los documentos y el sistema de archivo.
  • Marcará las normas de uso y clasificación.
  • Será responsable de la presencia y conservación adecuada de los documentos.
  • Determinará los pasos a seguir para la salida de documentos (cesión o eliminación).

Los documentos se conservan por dos razones: su valor legal y su valor informativo o de organización, y cuando el documento no tiene ninguno de ellos se debe proceder a su eliminación.

 

Migración de datos

La información es un activo esencial para cualquier organización y el potencial de su valor reside en los datos que, en ocasiones, deben migrar para mejorar el desempeño de una base de datos, actualizar versiones, reducir costes o aplicar políticas de seguridad.

Este proceso consiste en la transferencia de datos de un sistema a otro y suele tener lugar en momentos de transición provocados por la llegada de una nueva aplicación, un cambio en el modo o medio de almacenamiento o las necesidades que impone el mantenimiento de la base de datos corporativa.

Hay tres opciones principales para llevar a cabo la migración de datos:

  •  Combinar los sistemas de las dos empresas o fuentes en uno nuevo.
  •  Migrar uno de los sistemas al otro.
  •  Mantener la integridad de ambos sistemas, dejándolos intactos, pero creando una visión común a ambos: un almacén de datos.

Con la explosión de las tecnologías de la información cada vez existen más documentos  digitales y digitalizaciones de documentos que han de ser preservados manteniendo su integridad, autenticidad, fiabilidad, legibilidad y funcionalidades.

Para evitar estas amenazas que se ciernen sobre los documentos electrónicos se pueden utilizar una serie de estrategias, de entre las cuales la migración es la más utilizada por las ventajas que aporta:

  • Es una operación muy experimentada.
  • No se requieren conocimientos técnicos muy especializados.
  • Se puede automatizar una parte de los procesos.
  • La tendencia hacia la estandarización de software y formatos facilitará la migración.
  • Convierte el documento a un formato compatible con sistemas actuales.

 

Archivado y migración de datos

Fuentes

¿Qué es la migración de datos?

Cómo elegir herramientas de migración de bases de datos

 

Que es el sistema de archivos HFS+ y en que sistemas esta utilizado

Hasta ahora, hemos podido ver distintos tipos de sistemas de ficheros. Todos ellos utilizados en mayor o menor medida por distintos sistemas operativos. Sin embargo, ahora vamos a echarle un vistazo a HFS.

Es posible que HFS, o Hierarchical File System no sea conocido por muchos. Durante los últimos años ha ganado bastante popularidad. En gran medida por su uso en los sistemas operativos de Apple. Mac OS es el sistema que usualmente utiliza esta característica para manejar los archivos necesarios.

HFS HFS+

El funcionamiento de este sistema de archivoses bastante sencillo, ya que divide el volumen en bloques lógicos de 512 bytes, los cuales están agrupados juntos en bloques de asignación que pueden contener uno o más bloques lógicos. Aunque este sistema de archivos utiliza un valor de dirección de 16 bits para los bloques de asignación, no debemos olvidar que existen cinco estructuras para forma un volumen HFS.

Problemas tampoco le faltan

El Catalog File, el cual almacena todos los registros de archivos y directorios en una estructura de datos sencilla. Puede provocarnos problemas de rendimiento cuando se permite la multitarea. Sólo un programa puede escribir, a la vez, en esta estructura.

 

Llega la solución con HFS+

Hace unos años, Apple lanzaba el sustituto de HFS, HFS+, un nuevo sistema de archivos que eliminaba los errores de la versión anterior y añadía nuevas características.

HFS+ soporta archivos mucho más grandes, y permite nombres de fichero de hasta 255 caracteres, de longitud UTF-16. Sin embargo, estas no son sus únicas ventajas, ya que también utiliza una tabla de asignación de 32 bits, permitiendo el uso de más de 65.536 bloques de asignación.

El funcionamiento de HFS+ es muy parecido a su antecesor, aunque las características más llamativas han sido corregidas con el fin de hacerlo un programa más eficiente.

Este nuevo sistema de archivos es el más usado en sistemas operativos como Mac OS 8, Mac OS 9 y Mac OS X. También se puede ver su uso en algunas distribuciones Linux y Darwin.

 

Fuente original http://omicrono.elespanol.com/2013/03/todo-lo-que-necesitas-saber-sobre-los-tipos-de-formateo-segun-sistema-operativo/

Enlace wikipedia https://es.wikipedia.org/wiki/HFS%2B

NAS vs SAN

NAS (Network Attached Storage) y SAN (Storage Area Network) son dos sistemas de almacenamiento utilizados en las empresas, pero son utilizados en entornos diferentes.

Los NAS

Consisten en disponer de almacenamiento conectado en red con el objetivo de compartir el almacenamiento con otros equipos (clientes). Utilizan redes convencionales como son TCP/IP y un SO operativo con los protocolos CIFS; NFS; FTP, etc. Estos protocolos trabajan a nivel de fichero completo en lugar de bloque o por sectores. Generalmente cuentan con varios soportes de almacenamiento (varios discos) configurados utilizando RAID para ganar rendimiento y/o seguridad en los datos.

Los SAN

Consiste en una arquitectura que agrupa varios elementos:

  • Red de área de alta velocidad (fibra o iSCSI)
  • Elementos de interconexión
  • Elementos de almacenamiento de red (discos duros)

Es, por tanto, una red dedicada al almacenamiento. En este modelo no se trabaja a nivel de fichero, sino que se solicitan bloques o sectores de ficheros concretos.

NAS vs SAN

  1. El rendimiento de los SAN depende directamente del tipo de red que se esté utilizando en la configuración del sistema. Los SAN pueden aplicar su capacidad de manera ilimitada, simplemente añadiendo más máquinas a la red.
  2. Los NAS no pueden ampliar tan fácilmente como los SAN dado que están limitados por la cantidad de discos que se pueden configurar en el dispositivo (actualmente entre 2 y 8).
  3. NAS tienen un bajo coste, para balanceos de carga, servidores Web o repositorios de datos.

 

Diferencias entre NAS y SAN.

Continuar leyendo “NAS vs SAN”

Que implicaciones positivas o negativas tiene un sistema de ficheros con fragmentación interna y fragmentación externa

El primer sistema de direccionamiento que se usó fue el CHS (cilindro-cabeza-sector), ya que con estos tres valores se puede situar un dato cualquiera del disco. Más adelante se creó otro sistema más sencillo: LBA (direccionamiento lógico de bloques), que consiste en dividir el disco entero en sectores y asignar a cada uno un único número. Este es el que actualmente se usa y sobre todo con la aparición de los SSD y su fragmentación

 

cilindro cabeza sector

Un aspecto muy importante es la elección del tamaño del bloque, para esto hay que entender que si el tamaño del bloque es muy grande, aun cuando el archivo sea de un tamaño muy pequeño, se le asignará el bloque entero con lo que se desperdiciará gran parte de la capacidad del disco (fragmentación interna).

 

Por otra parte, si el tamaño del bloque es demasiado pequeño para almacenar un archivo, harán falta muchos bloques con lo que se producirá un retraso en la lectura del archivo al tener que localizar en el disco todos los bloques que componen dicho archivo (fragmentación externa). Una vez más, se ha de llegar a una solución de compromiso, eligiendo un tamaño del bloque lo suficientemente pequeño para no desperdiciar capacidad del disco pero lo suficientemente grande como para no ralentizar en exceso la lectura de los archivos. Diversos estudios realizados indican que el tamaño medio de los archivos en sistemas Linux y Windows es de 1 KB, así pues, son adecuados tamaños de bloques de 512 Bytes, 1 KB ó 2 KB.

 

Si se elige un tamaño de bloque de, por ejemplo, 2 KB en un disco cuyo sector tiene 512 Bytes, cada bloque estará compuesto por cuatro sectores.

 

En la actualidad, los sistemas Windows utilizan tamaños para los bloques de 4 KB.

 

Fragmentación interna:

 

fragmentacion interna

 

La fragmentación interna es la pérdida de espacio en disco debido al hecho de que el tamaño de un determinado archivo sea inferior al tamaño del cluster, ya que teóricamente el archivo estaría obligado a ser referenciado como un cluster completo. Los cluster(s) son contiguos de forma que desde el último bit del archivo situado en el cluster “A” hasta el primer bit del archivo situado en el cluster contiguo (es decir “B”) queda un espacio sobrante siempre teniendo la condición de que el archivo del cluster “A” fuera más pequeño que el cluster en sí.

 

Por eso se sugiere no disponer de un gran tamaño de partición en los discos nuevos donde la capacidad es muy importante. Por ejemplo si nuestro clúster es de 18KB (18.432 bytes) por más que un archivo ocupe menos, en nuestro disco ocupara 18KB. Esto sugiere una pérdida de ese espacio que dice utilizar pero no utiliza.

 

Por eso, en nuestro ejemplo, un archivo de 3KB ocupara en nuestro disco lo mismo que uno de 10KB, o sea 18 KB. Esa pérdida de espacio se denomina fragmentación interna, y no se corrige con el desfragmentador, sino disminuyendo el tamaño de los clusters.

 

 

Fragmentación externa:

Fragmentacion externa

 

 

Este tipo de fragmentación aparece como consecuencia de las distintas políticas de ajuste de bloques que tiene un sistema de ficheros, o al utilizar asignaciones dinámicas de bloques en el caso de la memoria. En el sistema de ficheros, la sucesiva creación y eliminación de ficheros de distintos tamaños puede conducir al aislamiento de los bloques libres de un disco y, dependiendo de la política de ajuste, su no elección para futuros ficheros.

 

En la memoria del sistema la fragmentación se produce cuando los procesos asignados han ocupado posiciones no contiguas de memoria dejando demasiados bloques libres de pequeño tamaño, en los que no “caben” nuevos procesos.

 

Como resolver el problema de la fragmentación:

desfragmentacion

 

En sistemas de ficheros, la desfragmentación trata de resolver este problema, alineando los bloques de datos contiguos y juntando los bloques libres, produciendo así fragmentos mayores que sí serán elegidos para futuros ficheros. En la memoria principal se soluciona compactando los procesos para que estos ocupen posiciones contiguas y dejar los bloques libres juntos, o también se soluciona con la paginación de memoria.

Leer más: http://asirclaret-com.webnode.es/news/fragmentacion-interna-y-externa/

¿Debería elegir un sistema de archivo BTR-FS o XFS?

Si algún día tuvieras que elegir un sistema de ficheros, ¿que sistema escogerías, un BTR-FS o un XFS?

Si aún no sabes la respuesta, nosotros te ayudamos resumiendo las características principales de los sistemas de ficheros más conocidos que hemos consultado en Wikipedia:

Características de los sistemas XFS:

  • Es el sistema de ficheros de 64 bits con capacidad de journaling de alto rendimiento
  • Soporta un sistema de archivos de hasta 8 exabytes, aunque depende del sistema del sistema operativo. En GNU Linux de 32 nits, por ejemplo, el límite es de 16 Tb
  • Los sistemas de archivos  están particionados internamente en grupos de asignación, para dar más escalabilidad y paralelismo
  • Tamaño de bloques dinámicos
  • Es posible aumentar la capacidad de sistemas de ficheros XFS: ideal para particiones LVM
  • Capacidad de manejar una partición en tiempo real de hasta 500 terabytes
sistema de archivo
Fuente: http://www.tecnoinver.cl/xfs-un-sistema-de-archivos-de-alto-rendimiento/

Características de los sistemas BTR-FS

  • Empaquetado eficiente en espacio de archivos pequeños y directorios indexados
  • Asignación dinámica de inodos: No se fija un número máximo de ficheros que puede
    contener el sistema de archivos, se van asignando de modo dinámico según las necesidades
  • Copias de seguridad incrementales o incluso una réplica
  • Optimizado para soporte SSD: optimiza su vida y saca un mayor rendimiento
  • Optimizado para sistemas RAID
  • Mirroring y Striping a nivel de objeto
  • Gran integración con device-mapper para soportar múltiples dispositivos, con varios algoritmos de RAID incluidos
  • Desfragmentación y comprobación del estado de ficheros online
  • Comprobación de datos y metadatos (alta seguridad de integridad)
  • Snapshots del sistema de ficheros: puntos de estado del sistema desde el cual
    podemos volver atrás en caso de fallo (tipo timemachine).
  • Comprobación del sistema de archivos sin desmontar y comprobación muy rápida del sistema de archivos desmontado
  • Copias de seguridad incrementales eficaces y mirroring del sistema de archivos

Conclusiones

Si a pesar de haber leído el nuestro artículo no tienes claro qué sistema escoger, desde Techberry te recomendamos seguir investigando. Ambos sistemas son realmente buenos y lo ssucesores directos de los sistemas EXT. Habrá que seguirlos de cerca…

DIRECTORIOS ESTÁTICOS Y DINÁMICOS

El Filesystem Hierarchy Standard (Estándar de jerarquía del sistema de archivos) es una norma que define los directorios principales y sus contenidos en el sistema operativo GNU/Linux y otros sistemas de la familia Unix. Se diseñó originalmente en 1994 para estandarizar el sistema de archivos de las distribuciones de Linux, basándose en la tradicional organización de directorios de los sistemas Unix.directorios

Subjerarquías de directorios:

En el sistema de ficheros de UNIX (y similares), existen varias subjerarquías de directorios que poseen múltiples y diferentes funciones de almacenamiento y organización en todo el sistema. Estos directorios pueden clasificarse en:

  • Directorios Estáticos: Contiene archivos que no cambian sin la intervención del administrador (root), sin embargo, pueden ser leídos por cualquier otro usuario. (/bin, /sbin, /opt, /boot, /usr/bin…).
  • Directorios Dinámicos: Contiene archivos que son cambiantes, y pueden leerse y escribirse (algunos sólo por su respectivo usuario y el root). Contienen configuraciones, documentos, etc. Para estos directorios, es recomendable una copia de seguridad con frecuencia, o mejor aún, deberían ser montados en una partición aparte en el mismo disco, como por ejemplo, montar el directorio /home en otra partición del mismo disco, independiente de la partición principal del sistema; de esta forma, puede repararse el sistema sin afectar o borrar los documentos de los usuarios (/var/mail, /var/spool, /var/run, /var/lock, /home…).

Directorios más relevantes de FHS:

Directorios más relevantes de FHS

Si deseas ampliar la información has click aquí.

Todo lo que necesitas saber sobre TurboFAT – FATX – FAT+ Clash of Clans

¿Qué es lo que necesitas saber sobre FAT?

Para empezar hay que tener claro que es “FAT“.

Se refiere acrónimo de “File Allocation Table” – (tabla de localización de archivos). Es simplemente una especie de índice, que el sistema operativo del ordenador utiliza para guardar la localización real (en el disco duro) de cada archivo individual.

FATX
  • Es una versión del sistema de archivos FAT diseñada para controlar el funcionamiento de la unidad de disco duro.
TurboFAT
  • Método para archivos de gran tamaño que se utiliza para aumentar el rendimiento.
FAT+
  • Documento  destinado a documentar los cambios físicos en un sistema de archivos FAT en el disco de manera compatible con archivos grandes (con un tamaño mayor o igual a  4GiB), y los problemas de compatibilidad para el uso de este tipo de extensiones con un sistema operativo que no tiene conocimiento de ellos. Dico Duro HDD de ordenador

Sistemas de ficheros FAT12, FAT16 o FAT32

Que obsoleto los sistemas de archivos  FAT12, FAT 16 Y FAT 32.

La tabla de asignación de archivos, comúnmente conocido como FAT (del inglés file allocation table), es un sistema de archivos desarrollado para MS-DOS, así como el sistema de archivos principal de las ediciones no empresariales de Microsoft Windows hasta Windows Me.

Características:

FAT12:

  1. Las direcciones de bloque solamente contienen 12 bits. Esto complica la implementación.
  2. El tamaño del disco se almacena como una cuenta de 16 bits expresada en sectores, lo que limita el espacio manejable a 32 megabytes.

FAT16:

  1. El tamaño de la partición ahora estaba limitado por la cuenta de sectores por clúster, que era de 8 bits. Esto obligaba a usar clusters de 32 KiB con los usuales 512 bytes por sector.
    Así que el límite definitivo de FAT16 se situó en los 90 GiB.
  2. Windows 98 fue compatible con esta extensión en lo referente a lectura y escritura.
    Sin embargo, sus utilidades de disco no eran capaces de trabajar con ella.
  3. Generaba más fragmentación interna.

FAT 32:

  1. FAT32 admite unidades de hasta 2 terabytes de tamaño.
  2. Aprovecha el espacio de forma más eficiente que los FAT12 Y FAT16.
  3. Es más robusto.  FAT32 puede reubicar la carpeta raíz y utilizar la copia de seguridad de la tabla de asignación
    de archivos en lugar de la copia predeterminada.
  4. Es más flexible. La carpeta raíz de una unidad FAT32 es una cadena de clústeres ordinaria,
    de manera que puede ubicarse en cualquier unidad.

FUTURO:

Dado que Microsoft no seguirá soportando sistemas operativos basados en MS-DOS, es poco probable que se desarrollen nuevas versiones de FAT. NTFS es un sistema de archivos superior a éste en múltiples aspectos: eficiencia, rendimiento y fiabilidad.
Su principal desventaja es el excesivo tamaño que desperdicia en pequeños volúmenes y su limitado soporte en otros sistemas operativos. Sus especificaciones son un secreto comercial; no obstante, esto está cambiando, gracias a la ingeniería inversa, pues ya es posible leer y escribir en particiones NTFS en Linux con herramientas como NTFS-3G.

 

Sistema de archivos FAT12,FAT16 Y FAT32

 

3 conceptos de los sistemas de almacenamiento que ya deberías conocer

¿Qué es formatear? ¿Cómo se hace? ¿Y un bloque? ¿Un sector? Bienvenido, hemos hecho esta entrada para ti, resumiendo esos 3 conceptos básicos de los sistemas de almacenamiento informáticos en una misma entrada, para que no busques más.

Los 3 conceptos clave de los sistemas de almacenamiento:

1. Formatear: Según Wikipedia el formateo de un disco es el conjunto de operaciones (físicas y lógicas) que permiten restablecer un sistema de almacenamiento de datos (Disco duro, USB, etc.) a su estado original u óptimo para ser reutilizado o reescrito con nueva información.

 

2. Sector: Es la mínima unidad de almacenamiento dentro de cada soporte de almacenamiento. Viene limitada por el soporte físico y no puede modificarse y es imposible leer o escribir una unidad inferior a esta. Los tamaños de los sectores oscilan entre 512 bytes y 4096 bytes (4 K) dependiendo del fabricante.

 

3. Bloque: conjunto de sectores físicos. Una unidad mínima de almacenamiento en el sistema de ficheros, de modo que un bloque puede estar compuesto por varios sectores físicos. Pueden oscilar entre 512 bytes y 128 KB
dependiendo del sistema de archivos y la configuración del sistema.

 

sistemas de almacenamiento
Fuente: http://www.gjszlin.cz/ivt/esf/ostatni-sin/operacni-systemy-2.php?lang=1

 

Y de regalo os dejamos un enlace con un método fácil para formatear vuestro Windows 10