AWS Snowball Edge: transferencia de datos con edge computing

AWS Snowball Edge: transferencia de datos con edge computing

  • Nube
6 min de lectura Actualizado Nov 15, 2024

Puntos clave: AWS Snowball Edge permite una transferencia masiva eficiente de datos combinada con capacidades de computación en el borde, mejorando el rendimiento en zonas remotas. Facilita la transferencia segura de datos y el procesamiento local, minimizando la dependencia del ancho de banda de internet.

  • Soporta migración de datos, aprendizaje automático y aplicaciones IoT.
  • Ofrece configuraciones para optimización del almacenamiento y eficiencia computacional.

Hay un viejo dicho en la comunidad de TI que dice algo así:

"Nunca subestimes el ancho de banda de un camión lleno de discos duros que va a toda velocidad por la autopista."

Estas imágenes interesantes provienen de la competencia cada vez mayor entre la velocidad de internet y las cargas de datos. Resumiendo, cuantos más datos necesiten transferencia, más tiempo tardará a través de internet. Al fin y al cabo, internet y la nube son extremadamente útiles en muchos contextos, pero transmitir terabytes de datos no es uno de ellos. Llega un momento en el que es más rápido enviar discos duros físicos que intentar descargar la enorme cantidad de información que contienen. El Snowball Edge de Amazon Web Services (AWS) se adapta a estas situaciones proporcionando un dispositivo físico simple, seguro y escalable que puede adaptarse a las necesidades de prácticamente cualquier proyecto. El AWS Snowball Edge aborda la transferencia masiva de datos en la era de la computación en la nube, pero la lleva un paso más allá. Toma los dispositivos Snowball originales de AWS y añade:

  • Funcionalidad informática de vanguardia
  • Almacenamiento a bordo para ciertas capacidades de AWS.

Esta combinación proporciona una "computación en el borde" avanzada para aquellos momentos en que te necesitas soluciones temporales a problemas, como la ubicación geográfica remota o la falta de conexión a internet de alta velocidad.

¿Cuál es la diferencia entre Bola de Nieve y Borde Bola de Nieve?

El AWS Snowball Edge están un tipo de clasificación más amplia de dispositivos Snowball. AWS Snowballs en general ofrece soluciones a escala petabyte para una migración de datos considerable tanto hacia la nube de AWS como desde ella. Los usos comunes incluyen la transferencia de:

  • Datos analíticos
  • Videotecas
  • Suplentes
  • Datos genómicos
  • Otros archivos de gran escala

La transferencia de datos tan sustanciales a través del ancho de banda suele provocar problemas como:

  • Largos tiempos de transferencia
  • Altos costes
  • Preocupaciones sobre la seguridad

El clásico AWS Snowball evita estos problemas mediante la utiliza de una "consola de gestión" física que se envía directamente al usuario. La consola están un pequeño aparato robusto que actúa como un contenedor de envío integrado con una etiqueta automática de envío E-Ink. Al llegar, una consola AWS Snowball debe establecer una conexión a tu red local tras descargar y ejecutar un Cliente Snowball te. El Cliente están utiliza para seleccionar y Cifra los datos te quieren transferir a la consola a altas velocidades. Transferir directamente a un dispositivo Snowball evita el utiliza de ancho de banda costoso y lento.  Por ejemplo, transferir 100 terabytes a través de internet de alta velocidad y 100 Mbps puede llevar varios meses. Alternativamente, la misma transferencia usando dos consolas Snowball lleva menos de una semana. Esta reducción en el uso de ancho de banda no solo reduce el tiempo de espera, sino que también reduce costes significativamente en comparación con los potencialmente miles de dólares necesarios para internet de alta velocidad a largo plazo. AWS Snowball Edge aplica estas mismas ideas, pero con algunas capacidades adicionales de computación en el borde para situaciones especialmente exigentes.

Incorporación de la computación en borde

Aunque la mayoría de las personas y empresas poseen ordenadores personales y otro hardware, normalmente los utilizan mediante servicios centralizados en la nube. El objetivo principal del AWS Snowball original es transferir datos a la nube, pero los proveedores son llegando al límite de la mejora de las capacidades en la nube. Ahora que estas empresas han centralizado la nube a gran escala, las pequeñas limitaciones existentes se han hecho más evidentes. Por ejemplo, el límite de la velocidad de la luz provoca retrasos cortos pero perceptibles en todo, desde abrir el navegador hasta jugar online, mientras diversas señales recorren todo el mundo. Superar estas carencias ha dado lugar a la "computación en el borde" y al "edge inteligente". En este contexto, "borde" se refiere a ambos:

  • El borde figurado de la era de la computación en la nube
  • El límite geográfico literal, donde no es posible ni práctico depender de la nube debido a la ubicación

Además de transferir datos a la nube, un dispositivo de computación en el borde puede procesarlos localmente, asumiendo grandes cargas de trabajo informáticas. Realizar computación en el borde en o cerca de las fuentes de datos en lugar de transmitirlos a través del planeta a través de la nube reduce significativamente los retrasos. Esencialmente, la nube llega a te te ya no tiene que estar en el lugar correcto con el equipo adecuado. Algunos ejemplos de aplicaciones actuales de computación en el borde incluyen:

  • Cifrar y almacenar información en dispositivos como smartphones para deshacerse de la dependencia de la nube
  • Cargar y guardar localmente en sitios web antes de sincronizarlos periódicamente con la nube,
  • Ejecutar inteligencia artificial en dispositivos para Haz inteligentes sobre cómo utilizar la nube.

AWS Snowball Edge emplea esta tecnología proporcionando una mayor potencia de cálculo local y saltándose la descarga de Snowball Client en favor de cifrar automáticamente los datos en los dispositivos. Cada una de estas aplicaciones tiene muchos beneficios. Los usuarios Obtén servicios más rápidos y fiables. Las empresas aprovechan los beneficios de la computación híbrida flexible en la nube.

Beneficios de AWS Snowball Edge

Todos los dispositivos Snowball permiten la transferencia masiva de datos dentro y fuera del Simple Storage Service (S3) de Amazon, utilizan la misma interfaz de programación de aplicaciones (API) para la gestión de trabajos y cuentan con consolas similares. AWS Snowball Edge aporta funciones adicionales de computación en la periferia y mejora del almacenamiento local. Específicamente, permite:

  • Clúster de dispositivos
  • Computación local con AWS Lambda
  • Utilizar con AWS IoT Greengrass y Amazon Elastic Compute Cloud (EC2) instancias de cómputo

Capacidad de Snowball Edge

En cuanto a la capacidad de almacenamiento:

  • El dispositivo AWS Snowball solo ofrece 50 u 80 TB de capacidad, de los cuales 42 o 72 TB son utilizables, respectivamente.
  • El AWS Snowball Edge tiene 100 TB con 83 TB utilizables. (También está una opción agrupada de 100 TB que ofrece 45 TB utilizables por nodo.)

El clustering ofrece la capacidad de Lograr una durabilidad casi perfecta de los datos en 5-10 dispositivos mientras se incrementa o reduce el almacenamiento localmente bajo demanda. Aunque la idea y la ejecución de ambos dispositivos son bastante similares, AWS Snowball Edge no depende de descargar un cliente para realizar tareas. Si usas un adaptador Amazon S3 para Snowball, entonces el dispositivo AWS Snowball Edge viene con el cliente preinstalado. Luego cifra los datos automáticamente al transferirse al dispositivo AWS Snowball Edge, mientras que usar un cliente Snowball descargado cifra los datos en tu estación de trabajo antes de la transferencia al dispositivo Snowball.

Configuración del dispositivo Snowball Edge

El AWS Snowball Edge ofrece tres opciones de configuración de dispositivos para elegir:

  • Storage Optimized, que ofrece almacenamiento de objetos compatible con Amazon S3, almacenamiento en bloques y 24 vCPUs, es una buena opción tanto para transferencias de datos a gran escala como para almacenamiento local.
  • Compute Optimized están probablemente el mejor para aprendizaje automático avanzado y análisis de vídeo en movimiento completo, gracias a 52 vCPUs y almacenamiento de objetos y bloques.
  • Una GPU integrada opcional es un complemento a la versión optimizada para computación que mejora estas capacidades.

Además de la compatibilidad con Amazon S3, el endpoint Amazon EC2 soporta un subconjunto de acciones API para ejecutar y calcular instancias en AWS Snowball Edge. te también puede activar funciones Lambda en respuesta a eventos, permitiendo te ejecutar código sin ninguna administración.

Usando AWS Snowball Edge

Emparejar opciones de dispositivos con funciones AWS Lambda y tipos de instancia Amazon EC2 permite a los usuarios realizar desarrollo y pruebas en AWS antes de desplegar aplicaciones en dispositivos en cualquier ubicación. Los usos comunes de estas diversas opciones incluyen:

  • Migración y transporte de datos
  • Aprendizaje automático
  • Clasificación de imágenes
  • Captura de flujos de sensores IoT

Por ejemplo, algunas entidades que ya han aprovechado la tecnología AWS Snowball Edge incluyen Boeing y el equipo de investigación de la Universidad Estatal de Oregón. Boeing la puso a utiliza mientras volaba drones para capturar imágenes en zonas remotas. El AWS Snowball Edge les permitió preprocesar los datos en el momento antes de transferirlos a la nube para su análisis. De manera similar, el equipo de OSU necesitaba recopilar datos en un buque de investigación lejano, analizarlos y transferirlos a la nube tras llegar a casa. Si te estás pensando en hacer utiliza de la tecnología AWS Snowball Edge, investiga los pasos que te deberías seguir. te necesitarás Crea una cuenta AWS que incluya permisos de gestión de identidad y acceso AWS a nivel de administrador. Los archivos y carpetas te quieras transferir también deben seguir las convenciones de nombres de claves de objeto para Amazon S3. Los pasos exactos dependen de si te quieres importar datos, exportar datos o utiliza instancias de cálculo, así que infórmate sobre los detalles para asegurarte de te Obtén el trabajo se hace correctamente.

Lecturas relacionadas

Estas publicaciones son mías y no representan necesariamente la posición, estrategias u opinión de BMC.

Más de Nube

Suscríbete al Informe

Al registrarse para esta oferta te son confirmar que te leído y aceptado la Política de Privacidad de BMC.

Gracias te

Tú te has suscrito a The Brief
El Brief abarca la orquestación de mainframe y empresa—BMC AMI y Control-M—y la investigación de analistas, despliegues de clientes y eventos en ambas áreas.