Servicio de almacenamiento de objetos basado en la nube
Amazon S3 o Amazon Simple Storage Service es un servicio ofrecido por Amazon Web Services (AWS) que proporciona almacenamiento de objetos a través de una interfaz de servicio web . [1] [2] Amazon S3 utiliza la misma infraestructura de almacenamiento escalable que Amazon.com utiliza para ejecutar su red de comercio electrónico. [3] Amazon S3 puede almacenar cualquier tipo de objeto, lo que permite usos como almacenamiento para aplicaciones de Internet, copias de seguridad, recuperación ante desastres, archivos de datos, lagos de datos para análisis y almacenamiento en nube híbrida . AWS lanzó Amazon S3 en los Estados Unidos el 14 de marzo de 2006, [1] [4] luego en Europa en noviembre de 2007. [5]
Detalles técnicos
Diseño
Amazon S3 gestiona datos con una arquitectura de almacenamiento de objetos [6] cuyo objetivo es proporcionar escalabilidad , alta disponibilidad y baja latencia con alta durabilidad . [3] Las unidades de almacenamiento básicas de Amazon S3 son objetos que están organizados en depósitos. Cada objeto se identifica mediante una clave única asignada por el usuario. [7] Los depósitos se pueden administrar mediante la consola proporcionada por Amazon S3, mediante programación con AWS SDK o la interfaz de programación de aplicaciones REST . Los objetos pueden tener un tamaño de hasta cinco terabytes . [8] [9] Las solicitudes se autorizan mediante una lista de control de acceso asociada con cada depósito de objetos y control de versiones de soporte [10] que está deshabilitado de forma predeterminada. [11] Dado que los depósitos suelen tener el tamaño de un montaje de sistema de archivos completo en otros sistemas, este esquema de control de acceso es muy genérico. En otras palabras, los controles de acceso únicos no se pueden asociar con archivos individuales. [ cita necesaria ] Amazon S3 se puede utilizar para reemplazar la infraestructura de alojamiento web estática con objetos HTTP accesibles al cliente, [12] compatibilidad con documentos de índice y compatibilidad con documentos de error. [13]
El mecanismo de autenticación de Amazon AWS permite la creación de URL autenticadas, válidas por un período de tiempo específico. Cada elemento de un depósito también se puede servir como fuente BitTorrent . La tienda Amazon S3 puede actuar como host inicial para un torrent y cualquier cliente BitTorrent puede recuperar el archivo. Esto puede reducir drásticamente el coste del ancho de banda para la descarga de objetos populares. Se puede configurar un depósito para guardar información de registro HTTP en un depósito hermano; esto se puede utilizar en operaciones de minería de datos . [14] Existen varios sistemas de archivos basados en el sistema de archivos en modo de usuario (FUSE) para sistemas operativos tipo Unix (por ejemplo, Linux ) que se pueden usar para montar un depósito S3 como sistema de archivos. La semántica del sistema de archivos de Amazon S3 no es la de un sistema de archivos POSIX , por lo que es posible que el sistema de archivos no se comporte del todo como se esperaba. [15]
Clases de almacenamiento de Amazon S3
Amazon S3 ofrece nueve clases de almacenamiento diferentes con diferentes niveles de durabilidad, disponibilidad y requisitos de rendimiento. [dieciséis]
Amazon S3 Standard es el valor predeterminado. Es un almacenamiento de propósito general para datos a los que se accede con frecuencia.
Amazon S3 Express One Zone es un almacenamiento de latencia de milisegundos de un solo dígito para datos a los que se accede con frecuencia y aplicaciones sensibles a la latencia. Almacena datos solo en una zona de disponibilidad. [17]
Amazon S3 Standard-Infrequent Access (Standard-IA) está diseñado para datos a los que se accede con menos frecuencia, como copias de seguridad y datos de recuperación ante desastres.
Amazon S3 One Zone-Infrequent Access (One Zone-IA) funciona como Standard-IA, pero almacena datos solo en una zona de disponibilidad.
Amazon S3 Intelligent-Tiering mueve objetos automáticamente a una clase de almacenamiento más rentable.
Amazon S3 en Outposts brinda almacenamiento a instalaciones no alojadas en Amazon.
Amazon S3 Glacier Instant Retrieval es un almacenamiento de bajo costo para datos a los que rara vez se accede, pero que aún requiere una recuperación rápida.
Amazon S3 Glacier Flexible Retrieval también es una opción de bajo costo para datos de larga duración; Ofrece 3 velocidades de recuperación, que van desde minutos hasta horas.
Amazon S3 Glacier Deep Archive es el almacenamiento de menor costo para datos de archivo de larga duración al que se accede menos de una vez al año y se recupera de forma asincrónica.
Las clases de almacenamiento de Amazon S3 Glacier mencionadas anteriormente son distintas de Amazon Glacier , que es un producto independiente con sus propias API.
Límites de tamaño de archivo
Un objeto en S3 puede tener entre 0 bytes y 5 TB. Si un objeto tiene más de 5 TB, se debe dividir en partes antes de cargarlo. Al cargar, Amazon S3 permite un máximo de 5 GB en una sola operación de carga; por lo tanto, los objetos de más de 5 GB deben cargarse a través de la API de carga multiparte de S3. [18]
Usos
Usuarios notables
El servicio de alojamiento de fotografías SmugMug ha utilizado Amazon S3 desde abril de 2006. Experimentaron una serie de interrupciones y ralentizaciones iniciales, pero después de un año lo describieron como "considerablemente más confiable que nuestro propio almacenamiento interno" y afirmaron haber ahorrado casi $1 millón en costos de almacenamiento. [19]
Netflix utiliza Amazon S3 como sistema de registro . Netflix implementó una herramienta, S3mper, [20] para abordar las limitaciones de coherencia eventual de Amazon S3 . [21] S3mper almacena los metadatos del sistema de archivos: nombres de archivos, estructura de directorios y permisos en Amazon DynamoDB . [22]
Bitcasa , [24] y Tahoe-LAFS -on-S3, [25] entre otros, utilizan Amazon S3 para servicios de sincronización y respaldo en línea. En 2016, Dropbox dejó de utilizar los servicios de Amazon S3 y desarrolló su propio servidor en la nube. [26] [27]
La amplia adopción de Amazon S3 y herramientas relacionadas ha dado lugar a servicios competitivos basados en la API de S3. Estos servicios utilizan la interfaz de programación estándar, pero se diferencian por sus tecnologías subyacentes y modelos de negocio. [29] Una interfaz estándar permite una mejor competencia de proveedores rivales y permite economías de escala en la implementación, entre otros beneficios. [30]
Historia
En AWS Summit 2013 NYC, el CTO Werner Vogels anuncia 2 billones de objetos almacenados en S3.
Amazon Web Services introdujo Amazon S3 en 2006. [31] [32]
En noviembre de 2017, AWS agregó capacidades de cifrado predeterminadas a nivel de depósito. [40]
^ ab "Amazon Web Services lanza" Amazon S3"" (Presione soltar). 2006-03-14. Archivado desde el original el 15 de noviembre de 2018 . Consultado el 14 de noviembre de 2018 .
^ Huang, Dijiang; Wu, Huijun (8 de septiembre de 2017). Computación en la nube móvil: fundamentos y modelos de servicios. Morgan Kaufman. pag. 67.ISBN _9780128096444. Archivado desde el original el 15 de noviembre de 2018 . Consultado el 15 de noviembre de 2018 .
^ ab "Almacenamiento de objetos en la nube: almacene y recupere datos en cualquier lugar: servicio de almacenamiento simple de Amazon". Servicios web de Amazon, Inc. Archivado desde el original el 17 de mayo de 2018 . Consultado el 17 de mayo de 2018 .
^ "Cinco eventos clave en la historia de la computación en la nube - DZone Cloud". dzone.com . Archivado desde el original el 29 de septiembre de 2018 . Consultado el 28 de septiembre de 2018 .
^ "Amazon Web Services ofrece almacenamiento europeo para Amazon S3" (Presione soltar). 2007-11-06. Archivado desde el original el 15 de noviembre de 2018 . Consultado el 14 de noviembre de 2018 .
^ "¿Qué es el almacenamiento de objetos en la nube? - AWS". Servicios web de Amazon, Inc. 2019-10-16. Archivado desde el original el 2018-09-20 . Consultado el 9 de julio de 2018 .
^ "Blog de tecnología» Iniciar Websphere en la nube y guardar los datos en S3 ". techblog.aasisvinayak.com . Archivado desde el original el 12 de marzo de 2010.
^ "guías abiertas / og-aws". GitHub . Archivado desde el original el 3 de enero de 2018 . Consultado el 17 de mayo de 2018 .
^ "Respuestas de error: servicio de almacenamiento simple de Amazon". docs.aws.amazon.com . Archivado desde el original el 24 de diciembre de 2017 . Consultado el 21 de mayo de 2018 .
^ "Uso de control de versiones en depósitos S3: Amazon Simple Storage Service".
^ "Introducción a Amazon S3: servicio de almacenamiento simple de Amazon". docs.aws.amazon.com . Archivado desde el original el 12 de mayo de 2018 . Consultado el 17 de mayo de 2018 .
^ "Cómo utilizar Amazon S3 para alojamiento web". cuboexplorer.com . Archivado desde el original el 8 de abril de 2008 . Consultado el 6 de mayo de 2008 .
^ Servicio de almacenamiento simple de Amazon Archivado el 20 de febrero de 2011 en Wayback Machine Docs.amazonwebservices.com. Recuperado el 9 de agosto de 2013.
^ http://docs.aws.amazon.com/AmazonS3/latest/dev/ServerLogs.html Archivado el 23 de diciembre de 2014 en el registro de acceso al servidor de Wayback Machine.
^ "Comparación de S3QL y otros sistemas de archivos S3". Archivado desde el original el 5 de agosto de 2012 . Consultado el 29 de junio de 2012 .
^ "Clases de almacenamiento en la nube - Servicio de almacenamiento simple de Amazon (S3) - AWS". Servicios web de Amazon, Inc. Archivado desde el original el 13 de junio de 2018 . Consultado el 17 de mayo de 2018 .
^ "Anuncio de la nueva clase de almacenamiento de alto rendimiento Amazon S3 Express One Zone | Blog de noticias de AWS". aws.amazon.com . 2023-11-28 . Consultado el 1 de diciembre de 2023 .
^ "Cómo cargar archivos grandes en S3". 21 de junio de 2022. Archivado desde el original el 1 de octubre de 2022 . Consultado el 22 de junio de 2022 .
^ "Amazon S3: muéstrame el dinero". Blog presumido . Taza engreída. 10 de noviembre de 2006. Archivado desde el original el 3 de marzo de 2017 . Consultado el 3 de marzo de 2017 .
^ "S3mper: coherencia en la nube". Archivado desde el original el 24 de abril de 2016 . Consultado el 1 de mayo de 2016 .
^ "Introducción a Amazon S3". Amazonas . Archivado desde el original el 25 de diciembre de 2017 . Consultado el 28 de diciembre de 2017 .
^ Hern, Alex (2 de febrero de 2017). "Amazon Web Services: el secreto del éxito futuro del minorista online". el guardián . Archivado desde el original el 2018-05-02 . Consultado el 23 de abril de 2018 .
^ "Estudio de caso de AWS: reddit". aws.amazon.com . 2015. Archivado desde el original el 17 de marzo de 2015 . Consultado el 18 de marzo de 2015 .
^ "Bitcasa Legal". 16 de mayo de 2013. Archivado desde el original el 28 de junio de 2013 . Consultado el 16 de mayo de 2013 .
^ "¿Qué es Tahoe-LAFS-on-S3?". 21 de agosto de 2012. Archivado desde el original el 6 de mayo de 2013 . Consultado el 21 de agosto de 2012 .
^ "La historia épica del éxodo de Dropbox del imperio de la nube de Amazon". CABLEADO . Archivado desde el original el 25 de enero de 2018 . Consultado el 23 de abril de 2018 .
^ "Dropbox ahorró casi 75 millones de dólares en dos años al construir su propia infraestructura tecnológica". GeekWire . 2018-02-23. Archivado desde el original el 23 de abril de 2018 . Consultado el 23 de abril de 2018 .
^ "Swiftype explica su pila de nubes". 1 de julio de 2013. Archivado desde el original el 8 de diciembre de 2014 . Consultado el 8 de diciembre de 2014 .
^ Watters, Audrey (12 de julio de 2010). "Debates de la comunidad en la nube: ¿Es la API de Amazon S3 el estándar? (¿Y debería serlo?)". SAY Media, Inc. Archivado desde el original el 17 de febrero de 2013 . Consultado el 19 de diciembre de 2012 .
^ Encrucijada de estándares de tecnología de la información. Comité de Planificación de Talleres de Normas, Junta de Telecomunicaciones y Aplicaciones Informáticas, Comisión de Ingeniería y Sistemas Técnicos, Consejo Nacional de Investigaciones. Washington, DC: The National Academies Press, 1990. 1990, págs. 36–37. doi :10.17226/10440. ISBN978-0-309-58171-4. Archivado desde el original el 25 de marzo de 2014 . Consultado el 25 de marzo de 2014 .{{cite book}}: Mantenimiento CS1: otros ( enlace )
^ Descripción general de los servicios web de Amazon, 2018, https://docs.aws.amazon.com/whitepapers/latest/aws-overview/introduction.html Archivado el 18 de noviembre de 2017 en Wayback Machine.
^ Garfinkel, Simson L. 2007. Una evaluación de los servicios de computación grid de Amazon: EC2, S3 y SQS. Informe técnico TR-08-07 del Grupo de Ciencias de la Computación de Harvard. https://dash.harvard.edu/bitstream/handle/1/24829568/tr-08-07.pdf?sequence=1 Archivado el 29 de julio de 2018 en Wayback Machine.
^ ab Vogels, Werner (19 de marzo de 2008). "¡Feliz cumpleaños, Amazon S3!". Todas las cosas distribuidas . Archivado desde el original el 9 de mayo de 2008 . Consultado el 23 de mayo de 2008 .
^ "Amazon S3: más ocupado que nunca". 2008-10-08. Archivado desde el original el 11 de octubre de 2008 . Consultado el 9 de octubre de 2008 .
^ "Celebrando el tercer cumpleaños del S3 con precios especiales de aniversario: Amazon Web Services". typepad.com . 31 de marzo de 2009. Archivado desde el original el 7 de julio de 2011 . Consultado el 1 de abril de 2009 .
^ "Amazon S3 ahora alberga 100 mil millones de objetos". datacenterknowledge.com . 9 de marzo de 2010. Archivado desde el original el 12 de marzo de 2010 . Consultado el 9 de marzo de 2010 .
^ "Amazon S3: dos billones de objetos, 1,1 millones de solicitudes por segundo: servicios web de Amazon". typepad.com . 18 de abril de 2013.
^ "Celebre los 15 años de Amazon S3 con eventos de transmisión en vivo de la 'Pi Week'". amazon.com . 14 de marzo de 2021.
^ "Nuevas funciones de seguridad y cifrado de Amazon S3". 6 de noviembre de 2017.
Fuentes
"Registro de acceso al servidor".
"Guía para desarrolladores de Amazon S3". 2006-03-01.
"Amazon S3 presenta niveles de precios de almacenamiento". 2008-10-08.
"Biblioteca RightScale Ruby para acceder a Amazon CloudFront, EC2, S3, SQS y SDB". 2007-10-27. Archivado desde el original el 3 de noviembre de 2008 . Consultado el 7 de enero de 2009 .
