Amazon S3 (service de stockage simple) est un service de stockage d'objets en ligne d'Amazon Web Services. LES QUESTIONS DOIVENT ETRE CONCERNANT LA PROGRAMMATION. Les questions sur le support général S3, la fonctionnalité, la configuration, etc. sont HORS-SUJET.

amazon-s3...

Je pratique les commandes AWS. Mon client m'a donné la clé d'accès AWS IAM et le secret, mais pas le compte que je peux me connecter au panneau d'administration. Ces clés sont utilisées avec le projet lui-même. Ce que j'essaie de faire, c'est que j'essaie de répertorier tous les fichiers récursifs d....
7 janv. 2020 à 21:45
Je peux télécharger un dossier s3 avec aws cli comme ceci: aws s3 cp --recursive s3://bucketname/custom-folder /tmp Mais je ne peux pas lister les fichiers de dossiers de la bibliothèque boto3: import boto3 s3 = boto3.resource('s3') bucket = s3.Bucket('my-bucket') for obj in bucket.objects.all(): ....
J'ai un dossier avec des To de données structurées et ils adhèrent tous à un schéma fixe. La structure des dossiers est la suivante: s3://main-bucket/ folder-1/ <= One folder will only contain data from one algorithm part-0000-1.csv <= Created on 06/01....
J'ai un ancien code ci-dessous qui compresse un fichier et le stocke sous json dans S3, en utilisant la bibliothèque IO (donc un fichier n'est pas enregistré localement). J'ai du mal à convertir cette même approche (c'est-à-dire en utilisant la bibliothèque IO pour un tampon) pour créer un fichier .....
31 déc. 2019 à 07:38
Tout d'abord, je suis conscient de ces questions: Accorder l'accès à l'instance EC2 au compartiment S3 Impossible d'accéder au compartiment s3 à l'aide du rôle IAM à partir d'une instance ec2 Accès refusé lors de l'appel de l'opération PutObject avec autorisation au niveau du compartiment Mais les s....
22 déc. 2019 à 19:43
Je stocke des données de séries chronologiques dans des tables DynamoDB générées quotidiennement ( Exemple ). La convention de dénomination des tables est "timeseries_2019-12-20", où 2019-12-20 prend la date du jour en cours. Je souhaite envoyer la table des jours précédents à un compartiment S3 au ....
22 déc. 2019 à 01:55
J'ai une grande expérience de travail avec les tables partitionnées Hive. J'utilise Hive 2.X. J'ai passé un entretien à un poste de Big Data Solution Architect et on m'a posé la question ci-dessous. Question: Comment ingéreriez-vous des données en streaming dans une table Hive partitionnée à la da....
Le script récupère le pdf à partir d'un site (analyse via XML) et j'essaie de les télécharger automatiquement dans le compartiment S3 et un dossier spécifique. Je peux obtenir des fichiers à partir d'une URL avec un nom de fichier généré spécifiquement, mais je ne peux pas obtenir un format de ligne....
21 déc. 2019 à 05:30
J'essaie d'utiliser AWS S3 pour contourner la politique CORS avec un document html. Je rencontre un problème où mon document HTML ne peut pas référencer les fichiers JavaScript et CSS dans le même compartiment. La seule façon dont j'ai pu autoriser cela jusqu'à présent était d'autoriser l'accès publ....
20 déc. 2019 à 23:32
J'ai essayé Le téléchargement de Java JDK sur Linux via wget s'affiche à la place sur la page de licence mais je reçois toujours une erreur 404. Cette commande "sudo amazon-linux-extras install java-openjdk11" indique simplement que amazon-linux-extras n'existe pas.....
J'ai des données avec un format très particulier (par exemple, des fichiers tdms générés par les systèmes NI) et je les ai stockés dans un compartiment S3. En règle générale, pour lire ces données en python si les données étaient stockées sur mon ordinateur local, j'utiliserais le package npTDMS. Ma....
20 déc. 2019 à 22:41
J'écris une route Camel où j'essaie d'utiliser le composant aws-s3 pour écrire des données dans un compartiment S3. J'ai deux questions: Documentation suggestions que ce composant est disponible depuis Camel 2.8. Cependant, le maven central a seulement la version 3.0.0 J'utilise Camel version 2.22.0....
20 déc. 2019 à 20:05
J'essaie d'accéder à l'URL signée AWS S3 à l'aide d'une API wrapper créée dans Node JS et Express. Je redirige une URL pour appeler l'API Node à l'aide de nginx. Dans Node API, je définis les en-têtes de réponse «Content-Type» en fonction du type de fichier renvoyé par l'URL S3 avant de renvoyer le ....
J'écris une application de réaction (une seule page) avec create-react-app et elle appelle ma API qui est la passerelle AWS api et AWS lambda. J'essaie d'héberger l'application React avec un hébergement statique AWS s3. Lors du développement local, les demandes (avec axios) à mon API sont bloquées e....
19 déc. 2019 à 20:48
J'ai utilisé le code «go» suivant (Lambda) pour copier un fichier, «Sample.txt», du compartiment S3 sur un compte vers le compartiment S3 sur un autre compte. Cela fonctionne comme prévu, c'est-à-dire qu'il copie 'Sample.txt' du compartiment source et télécharge 'NewSample.txt' dans le compartiment ....
19 déc. 2019 à 14:25
Je dois déployer le contenu statique de mon application dans le compartiment AWS S3. J'obtiens cette erreur Erreur: Bucket mybucketname.s3.amazonaws.com n'existe pas. J'ai créé une connexion de service et je l'utilise dans la tâche. Je peux accéder au compartiment directement via Cyberduck Tool avec....
Je suis désolé pour mon anglais. J'ai besoin d'une compétence alexa qui lit le contenu d'un fichier txt. Je pense que la meilleure solution est d'avoir le fichier sur S3, mais je ne trouve aucun guide sur la façon d'accéder au fichier et de laisser alexa le lire. J'essaye de différentes manières pou....
19 déc. 2019 à 03:01
J'ai configuré une redirection S3 vers un autre domaine, mais cela fait un 301 qui va me gâcher plus tard lorsque je devrai changer cela. Utiliser au moins un 302 me donne la possibilité de le changer plus tard. Existe-t-il un moyen de le faire sur CloudFront ou d'obtenir que S3 le fasse?....
19 déc. 2019 à 02:58
J'ai beaucoup de contenu statique dans un compartiment S3 qui n'a pas d'accès public en lecture. Je souhaite donner accès à ce contenu en générant des URL signées. J'utilise la bibliothèque python et boto3 pour la plupart des cas d'utilisation. J'ai cependant quelques requêtes SQL brutes qui tirent ....
19 déc. 2019 à 02:19
J'ai (2 To) dans 20k fichiers en s3 créés au cours de la journée que je dois charger sur BigQuery pour dater la table de partition. Les fichiers sont survolés toutes les 5 minutes. Quel est le moyen le plus rentable d’acheminer des données vers BigQuery? Je recherche l'optimisation des coûts dans la....
J'essaie actuellement d'héberger un fichier html en tant que site Web sur AWS S3 pour contourner la politique CORS. Lorsque je mets tous mes documents dans un nouveau bucket, le fichier html s'ouvre sans accéder au css ou javascript qui se trouve dans le bucket avec lui. Lorsque j'ouvre le fichier e....
J'essaie de déclencher une Lambda une fois que j'ai obtenu un fichier dans un compartiment s3. Pour cela, j'ai configuré l'événement dans le compartiment s3. Mais, je dois donner une entrée à la Lambda (événement) qui sera déclenchée. Comment je fais ça?....
J'ai créé cloudtrail dans la région us-east-1 mais j'ai donné le seau s3 qui est de la région south-ap-1. Cela créera-t-il un problème pour cloudtrail de mettre les journaux dans un seau qui se trouve dans une région différente? Actuellement, je fais face à un tel problème.....
18 déc. 2019 à 15:21
J'essaie de lire un fichier de S3, qui contient le contenu suivant: {"empID":{"n":"7"},"name":{"s":"NewEntry"}} {"empID":{"n":"3"},"name":{"s":"manish"}} {"empID":{"n":"2"},"name":{"s":"mandeep"}} {"empID":{"n":"4"},"name":{"s":"Vikas"}} {"empID":{"n":"1"},"name":{"s":"babbar"}} Je v....
18 déc. 2019 à 12:11
J'utilise ASP.NET Core et le package de nuget AWSSDK.S3. Je peux télécharger un fichier en fournissant accessKeyID , secretKey , bucketName et région Comme ça: var credentials = new BasicAWSCredentials(accessKeyID, secretKey); using (var client = new AmazonS3Client(credentials, RegionEndpo....
18 déc. 2019 à 11:25