amazon-s3 Tutorial
Erste Schritte mit amazon-s3

Bemerkungen

Versionen

Installation von AWS CLI für den Zugriff auf S3

Installieren von aws cli in der Ubuntu / Debian-Instanz

sudo apt-get install -y python-dev python-pip
sudo pip install awscli
aws --version
aws configure

Installieren von aws cli mit Python

Mit pip können Sie aws cli in Windows, OS X und Linux installieren

sudo pip install awscli

Konfigurieren der AWS-Befehlszeilenschnittstelle

In diesem Abschnitt wird erläutert, wie Sie Einstellungen konfigurieren, die von der AWS Command Line Interface bei der Interaktion mit AWS verwendet werden, z.

$ aws configure
AWS Access Key ID [None]: <Your access key >
AWS Secret Access Key [None]: <Your secret key>
Default region name [None]: us-west-2
Default output format [None]: json

Rufen Sie den Zugriffsschlüssel und den geheimen Schlüssel von der Kontoseite in AWS ab

Eimer erstellen

Verwenden Sie den Befehl aws s3 mb, um einen neuen Bucket zu erstellen. Bucket-Namen müssen eindeutig sein und sollten DNS-kompatibel sein. Bucket-Namen können Kleinbuchstaben, Zahlen, Bindestriche und Punkte enthalten

aws s3 mb s3://bucket-name

Eimer entfernen

Verwenden Sie zum Entfernen eines Buckets den Befehl aws s3 rb. Standardmäßig sollte der Bucket leer sein.

aws s3 rb s3://bucket-name

Um einen nicht leeren Bucket zu entfernen, müssen Sie die Option --force angeben.

aws s3 rb s3://bucket-name --force

Buckets auflisten

Verwenden Sie zum Auflisten aller Buckets oder ihres Inhalts den Befehl aws s3 ls

aws s3 ls
aws s3 ls s3://bucket-name

Der folgende Befehl listet die Objekte in Bucket-Name / Pfad auf

aws s3 ls s3://bucket-name/path

Dateien zwischen dem lokalen Dateisystem und S3 synchronisieren

aws s3 sync . s3://my-bucket/path 

Alle Dateien im aktuellen Verzeichnis werden in S3 hochgeladen. Um die Dateien von S3 in das aktuelle Verzeichnis herunterzuladen, führen Sie sie aus

aws s3 sync s3://my-bucket/path .

AWS CLI S3-Befehlsliste

Liste der häufig verwendeten S3 AWS CLI-Befehle

Eimer erstellen

aws s3 mb s3://bucket-name

Eimer entfernen

aws s3 rb s3://bucket-name

Eimer auflisten

aws s3 ls

Den Inhalt im Eimer auflisten

aws s3 ls s3://bucket-name

Listeneimer mit einem Pfad

aws s3 ls s3://bucket-name/path

Datei kopieren

aws s3 cp file.txt s3://my-bucket/ 

Dateien synchronisieren

aws s3 sync . s3://my-bucket/path

Lokale Datei löschen

rm ./MyFile1.txt

Versuchen Sie die Synchronisierung ohne die Option --delete - nichts passiert

aws s3 sync . s3://my-bucket/path

Mit Löschen synchronisieren - Objekt wird aus dem Bucket gelöscht

aws s3 sync . s3://my-bucket/path --delete

Objekt aus dem Bucket löschen

aws s3 rm s3://my-bucket/path/MySubdirectory/MyFile3.txt

Mit Löschen synchronisieren - Lokale Datei wird gelöscht

aws s3 sync s3://my-bucket/path . --delete

Synchronisierung mit der Speicherklasse für seltenen Zugriff

aws s3 sync . s3://my-bucket/path --storage-class STANDARD_IA

Kopieren Sie MyFile.txt im aktuellen Verzeichnis nach s3: // my-bucket / path

aws s3 cp MyFile.txt s3://my-bucket/path/

Verschieben Sie alle JPG-Dateien in s3: // Mein Bucket / Pfad nach ./MyDirectory

aws s3 mv s3://my-bucket/path ./MyDirectory --exclude '*' --include '*.jpg' --recursive

Listen Sie den Inhalt von my-bucket auf

aws s3 ls s3://my-bucket

Listen Sie den Inhalt des Pfads in my-bucket auf

aws s3 ls s3://my-bucket/path

Löschen Sie s3: //my-bucket/path/MyFile.txt

aws s3 rm s3://my-bucket/path/MyFile.txt

Löschen Sie s3: // mein Bucket / Pfad und seinen gesamten Inhalt

aws s3 rm s3://my-bucket/path --recursive

Hello World Beispiel mit Java

In diesem Beispiel wird versucht, einen Bucket namens "Hallo-Welt" zu erstellen. Da die Hallo-Welt des Buckets bereits von einer anderen Person im globalen Namespace von S3 erstellt wurde, wird die folgende Ausnahme ausgelöst. Ändern Sie "Hallo-Welt" in etwas anderes, um die Ausnahme zu vermeiden, indem Sie einen eindeutig benannten Bucket erstellen. Der so erstellte neue Bucket kann mit der AWS-Konsole gelöscht werden

Ausnahme im Thread "main" com.amazonaws.services.s3.model.AmazonS3Exception: Der angeforderte Bucket-Name ist nicht verfügbar. Der Bucket-Namespace wird von allen Benutzern des Systems gemeinsam genutzt. Bitte wählen Sie einen anderen Namen und versuchen Sie es erneut. (Dienst: Amazon S3; Statuscode: 409; Fehlercode: BucketAlreadyExists; Anforderungs-ID: ...

           import com.amazonaws.services.s3.AmazonS3;
           import com.amazonaws.services.s3.AmazonS3ClientBuilder;
           import com.amazonaws.services.s3.model.CreateBucketRequest;
           import com.amazonaws.services.s3.model.Bucket;

            /** S3 "hello world" example. */
            public class S3Hello {

                    /** Name of hello-world bucket -- must be globally unique.  The
                     *  bucket namespace is shared by all users of the system.
                     */
                    static final String BUCKET_NAME = "hello-world";

                    /** Creates bucket
                     *  @param args Command line arguments
                     */
                    public static void main(final String[] args) {

                            AmazonS3 s3 = AmazonS3ClientBuilder.defaultClient();

                            CreateBucketRequest request
                                 = new CreateBucketRequest(BUCKET_NAME);

                            Bucket bucket = s3.createBucket(request);
                            System.out.println("S3 Hello World completed.");
                    }
            }

Dieses Beispiel erfordert die folgenden Abhängigkeiten:

• Java installiert, wenn die Konsole funktioniert.
• AWS Java SDK installiert. https://aws.amazon.com/sdk-for-java/
• Anmeldedaten für credentials , die in .aws unter Ihrem Basisverzeichnis eingerichtet werden. https://aws.amazon.com/developers/getting-started/java/
• Berechtigungsnachweis für Administratorrechte oder "Bucket-Rechte" in S3. http://docs.aws.amazon.com/AmazonS3/latest/dev/using-with-s3-actions.html#using-with-s3-actions- related-to-buckets

Hallo Welt mit PowerShell

In diesem Beispiel wird ein Fehler erwartet, da der Bucket Hallo-Welt bereits vorhanden ist und S3 einen globalen Namespace verwendet.

    New-S3Bucket -BucketName "hello-world"

New-S3Bucket: Der angeforderte Bucket-Name ist nicht verfügbar. Der Bucket-Namespace wird von allen Benutzern des Systems gemeinsam genutzt. Bitte wählen Sie einen anderen Namen und versuchen Sie es erneut.

Wenn Sie hallo-world durch etwas anderes ersetzen, das einzigartig ist, wird der Bucket fehlerfrei erstellt, und Sie erhalten folgendes Ergebnis:

    CreationDate                                      BucketName
    ------------                                      ----------
    3/30/2017 11:43:03 PM                             hello-world-832jklsdJF

Dieses Beispiel erfordert die folgenden Abhängigkeiten:

• Power Shell. Siehe http://docs.aws.amazon.com/powershell/latest/userguide/pstools-getting-set-up.html

• Referenzen. Diese können mit der AWS-Konsole erstellt werden. Es gibt mehrere Möglichkeiten, diese mit PowerShell zu verwalten. Nachfolgend finden Sie ein einfaches Beispiel für das Setup. Siehe http://docs.aws.amazon.com/powershell/latest/userguide/specifying-your-aws-credentials.html

    PS C:\> Set-AWSCredentials -AccessKey AKIAIOSFODNN7LAJD8A 
           -SecretKey  "wJalrXUtnFEMI/K7MDENG/bPxRfiCYEjw9JFKS3" -StoreAs default