Dosyalar doğrudan bir S3 hesabından diğerine mi taşınsın?

Oldukça basit bir soru ama bir cevap bulamadım. Transit'i kullanarak dosyaları bir AWS hesabındaki bir S3 klasöründen başka bir AWS hesabındaki başka bir S3 klasörüne "taşıyabilirim", ancak aslında yaptığı şey dosyaları ilkinden indirip ardından ikinciye yüklemektir.

Dosyaları aralarında indirmeden doğrudan bir S3 hesabından diğerine taşımanın bir yolu var mı?

Sadece hazır bir çözüm arıyorsanız, bunu yapabilecek birkaç çözüm var. Bucket Explorer , Mac ve Windows üzerinde çalışır ve Cloudberry S3 Explorer ve S3 Tarayıcısı gibi hesaplar arasında kopyalayabilir, ancak bunlar yalnızca Windows olduğundan sizin için çalışmayabilir.

AWS konsolunun da bunu uygun izin kurulumuyla yapabileceğinden şüpheleniyorum ancak bunu test etmedim.

AWS hesabına hedef pakete yazma izinleri vermiş olduğunuz sürece bunu AWS API'yi kullanarak da yapabilirsiniz .

Evet, bir yolu var. Bulması zor olsa da oldukça basit. 8)

Örneğin, ilk hesap kullanıcı adınızın acc1@gmail.com ve ikincisi acc2@gmail.com olduğunu varsayalım.

Açık AWS Yönetim Konsolu ACC1 olarak. Amazon S3 klasör özelliklerine gidin ve "İzinler" sekmesinde "Daha fazla izin ekle" yi tıklayın. Ardından "Kimliği Doğrulanan Kullanıcılar" için Liste ve Görünüm İzinlerini ekleyin.

Daha sonra, acc2'nin AWS IAM'sinde (konsol sekmelerinden erişilebilir) S3 klasörüne tam erişime sahip bir kullanıcı oluşturun (daha güvenli olmak için tam izinleri ayarlayabilirsiniz, ancak aktarım için geçici bir kullanıcı oluşturmayı tercih ediyorum ve sonra silin).

Sonra s3cmd'yi ( acc2'de yeni oluşturulan kullanıcının kimlik bilgilerini kullanarak) aşağıdaki gibi bir şey yapmak için kullanabilirsiniz:

s3cmd cp s3://acc1_bucket/folder/ s3://acc2_bucket/folder --recursive

Tüm transferler Amazon tarafında yapılacaktır.

Kullan aws cli (ben 14 EC2 örneği ubuntu kullanılır) ve sadece aşağıdaki komutu çalıştırın:

aws s3 sync s3://bucket1 s3://bucket2

Birinin hesap ayrıntılarını belirtmeniz ve diğerine genel yazma veya genel okuma erişiminizin olması gerekir.

Bu, iki grubu senkronize edecektir. Hızlı bir şekilde senkronize etmek için aynı komutu daha sonra tekrar kullanabilirsiniz. En iyi yanı, herhangi bir bant genişliği gerektirmiyor gibi görünmesidir (örneğin, dosyalar yerel bilgisayardan geçmiyor).

boto iyi çalışıyor. Bu konuya bakın . Boto kullanarak, nesneleri yerel makineye indirmek ve başka bir kovaya yüklemek yerine doğrudan bir kovadan diğerine kopyalarsınız.

Mac OS XI'de Panic'in Transmit uygulamasını kullandı. Her S3 hesabı için bir pencere açtım (API Anahtarlarını ve sırlarını kullanarak). Daha sonra bir pencerede bir kovadan diğer pencerede başka bir kovaya sürükleyebilirim. Önce dosyaları yerel olarak indirmeye gerek yok .

Andrew haklı, Transmit dosyaları yerel olarak indiriyor ve ardından dosyaları karşıya yüklüyor.

S3 dosyalarını bir hesaptan başka bir hesaba taşıyın

İki hesap kaynak hesabı ve hedef hesap olduğunu düşünelim. Ve iki kova source-bucketve destination bucket. Biz gelen tüm dosyaları taşımak istediğiniz source-bucketiçin destination-bucket. Bunu aşağıdaki adımlarla yapabiliriz:

1. aws configure
   • Kimlik bilgilerini veya IAM rolünü kullanarak hedef hesabınızı yapılandırın.
2. Hedef hesap kullanıcısı için kullanıcı politikası oluşturun.
3. Kaynak paket politikasını değiştirerek ve hedef hesap kullanıcı politikasını buna ekleyerek hedef kullanıcıya kaynak paketine erişim verin. Bu şekilde, hedef kullanıcının kaynak paketine erişimi olacaktır.
4. aws s3 ls s3://source-bucket/
   • bu, hedef hesabın kaynak paketine erişiminin olup olmadığını kontrol edecektir. Sadece onay için bunu yapın.
5. aws s3 cp s3://source-bucket s3://destination-bucket --recursive
   • bu, kaynak paketini tüm dosyaları hedef pakete kopyalar. Tüm dosyalar --recursive bayrağı kullanılarak kopyalanır.
6. aws s3 mv s3://source-bucket s3://destination-bucket --recursive
   • bu, tüm dosyaları kaynak paketinden hedef pakete taşır.

Alternatif olarak, sync komutunu kullanabilirsiniz - aws s3 sync s3://source-bucket s3://detination-bucket

Daha İyi Açıklama için bağlantıyı takip edin

CrossFTP , S3 dosyalarını indirmeden doğrudan bir paketten diğerine kopyalayabilir. Windows, Mac ve Linux üzerinde çalışan bir GUI S3 istemcisidir.

Cyberduck'u kullanabilirsiniz (açık kaynak)

Yeni oluşturulan dosyalar için (mevcut nesneler DEĞİL), AWS'nin yeni işlevlerinden yararlanabilirsiniz. Bölgeler Arası Replikasyondur (S3 paketi için "Sürüm Oluşturma" altında). Yeni nesneleri farklı bir hesaptaki bir pakete kopyalamanıza izin verecek bir politika oluşturabilirsiniz.

Mevcut nesneler için, AWS gelecekte bunun için yerel işlevsellik sunmadığı sürece, nesnelerinizi başka bir yöntem kullanarak kopyalamanız gerekecektir.

Aşağıdakileri çalıştırarak bunu yapabilirsiniz:

aws s3 mv (sync for keeping buckets in sync) s3://source-bucket s3://destination-bucket --recursive

1. Kaynak Hesap'taki kaynak pakete bir paket politikası ekleyin.

2. Hedef Hesaptaki bir kullanıcıya veya role bir AWS Identity and Access Management (IAM) politikası ekleyin.

3. Hesaplar arası taşıma işlemini gerçekleştirmek için Hedef Hesap'ta IAM kullanıcısını veya rolünü kullanın.