使用AWS -cpp-sdk上传avi文件到AWS S3

Uploading avi file to AWS S3 using aws-cpp-sdk

本文关键字:AWS S3 文件 上传 -cpp-sdk 使用 avi      更新时间:2023-10-16

我尝试使用以下代码将avi文件上传到aws s3存储

#include <aws/core/utils/HashingUtils.h>
#include <aws/core/Aws.h>
#include <aws/s3/S3Client.h>
#include <aws/s3/model/PutObjectRequest.h>
#include <aws/s3/model/CreateBucketRequest.h>
#include <iostream>
#include <fstream>
using namespace Aws::S3::Model;
using namespace std;
using namespace Aws::Utils;
static const char* KEY = "test.avi";//"s3_cpp_sample_key";
static const char* BUCKET = "testnmn";//"s3-cpp-sample-bucket";
int main()
{
    Aws::SDKOptions options;
    Aws::InitAPI(options);   

    const Aws::String key_name = KEY;
    const Aws::String dir_name = "/home/Softwares/Projects/S3upload/build";
    Aws::S3::S3Client s3_client;
    Aws::S3::Model::CreateBucketRequest bucket_request;
    bucket_request.WithBucket("testavinmn");
    auto create_bucket_outcome1 = s3_client.CreateBucket(bucket_request);
    if(create_bucket_outcome1.IsSuccess()) {
        std::cout << "Done!" << std::endl;
    }
    else {
        std::cout << "CreateBucket error: " <<
            create_bucket_outcome1.GetError().GetExceptionName() << std::endl <<
            create_bucket_outcome1.GetError().GetMessage() << std::endl;
    }
    Aws::S3::Model::PutObjectRequest object_request;
    object_request.WithBucket("testavinmn").WithKey(key_name);
    auto input_data = Aws::MakeShared<Aws::FStream>(key_name.c_str(), dir_name.c_str(), std::ios_base::in);
    object_request.SetBody(input_data);
    object_request.SetContentType("avi");
    object_request.SetContentLength(static_cast<long>(object_request.GetBody()->tellg()));
    object_request.SetContentMD5(HashingUtils::Base64Encode(HashingUtils::CalculateMD5(*object_request.GetBody())));
    auto put_object_outcome = s3_client.PutObject(object_request);
    if(put_object_outcome.IsSuccess()) {
        std::cout << "Done!" << std::endl;
    }
    else {
         std::cout << "PutObject error: " <<
             put_object_outcome.GetError().GetExceptionName() << " " <<
             put_object_outcome.GetError().GetMessage() << std::endl;
    }
    Aws::ShutdownAPI(options);
    return 0;  
}

代码有几个问题。

(1)第一个是它必须创建一个桶,并将对象放入新创建的桶中。它不能将对象放入现有的桶中。原因可能是由于现有存储桶的区域。如何选择现有桶的区域,以便将对象放入该现有桶中?有c++ api吗?

(2)第二个问题是上传的对象有0字节的数据。对于这个问题,input_data必须打开并读取要上传的文件。如何在aws-cpp-sdk中打开和读取文件?

谢谢

要设置您的区域,您可以使用ClientConfiguration结构,并在创建S3客户机时将该对象传递为:

Aws::Client::ClientConfiguration myConf;
myConf.region = Aws::Region::US_WEST_2;
Aws::S3::S3Client s3_client(myConf);

关于0字节的问题,作为一种解决方法,您可以尝试使用std::fstream对象并设置内容长度:

auto input_data = std::make_shared<std::fstream> (key_name.c_str(),std::ios_base::in);
input_data->seekp(0, std::ios_base::end);
object_request.SetBody(input_data);
object_request.SetContentLength(static_cast<long>(object_request.GetBody()->tellp()));
关于你的第一个问题:如果其他答案不起作用,请尝试设置endpointOverride变量以包含桶的完整路径:
Aws::Client::ClientConfiguration cc;
cc.region = Aws::Region::EU_WEST_1;
cc.endpointOverride = "s3-eu-west-1.amazonaws.com/<bucket_name>";
Aws::S3::S3Client s3_client(cc);

关于第二个问题,您可以使用常规的c++ fstream,并使用ios_base::ate标志:

打开它。
std::shared_ptr<std::fstream> input_data =
     std::make_shared<std::fstream>(full_path.c_str(),
          std::ios_base::in | std::ios_base::ate);
object_request.SetContentLength(input_data->tellg());
object_request.SetBody(input_data);