本文介绍了在使用Java上传S3服务器时遇到的中文文件名上传失败的错误,分析了可能的原因,包括UTF-8与GBK编码不匹配、S3的已知bug、认证问题等。通过尝试不同解决方案,最终使用TransferManager成功解决了问题。 摘要由CSDN通过智能技术生成

一开始的时候,使用

amazonS3.putObject(request.withGeneralProgressListener(new ProgressListener() {
    long readedbyte = 0;
    @Override
    public void progressChanged(ProgressEvent progressEvent) {
        readedbyte += progressEvent.getBytesTransferred();
        float progress = (float) (readedbyte / (float) file.length());
        record.partProgress(1, progress * 100);

但是着这种方式在上传英文文件的时候,没有问题,对于中文字符的文件名就总是报错:

The request signature we calculated does not match the signature you provided. Check your key and signing method.

这个问题,一开始对文件做MD5运算的时候,就遇到过,所以一开始就以为是MD5计算错误。看了很久,发现对英文名称的文件都没有问题。就想到是中文特殊字符的问题。

debug之后,在Request中确实有signer这个属性,但是没有方法可以指定它。

在stackoverflow.com上看到很多人也有这个问题,没有一个提到是文件名的原因。基本有以下几种说法:

1.UTF-8字符集的问题,说windows下面文件名使用gbk编码,而S3使用的是utf-8编码,所以对不上;

<groupId>com.amazonaws</groupId> <artifactId>aws-java-sdk-s3</artifactId> <version>1.12.50</version> </dependency> <dependency&gt..
SignatureDoesNotMatch,解决华为云Api调用报错The request signature we calculated does not match the signature
06 年加入网易游戏,先后负责过多个端游/手游产品的运维工作;多年运维生涯,历经数次运维技术变革;本人关注广泛,Web/CDN,自动化,分布式等,欢迎来侃;作为十多年运维老兵, 平日写些别人看着晦涩的东西,擅长手术刀式的运维杂症分析。 二个月前,游戏的流媒体站点从物理机迁移到了 S3,... 使用S3 V2的SDK来进行简单文件上传(2021年2月24日,现在AWS的SDK版本也是两个版本,一个V1,一个V2,这里使用V2)。S3文件上传有两种方式: 单一文件上传 文件分块上传:就是开一个上传任务,然后把单个文件拆成几块并发上传。 准备上传客户端:S3Client 构建上传请求:PutObjectRequest 使用S3Client进行单文件上传 S3Client 授权环境变量 在构建S3客户端之前,需要对客户端进行授权,AWS授权方式很多,这里采用环境变量的方式进行授 <groupId>com.amazonaws</groupId> <artifactId>aws-java-sdk-s3</artifactId> <version>1.11.625</version> </dependency&g...
S3: Syntax- and semantic-guided repair synthesis via S3: Syntax- and semantic-guided repair synthesis via programming by examples S3:通过S3进行语法和语义指导修复合成:通过示例编程进行语法和语义指导修复合成 一类著名的程序自动修复技术是基于语义的。这类技术,例如Angelix,通过符号执行推断语义规范,然后使用程序合成来构造满足这些推断规范的新代码。然而,获
背景:Amazon S3提供了方便易用的对象存储接口,在对象存储中数据是以key-value的形式存放,对象之间默认没什么关联。在实际应用场景中,我们可能需要将一个文件上传S3中,而不是一个一个文件上传,并且期望保留文件夹里文件的层级关系。本文介绍三种方法,第三种用代码是重点。 1.使用S3Browser 在S3的客户端S3Browser中,我们发现可以upload floder,我将本地 H:\video\test 文件上传,test文件夹里有1.txt,2.txt两个文件和一个名为test2的
1.关于com.amazonaws.services.s3.model.AmazonS3Exception: null (Service: Amazon S3; Status Code: 400; Error Code: InvalidPart; Request ID: tx0000000000000042cc701-0060594d57-139ef2-gpu-store) 异常处理 我的是因为PartEtag 类保存出错(当时用同一个文件测得切片1,2,3 以为里面的eTag都相同) 2.关于 .
【异常解决】java程序连接MinIO报错The request signature we calculated does not match the signature you provided.