Manuais OVH

Otimizar os uploads para o Object Storage

Otimizar os uploads para o Object Storage

Aquando do envio de ficheiros volumosos para o Object Storage (como vídeos ou imagens de discos, por exemplo), é possível utilizar o cliente OpenStack Swift para otimizar as transferências ao segmentar os ficheiros. Este guia explica-lhe como melhorar a velocidade dos uploads para o Object Storage graças a esta funcionalidade.

Pré-requisitos

OpenStack Swift permite-lhe armazenar ficheiros sem limite de tamanho ao dividi-lo em vários segmentos.

Na realidade, quando um cliente Swift é utilizado para enviar um ficheiro, o nœud de armazenamento é determinado pelo proxy Swift ao utilizar uma hash do nome do objecto. Existe então uma grande possibilidade que os segmentos sejam armazenados em nœuds de armazenamento diferentes permitindo a escrita dos seus dados com uma velocidade superior.

Podemos enviar um ficheiro de 10GB em 100 segmentos de 100MB:

root@server:~$ swift upload --segment-size 104857600 --segment-threads 100
container_name 10Gio.dat
Argument Description
--segment-size Taille des segments en bytes
--segment-threads Nombre de segments

É possível medir a velocidade de upload ao utilizar programas como por exemplo o iftop.

Voltar à página inicial dos guias Cloud


Estes manuais também podem ser úteis...