AWS S3：安価なハードディスクが支える超大規模ストレージシステム

この記事では、Amazon S3の驚くべき規模とその裏にある技術を明らかにします。S3は安価なHDDを活用し、大量の並列処理、イレイジャーコーディング、そして巧妙な負荷分散技術（「2つのランダムな選択肢の力」など）によって、HDDの遅いランダムI/Oというボトルネックを克服しています。これにより、毎秒数百万件のリクエスト、超高スループット、そして比類のない可用性が実現しています。S3のデータストレージ戦略には、ランダムなデータ配置、継続的なデータ再バランス、そして規模による負荷の平準化効果が含まれており、ホットスポットを防ぎます。ユーザー、クライアント、サーバーの3つのレベルで並列化することで、パフォーマンスがさらに向上します。最終的に、S3はバックアップや画像ストレージのサービスから、ビッグデータ分析や機械学習の重要なインフラストラクチャへと進化しました。