気に入った記事をブックマーク
- 気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
- 記事を読んだ感想やメモを書き残せます
- 非公開でブックマークすることもできます
5日かかる計算だった100万近くある画像のアップロードを3時間弱にした話 - Qiita
26 users
qiita.com/Kaki_Shoichi
qiita.com/Kaki_Shoichi
qiita.com/Kaki_Shoichi
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
この記事はなに？ ベーシック Advent Calendar 2016 20日目です。 機会があって100万枚近い画像を3時間... この記事はなに？ ベーシック Advent Calendar 2016 20日目です。 機会があって100万枚近い画像を3時間弱でアップロードできるアップローダを作成しました。今回はアップローダを作成する際の手法をご紹介したいと思います！ そもそも何故やることになったのか 僕の携わっているサービスが全面リニューアルをおこなっているのですが、要件の中に、MongoDBからMySQLに乗り換えるというものがありました。その際に大量にある画像を下記理由から再アップロードする必要が出てきました。 MongoDBからMySQLへの変更に伴い、データの持ち方が大きく変わったので、画像パスを再登録する必要があった。 画像を保存しているディレクトリ構造がいけてなく、S3上での検索が困難だったので整えたかった。 また、画像のアップロード作業をする際は、サービスを一時停止、また万が一の為にやり直しをするバッフ
qiita.com/Kaki_Shoichi
qiita.com/Kaki_Shoichi
qiita.com/Kaki_Shoichi
qiita.com/Kaki_Shoichi
www.nhk.or.jp
nazology.kusuguru.co.jp
gendai.media
daiksy.hatenablog.jp
www.itmedia.co.jp
gothedistance.hatenadiary.jp
konifar-zatsu.hatenadiary.jp
qiita.com/nfujita55a
speakerdeck.com/ysknsid25
ascii.jp
anond.hatelabo.jp
medium.com/@yavien
qiita.com/Kazuhiro15
qiita.com/Kazutoshi
qiita.com
qiita.com/KazuyukiEguchi
qiita.com/Kei-Kamikawa
qiita.com/KawabataLemon
2016/12/20 リンク