
はてなキーワード:Amazon S3とは
🧔♂️ワシ:
「いやぁ、昨日もまたRFC7231読んでてな、
🎙️相方:
「お前の人生、Content Negotiationされすぎやろ!!
しかも向こうから406 NotAcceptable 返ってきたんやろ!?そらフラれるわ!!」
🧔♂️ワシ:
「この前アーキテクチャ会議で、サービス間通信はgRPCがええって言うたらな、
後輩が「じゃあProtoBufで詩を書きました」言うてきよってな…
message孤独 {string 心 = 1; } て……」
🎙️相方:
「どんなポエムやねん!!スキーマ駆動の純文学生まれてるやんけ!!
しかもgRPCのくせにRESTに未練残しとるのが切ないねん!!」
🧔♂️ワシ:
「最近の若手、すぐイベントストリームアーキテクチャ導入しようとするけどな、
この前「Kafkaのパーティション分割がバランス悪くて…」って悩んでたから
ワイ真顔で言うたったんや、
そのKafka、輪廻してるでって」
🎙️相方:
再試行失敗したメッセージが前世の因果で戻ってきてるやんけ!!」
🧔♂️ワシ:
全部PlantUMLのシーケンス図でラップバトル表現しとるんや。
オブジェクトが`ー>+ DJController :Yo!処理呼ぶぜ!`てな……」
🎙️相方:
「お前それ設計書ちゃう、HIPHOPフレームワークやないかい!!
🧔♂️ワシ:
「そんでよく聞かれるんがな、
ワイは即答したったわ。
🎙️相方:
「どんだけ孤独のシャーディングすんねん!!全ノードに寂しさ均等にばら撒くなや!!
最終的にAmazon S3に虚無が永続化されとるやないか!!」
🧔♂️ワシ:
「ちなみに、Terraform書いてる時は瞑想状態に入るのが基本や。
ワイの脳内、こんな感じやねん。
🎙️相方:
しかもリソース作られへんのやろ!?Error: Too many imposter syndrome とか出るんやろ!?」
🧔♂️ワシ:
「最後に言わしてくれ。
ワイ、今でもたまに聞こえるねん。
昔のMonolithが言うてくるねん……
「クラス肥大化してごめんな…でも全部まとめたかったんや…」って」
🎙️相方:
「それフレームワークじゃなくて未練ワークやんけ!!
責務の分離ができへんのは、気持ちの整理もできへんのと一緒や!!」
🧔♂️🎙️二人:
「ソフトウェアアーキテクト、それは正気と狂気の境界で踊る設計のシャーマンや!!」
「ほなまた、次のデプロイで会おうや!!」
https://b.hatena.ne.jp/entry/4736080561518980709/comment/TakamoriTarou
https://www.security-next.com/145617
https://aws.amazon.com/jp/s3/pricing/?nc=sn&loc=4
添付ファイルと言ってる感じはExcelかWord、もしくは画像か
これを書いてる時点で米ドルは 134.84円
| 1 W | 2 W | 52 W | ||
|---|---|---|---|---|
| kB | 10338900 | 20677800 | … | 537622800 |
| GB | 9.85994339 | 19.71988678 | … | 512.7170563 |
| USD | 0.061624646 | 0.123249292 | … | 3.204481602 |
| JPY | 8.309467292 | 16.61893458 | … | 432.0922992 |
| JPY (SUM) | 8.309467292 | 24.92840188 | … | 11450.44593 |
支払い総額を一般化するとΣY(k) = [JPY/W]*k*(k+1)/2
五年後には支払い総額は 281,940円
五年後の容量は 2564GB
ただ置いてあるだけで、月に8642円が出ていく
まあ件のシステムでホワイトリスト形式でファイルを消しているのは容量を節約しているのではなくてセキュリティ的な側面だろうとは想像するが
効果のほどははっきりしないとしてもね
このニュースいつみても有能だと思う
改善のビフォーアフターを数値で示していてベストプラクティスになっている
もちろんマス向けのサービスだから広告目的もあるのだろうけど、一般企業じゃこうはいかない
KADOKAWAConnected、日本最大級の動画コミュニティサービス
億単位のオブジェクト集中処理をこなし、約1/10のコスト削減と運用負荷軽減を実現
株式会社TwoFive(本社:東京都中央区、社長 末政 延浩)は、KADOKAWAグループ向けのICTサービスを提供する株式会社KADOKAWAConnected(本社:東京都千代田区、代表取締役社長 各務 茂雄)が、日本最大級の動画コミュニティサービス「ニコニコ」のオブジェクトストレージ、および、グループ各社の社内ファイルサーバーのバックアップストレージとして米RSTOR社(アールストア、本社:カリフォルニア州)の高速クラウドストレージサービス「RSTOR」を採用したことを発表します。
「RSTOR」は、TwoFiveが国内代理店として今年9月に提供開始しており、KADOKAWAConnectedが動画配信サービスで使用する国内の第一号ユーザーとなります。
「ニコニコ」サービス向けのストレージには、サイトに表示する静的コンテンツ、ユーザーアイコンなどの画像ファイルなどが納められていますが、小さいサイズのデータに対するRead/Writeが多く、億単位のオブジェクトが集中します。多くのクラウドストレージサービスが、データ格納に課⾦するだけでなく、リクエストやダウンロードの容量 にも課⾦されるのに対して、「RSTOR」は、保存データの容量にのみ課金し、データの移動には課金がないのが特長です。現在は300TBで契約していますが、容量に対する定額課金のみで予測不能な追加費用は発生せず、KADOKAWAConnectedではオンプレミスの現行システムに比べても1/10近いコスト削減になると試算しています。
また、「RSTOR」は、独自プロトコルによる高速データ転送(他のクラウドストレージサービスより最大30倍高速)が特長ですが、大容量ファイルはもちろん、容量が小さなファイルも高速処理できるようにコンピューティングやネットワークを最適化しています。
そのため、現行システムでは、約1億のオブジェクトが集中した際に障害が発生したり、大量データの一括削除で操作不能になっていたのに対して、「RSTOR」では問題なく処理できることが、検証できました。
さらに、現行システムで性能維持のために約2ヶ月に1回、5人日を要していた定形作業が不要となり、障害発生時の対応コストがなくなることで、運用負荷が大幅に軽減される見込みです。
KADOKAWAConnectedは、KADOKAWAグループのDX(デジタルトランスフォーメーション)を推進する戦略子会社であり、「RSTOR」をグループ各社の社内ファイルサーバーのバックアップストレージとしても利用する他、データ活用を促進するためのストレージとして、今後積極的に適用範囲を拡大していく計画です。
数ある動画サイトの中で個性が光る「ニコニコ」は、グループ企業である株式会社ドワンゴ(本社:東京都中央区、代表取締役社長 夏野 剛)が提供し、KADOKAWAのWebサービス事業の中核となっており、現在280万人以上の有料会員が利用しています。KADOKAWAConnectedは、新しいサービスを開発や、品質改善のためにサービスを支えるインフラの刷新などに意欲的に取り組んでいますが、「RSTOR」の採用もその一環と位置付けられます。
Amazon S3Glacierおよびオンプレミスのストレージによる従来システムの課題と、「RSTOR」採用に当たり評価されたポイントは以下の通りです。
「ニコニコ」サービス向けのオブジェクトストレージには、アプリケーション開発に必要なデータ(ビルド済みバイナリ、ログなど)やサイトに表示する静的コンテンツ(JavaScriptやCSSなど)、ユーザーアイコンなどの画像ファイルなどが納められます。
現行の製品や検討した他社ソリューションは、アーカイブ用途がメインの製品が多く、小さいサイズのデータに対するRead/Writeが多い「ニコニコ」の用途にマッチしていませんでした。「RSTOR」は、必要とされる性能を十分以上に満たせることが検証で確認できました。
(2)システムの安定性
現行システムで、1バケットの同じ階層に1億近いオブジェクトが集中したときに障害発生したのに対し、「RSTOR」は同規模のデータを入れても良い性能が得られました。また、現行システムで、大量のデータの一括削除で操作不能になるのに対して、RSTORでは問題なく処理できました。
「RSTOR」は、容量に対する課金のみでデータアウトとリクエスト数課金がなく、また、容量単価もAmazon S3Glacierにほぼ近い金額でアクティブストレージが使用できます。30TBで数億オブジェクトのコストを比較すると、1/10近いコスト削減になると見込んでいます。
(4)運用負荷の低減
現行システムでは、性能維持のために約2ヶ月に1回定形作業が必要でその作業に5人日かかっていましたが、「RSTOR」ではその運用コストが不要となり、また、障害発生時の対応コストがなくなることで運用負荷が大幅に軽減されます。
成功者しか生き残れない世の中の話ではないですよ(書いているうちに似ているのかも知れないと思ったけど)。
部屋を整理していたら、誰だかわからない人の写ったポラロイド写真が出てきた。僕はこれをだれであるのか知らないけど、たぶん前にこの部屋を使っていた父なら分かるんだろう。というか、この写真は父の持ち物だ。
正直に言って、あまり綺麗な写りではない写真なのだけど、これがもともとそういう写真なのか、経年劣化でそうなってしまったのかは定かではない。
ふと思ったのは、これがもともと写りが悪い写真だった場合と仮定して、(写真の感じから当時存在していたとは思えないけど)デジカメで撮っていたら今まで残っただろうか、ということ。
デジカメの場合、その場で確認して写りが悪かったらそのまま削除してしまう人もいるんじゃないかと思う。フィルムの写真だと一度現像しなきゃならない分コスト大きいからその場で捨てるって言うのは難しい。ポラロイドの場合はすぐに現像されるからフィルムに比べれば確認しやすいけれど、デジタルデータを削除するようにさくっと捨てられるわけじゃなくて、ゴミ箱にもっていくまでのコストはある。それで、時々捨て忘れたりすることがある。
写真に限らず、デジタルデータというのは、「残そう」という意思が一度でも働いたものに関しては、基本的にはデータとしては劣化しにくいし後々まで残しやすいのだろうけど、要らないデータを捨てるのも簡単すぎて、ネガにあたるものとか、一切残骸すら残らないわけですよ(ファイルシステムを直接覗いてサルベージ擦るって言うのはちょっと現実的じゃないかと思って考慮してない)。
今まで、失敗しちゃった写真とかでもたまたま残ってて、後々そのおかげで「あのときああいうことがあったねぇ」「お父さん若いねぇ、懐かしいねぇ」というような思い出話が出来たりしたのが、今の世の中だと起こりにくいのかな、と考えるとちょっと寂しい気持ちになった。デジタルデータを一切消さずにAmazon S3あたりに無限にためていくのも一つの方法かもしれないけど、それはそれで膨大すぎて見返すのはつらかったりするし、思い出を振り返るようなことには使えないんだろうなって。
そういえば、紙の写真のアルバムをみんなでみることも無くなったなぁ。やっぱり今時は、居間のテレビとかに映してみんなで見るのかねぇ。
最終的になにが言いたいのか自分でもわからなくなってきたけど、ふとした瞬間の家族の思い出みたいなものって、なんとなく大切にしたいものだな、そう思ったんですよ。
Slicehost VPS Hosting is now Rackspace Cloud Servers hosting
Slicehost Articles: IP failover - High Availability explained
All requests for thewebsite come to the front end Slice.
That Slice then proxies the request to larger Slices running in the backend ofthe network.
Slicehost Articles: IP failover - Slice setup and installing Heartbeat
Monitoring Ubuntu Services Using Monit | Ubuntu Geek
$sudo tasksel
Slicehost Articles: Ubuntu Hardy setup - page 1
Slicehost Articles: Ubuntu Hardy setup - page 2
Automatic Rails on Ubuntu 8.04 LTS « Enjoying Rails
joerichsen's gist: 16225 — Gist
Setting up Ubuntu Jaunty for Ruby and Rails development | Joe Ocampo's Blog
5-minutes to Rails // Slicehost VPS Hosting is now Rackspace Cloud Servers hosting
slicehostでRails2.2.2を動かすまで - なんとなく日記
Slicehost Articles: Ubuntu Hardy - Ruby on Rails
Slicehost Articles: Ubuntu Gutsy - Django installation
UbuntuにLAMPサーバを手早くインストールする方法 - builder
LAMP(Linux、Apache、MySQL、PHP)サーバを手早くインストールする最も簡単な方法
Slicehost Articles: CentOS setup - page 1
Slicehost Articles: CentOS setup - page 2
CentOSのPHPにはマルチバイト対応入ってませんのであとから入れましょう (技術メモ)
タグ「slicehost」を含む新着エントリー - はてなブックマーク
naotaka blog » Blog Archive » Slicehostに申し込み
slicehostでUbuntu8.04の設定1 初期設定 - delab
Slicehost : Tag Archives - delab
ホスティングサービス Slicehost のドキュメントがすばらしい : 僕は発展途上技術者
SlicehostへのRedmine導入手順(Ubuntu Gutsy)
つくるぶガイドブログ: 失敗しない Rails が動かせるホスティングサービス選びと環境構築
具体的にどこがおすすめかという質問を受けた場合、共用サーバーならば海外のSlicehost、専用サーバーならさくらインターネット
Slicehost に移行しました - milk1000cc
Web管理画面で、OS再起動・再インストール、コンソール操作、DNS 設定などができます。
バックアップ入れても月額 $25、
レンタルサーバはさくらインターネット | 「さくらのレンタルサーバ」「さくらのマネージドサーバ」
格安レンタルサーバーならステップサーバー | 高機能で格安なレンタルサーバーTOP
レンタルサーバーNSF - 月額100円〜容量無制限可の格安レンタルサーバー
ロリポップ!レンタルサーバー - 月額105円~容量最大30GB 初期費用半額キャンペーン中!
チカッパ!レンタルサーバー - ご利用中のユーザー様へのご案内
レンタルサーバー「heteml」 - 大容量・高機能のレンタルサーバー
Slicehost VPS Hosting is now Rackspace Cloud Servers hosting Slicehost Login
Linode - Xen VPS Hosting Linode Login
Linode.comのVPSホスティングを契約してみた - m-kawato@hatena_diary
Webbynode Hosting - Host and Deploy Ruby on Rails, Django, Node.js, PHP and more
VPS Hosting � Virtual Private Server Hosting | DataRealm.com
Coupon codes, promotions and special offers - CheapVPS
VPS :: VPS Hosting :: VDS :: Virtual Private Servers :: Virtual Dedicated Servers :: Server Axis
RootBSD - FreeBSD and OpenBSD VPS Hosting - Welcome to RootBSD
レンタルサーバーならVPSレンタルサービス|VPS stock
激安の専用サーバ:ServerPronto なんと月額$29〜 | 海外サーバ.jp
サーバ本体無償提供、ホスティング向きハウジングサービスを月額7,780円で
専用サーバの料金と仕様 | 専用レンタルサーバ(ホスティング)のさくらインターネット
Dedicated servers | Windows and Linux dedicated web servers
Dedicated Servers, Self-Managed Dedicated Server, Dedicated Hosting at ServerPronto
MegaNetServe - Value Driven Dedicated Servers on Linux, Windows 2008, Windows 2003 & FreeBSD
Domain Names, Web Hosting and SSL Certificates - Go Daddy
Dedicated Servers, vSERVERs – SERVER4YOU
Web Hosting | Dedicated Hosting | Domain Registration |
海外の安い専用サーバプランをいろいろ並べて検討してみた - GIGAZINE
再度、レンタルサーバ(共有ではなく「専用」です)で、国内外を.. - 人力検索はてな
Website Hosting in the Yahoo! Directory
デル株式会社(Dell Japan)の公式サイト | Dell 日本
HP-ProLiant-ML115 G5まとめwiki - トップページ
各メーカーの最安サーバを比較検討してみた - GIGAZINE
バックエンドアーキテクチャーのおかげで、2テラバイトの画像を、$1000のLinuxサーバー1台で賄うことができる。だから、年間わずか20万ドル程度の設備投資で、現在サーバー500台を保有している。
ドメイン登録 - VALUE DOMAIN:バリュードメイン
Domain Names, Web Hosting and SSL Certificates - Go Daddy
Amazon S3をWindowsにマウントできるJungle Disk Kawanet Tech Blog/ウェブリブログ
Online storage and backup | Secure file sharing | Unlimited online storage | Jungle Disk
Amazon.co.jp: 現場が教えるホスティングサービスの勘所―立ち上げから運用管理までのノウハウ (NEサポートシリーズ): 合阪 省: 本
Amazon.co.jp: レンタルサーバをはじめよう!―ホスティングのためのサーバ構築術: 斎藤 高洋: 本