ここ２０年、データベースと言えば、RDBを主に利用してきましたが、ビッグデータ、クラウド、IoTにおいて、データベースは大きく変化してきています。これから技術者は何を知らなくてはいけないのか、NOSQLは、何故今必要なのか？ RDBの技術者の為に、Oracle, Netezza, IBM とRDBMS畑を歩んできて、昨年からNOSQLを始めた講師が、NOSQLとは何か？どのようなものがあるのか？どうやって、どこで利用するのか？を説明いたします。

What's hot

Viewers also liked

Similar to [db tech showcase Tokyo 2015] A27: RDBエンジニアの為のNOSQL, 今どうしてNOSQLなのか？

More from datastaxjp

[db tech showcase Tokyo 2015] A27: RDBエンジニアの為のNOSQL, 今どうしてNOSQLなのか？

• 1.
  ©2015 DataStax Confidential.Do not distribute without consent.DataStax 原沢滋 今どうして、NOSQLなのか？ RDBエンジニアの為のNOSQL
• 2.
  ©2015 DataStax Confidential.Do not distribute without consent.NOSQLとは？ NOSQLとは???
• 3.
  ©2015 DataStax Confidential.Do not distribute without consent.NOSQLとは？ NOSQL（一般に”Not Only SQL”と解釈される）とは、リレーショナルデータベース管理システム (RDBMS) 以外のデータベース管理システムを指すおおまかな分類語である。リレーショナルデータベースをやみくもに使用してきた長い歴史を打破し、それ以外のデータベースの利用・発展を促進させようとする運動の標語としての意味合いを持つ。

有名な実装として、GoogleのBigTable、アマゾンのAmazonDynamoDBなどがある。オープンソースの実装も数多く存在し、例えばMongoDB、 Redis、Apache HBase、ApacheCassandraなどがある。出典：Wikipedia, NOSQL
• 4.
  ©2015 DataStax Confidential.Do not distribute without consent.NOSQLとは？ NOSQLという用語は1998年、SQLインターフェイスを持たない軽量な関係データベースのオープンソースソフトウェアの名前として最初に用いられた。2009年初頭に開催されたオープンソースの分散データベースについての会合において、Rackspaceの従業員Eric Evansによって再導入された出典：Wikipedia, NOSQL
• 5.
  ©2015 DataStax Confidential.Do not distribute without consent.一つ脱線・・・ NOSQL or NoSQL大文字で全部書く NOSQLと NoSQLとの違いを気にする人もいます。 それは 大文字だと Not Only SQLの NOSQLだけど、NoSQLだと “No SQL” になると・・・
• 6.
  ©2015 DataStax Confidential.Do not distribute without consent.NOSQL = Not Only SQLDatabase = RDBMSor
リレーショナルデータベース以外のデータベース乱暴にまとめちゃうとNOSQLとは？
• 7.
  ©2015 DataStax Confidential.Do not distribute without consent.NOSQLの種類 NOSQLタイプ 説明キーバリュー型 多くのNOSQLがKey（キー）を持っていることから、基本はキーバリューに属しているとも言えますがデータの管理、アクセスはキーに対して行い、そのキーに対してバリューが存在ワイドカラム型 列指向とも言われることもありますが、データはRDBのようにレコード（行）で管理され、アクセスはキーバリューと同じキーを使用して列単位でアクセスドキュメント型 キーに対してバリューではなく、より複雑なドキュメントとしてデータを格納します。JSONといったデータ記述書式で取り扱うことが可能で、半構造化データの取り扱いを得意グラフ型 相互に結びついた要素で構成され、それぞれの間に任意の数の結びつきのあるデータ同士の関係をグラフとして表す
• 8.
  ©2015 DataStax Confidential.Do not distribute without consent.http://blogs.the451group.com/information_management/2012/11/02/updated-database-landscape-graphic/データベースの分類とNOSQLの分類
• 9.
  ©2015 DataStax Confidential.Do not distribute without consent.NOSQLはどこで使うの？ そもそも、NOSQL(RDBMSでないもの）なんてどこで使うの？（Facebook, Amazon, Google, AppleがそもそもなぜNOSQLを使っているのか）LAMPの例：MEAN(MongoDB, Express, AngularJS, Node.js)とは？Webの例：JSONゲーム会社の例：スキーマレスパフォーマンスチューニングの例：そもそも、リレーショナルモデル？金融例：トランザクション履歴データをどう保存するかIoT例：センサーデータ、複数ディバイスはどう扱うかMtoM例：どのくらいの量と、スピードが必要ですか？パフォーマンス例： 今までのアプリケーションは遅すぎませんか？営業例：文鎮
• 10.
  ©2015 DataStax Confidential.Do not distribute without consent.OLTP(RDBMS) DWH (RDBMS) NOSQL OLTP(RDBMS) DWH (RDBMS) Hadoop 分析・データベース オペレーショナルデータベース 既存システム(RDB)新システムへの要求＊データ量＊パフォマンス＊柔軟性＊可用性＊値段分析・データベース オペレーショナルデータベース 既存システム(RDB)新システム(NOSQL)今までRDB では不可能、又は実現するのにコストが膨大にかかった領域NOSQLはどこで使うの？
• 11.
  ©2015 DataStax Confidential.Do not distribute without consent.オペレーショナル DB(NOSQL) vs. 分析 DB(Hadoop)オペレーショナルl Database：オンライントランザクション処理に代表される、日々のトランザクション処理を取り扱うデータベース:例：POSシステムWebの入力システムATM 等分析Database：オペレーショナルで集めたデータを一カ所に集約させ、データ分析を行う            例：データマイニング、              スコアリング                  BIOperationalDatabaseオペレーショナルの世界で最近になってやっと新技術が必要な事が認識され始めた(2006&2007 Google BigTable論文とAmazon Dynamo論文)NOSQLAnalyticDatabase分析データベースの世界は実は10年前から新技術がどんどん出てきていた。 (2003&2004Google GFS, MapReduce論文)Hadoop
• 12.
  ©2015 DataStax Confidential.Do not distribute without consent.Relational なのかNOSQLなのか？EMPNO ENAME JOB MGR HIREDATE SAL COMM DEPTNO7369 SMITH CLERK 7902 80-12-17 800 207499 ALLEN SALESMAN 7698 81-02-20 1600 300 307521 WARD SALESMAN 7698 81-02-22 1250 500 307566 JONES MANAGER 7839 82-04-02 2975 207654 MARTIN SALESMAN 7698 81-09-28 1240 1400 307698 BLAKE MANAGER 7839 81-05-01 2850 307782 CLARK MANAGER 7839 81-06-09 2450 107788 SCOTT ANALYST 7566 87-04-19 3000 207839 KING President 81-11-17 5000 107844 TURNER SALESMAN 7698 81-09-08 1500 0 307876 ADAMS CLERK 7788 87-05-23 1100 207900 JAMES CLERK 7698 81-12-03 950 307902 FORD ANALYST 7566 81-12-03 3000 207934 MILLER CLERK 7782 82-01-23 1300 10DEPTNO DNAME LOC10 ACCOUNTING NEW YORK20 RESEARCH DALLAS30 SALES CHICAGO40 OPERATIONS BOSTONRelationalの場合EMP表DEPT表selecte.empno, e.ename, e.job, e2.ename Mgr, e.hiredate, e.sal, e.comm, e.deptno, d.dname, d.locfrom emp e, emp e2, dept dwhere empno=7369 ande.mgr=e2.empno and e.deptno=d.deptno7369,‘SMITH’,‘CLERK’,‘FORD’,’80-12-17’,800,NULL,20,’RESEARCH’,’DALLAS’
• 13.
  ©2015 DataStax Confidential.Do not distribute without consent.Relational なのかNOSQLなのか？コンテンツ、データを中心とした場合INSERT INTO EMPLOYEE (EMPNO,ENAME,JOB,MGR,HIREDATE,SAL,COMM,DEPTNO,DNAME,LOC)Values (7369,‘SMITH’,‘CLERK’,‘FORD’,’80-12-17’,800,NULL,20,’RESEARCH’,’DALLAS’)EMPLOYEE表SELECTEMPNO,ENAME,JOB,MGR,HIREDATE,SAL,COMM,DEPTNO,DNAME,LOCFROM EMPLOYEEWHERE EMPNO=7369;EMPNO ENAME JOB MGR HIREDATE SAL COMM DEPTNO DNAME LOC7369 SMITH CLERK FORD 80-12-17 800 20 RESEARCH DALLAS
• 14.
  ©2015 DataStax Confidential.Do not distribute without consent.NOSQLって使えるの？こんな声を聞きませんか？ NOSQL は安全でない…NOSQL は信頼できない…NOSQL は拡張できない…NOSQL は誰も使っていない…っていうかそもそも、NOSQLは分からない！ここがスタート・ポイント（今ここ）
• 15.
  ©2015 DataStax Confidential.Do not distribute without consent.データベースマーケット（２０年前）トラディショナル オープンシステム汎用機DB RDBMSどちらでもよいケース
• 16.
  ©2015 DataStax Confidential.Do not distribute without consent.規模小大トラディショナルRDBMS実はEarly AdapterがNOSQL利用データベースマーケット（今）汎用機DBは未だに健在オープンシステム
• 17.
  ©2015 DataStax Confidential.Do not distribute without consent.データベースマーケット（これから）トラディショナルNOSQLRDBMSどちらでもよいケースモノのインターネット(IOT)
• 18.
  ©2015 DataStax Confidential.Do not distribute without consent.ビッグデータ、IoT、クラウド、NOSQL？ バズワード！！
• 19.
  ©2015 DataStax Confidential.Do not distribute without consent.繋がるネット時代の新技術LAN/WAN
クライアント/サーバー
リレーショナルDBMS(RDBMS)SNA
階層DBTerminal
NOSQL DBMSオープンシステム時代（Oracle,Informix,Sybase等)メインフレーム時代（IMS,DB2等)もののインターネット(IoT)時代（クラウド、ネットワーク、分散）(Bigdata, Hadoop, Open Source)1970 年代1990 年代2010年以降IoT, コンテンツの時代クラウド
アプリケーションの時代大きなコンピューターの時代
• 20.
  ©2015 DataStax Confidential.Do not distribute without consent.繋がるネット時代の新技術オープンシステム時代（Oracle,Informix,Sybase等)メインフレーム時代（IMS,DB2等)もののインターネット(IoT)時代（クラウド、ネットワーク、分散、IoT）(Bigdata, Hadoop, Open Source)1970 年代1990 年代2010年以降IoT, コンテンツの時代アプリケーションの時代大きなコンピューターの時代リレーショナルDBMS(RDBMS)階層DBNOSQL DBMSシンプルな作りと単純な業務の置き換え、記録のためのデータベースアプリケーション構造を中心としたリレーショナルデータモデルのデータベースコンテンツ、データを中心にしたデータセントリック・データベース
• 21.
  ©2015 DataStax Confidential.Do not distribute without consent.第２次NOSQLブーム？（IoT時代）幻滅期NOSQL創生(Bigdata, Web)日本におけるNOSQLの動き（ブーム？）2010 2011 2012 2013 2014 2015
• 22.
  ©2015 DataStax Confidential.Do not distribute without consent.NOSQLはあなたの身近にすでにありますテレビを見たり買い物をしたりWebページをクリックしたりFacebookをしたり、TwitterをしたりAppleのサービスを利用したり音楽をオンラインで聞いたり温度を調整したりすべてのアクションにNOSQLが使われています
• 23.
  ©2015 DataStax Confidential.Do not distribute without consent.最後に宣伝明日9時30分∼
NOSQL パネルディスカッション15時30分∼ Cassandraの話をしますE35:ポストRDB: Web, IoT, モーバイル時代のデータベース、Apache Cassandraを学ぼう16時30分∼ ワークスアプリケーションの新ERP「HUE」Oracle ->Cassandraののリプレース事例