Jeudis du Libre - MySQL comme Document Store

1 / 90

2 / 90

Safe Harbor StatementThe following is intended to outline our general product direction. It is intended forinformation purpose only, and may not be incorporated into any contract. It is not acommitment to deliver any material, code, or functionality, and should not be relied up inmaking purchasing decisions. The development, release and timing of any features orfunctionality described for Oracle's product remains at the sole discretion of Oracle.

Copyright @ 2017 Oracle and/or its affiliates. All rights reserved.

3 / 90

about.me/lefred

Qui suis-je ?


4 / 90

Frdric [email protected] MySQLBidouille MySQL depuis la version 3.23devops croyant et praticantMySQL Community Manager depuis mai2016


5 / 90

SGDB & MySQL

Base de donnes Relationnelles


6 / 90

Bases de donnes RelationnellesIntgrit des donnes


7 / 90


normalization


8 / 90


normalizationcontraintes (cls trangres, ...)


9 / 90



Atomicit, Cohrence, Isolarion et Durabilit - ACID


10 / 90



Atomicit, Cohrence, Isolarion et Durabilit - ACIDtransactions


11 / 90




SQL


12 / 90




SQLpuissant language de requtes


13 / 90

SGDB & MySQL

Base de donnes NoSQL


14 / 90

NoSQL ou Document StoreSans schma


15 / 90


pas de design de schmas, pas de normalization, de cls trangres, decontraintes, de type de donnes (data types), etc...


16 / 90


pas de design de schmas, pas de normalization, de cls trangres, decontraintes, de type de donnes (data types), etc...dvelopement initial trs rapide


17 / 90



Structures flexibles des donnes


18 / 90



Structures flexibles des donnesobjets et tableaux imbriqus


19 / 90



Structures flexibles des donnesobjets et tableaux imbriquscertaines donnes sont simplement naturellement non structures et nepeuvent tre modlises de faon optimale dans un modle relationel


20 / 90



Structures flexibles des donnesobjets et tableaux imbriquscertaines donnes sont simplement naturellement non structures et nepeuvent tre modlises de faon optimale dans un modle relationelpersistence des objets sans utilisation d'un ORM (mapping objet-relationnel)


21 / 90

NoSQL ou Document Store (2)JSON


22 / 90


proche du frontend


23 / 90


proche du frontend"natif " en Javascript


24 / 90


proche du frontend"natif " en Javascriptutilis en Node.js


25 / 90


proche du frontend"natif " en Javascriptutilis en Node.js

Aprentissage facile, et facile utiliser


26 / 90

Les challenges actuelsles dveloppeurs veulent avancer plus rapidement


27 / 90

Les challenges actuelsles dveloppeurs veulent avancer plus rapidementle dlai de mise en production est un cot suprieur


28 / 90

Les challenges actuelsles dveloppeurs veulent avancer plus rapidementle dlai de mise en production est un cot suprieurrapidit de cration de prototypes, itrations rapides, ...


29 / 90

Avantages de SQL et de NoSQL

NoSQL SQL


30 / 90

Et donc, Bases de donnes Relationnelles ou Document Store ??


31 / 90

Et donc, Bases de donnes Relationnelles ou Document Store ??

Pourquoi pas les deux ?


32 / 90

Quelles sont les tapes ?

NoSQL avec MySQL


33 / 90

Faire de MySQL un Document Store


34 / 90

Faire de MySQL un Document Store1. support de JSON datatype


35 / 90

Faire de MySQL un Document Store1. support de JSON datatype2. CRUD Operations


36 / 90

Faire de MySQL un Document Store1. support de JSON datatype2. CRUD Operations3. X Plugin


37 / 90

Faire de MySQL un Document Store1. support de JSON datatype2. CRUD Operations3. X Plugin4. X protocol & MySQL Shell


38 / 90

MySQL 5.7

Support de JSON


39 / 90

Support JSONType natif de donnes (native datatype)


40 / 90

Support JSONType natif de donnes (native datatype)Valeurs en JSON stockes dans des tables MySQL


41 / 90

Support JSONType natif de donnes (native datatype)Valeurs en JSON stockes dans des tables MySQLFormat de stokage JSON en binaire (UTF8MB4)


42 / 90

Support JSONType natif de donnes (native datatype)Valeurs en JSON stockes dans des tables MySQLFormat de stokage JSON en binaire (UTF8MB4)Conversion partir des types SQL "natifs" vers des valeurs JSON


43 / 90

Support JSONType natif de donnes (native datatype)Valeurs en JSON stockes dans des tables MySQLFormat de stokage JSON en binaire (UTF8MB4)Conversion partir des types SQL "natifs" vers des valeurs JSONFunctions de manipulation du JSON


44 / 90


extraire (JSON_EXTRACT, JSON_KEYS, ...)


45 / 90


extraire (JSON_EXTRACT, JSON_KEYS, ...)inpecter (JSON_CONTAINS, ...)


46 / 90


extraire (JSON_EXTRACT, JSON_KEYS, ...)inpecter (JSON_CONTAINS, ...)modifier (JSON_SET, JSON_INSERT, JSON_REMOVE, ...)


47 / 90


extraire (JSON_EXTRACT, JSON_KEYS, ...)inpecter (JSON_CONTAINS, ...)modifier (JSON_SET, JSON_INSERT, JSON_REMOVE, ...)cration de tableaux et d'objets (JSON_ARRAY, JSON_OBJECT)


48 / 90


extraire (JSON_EXTRACT, JSON_KEYS, ...)inpecter (JSON_CONTAINS, ...)modifier (JSON_SET, JSON_INSERT, JSON_REMOVE, ...)cration de tableaux et d'objets (JSON_ARRAY, JSON_OBJECT)recherche d'objets (JSON_SEARCH)


49 / 90

Support JSON (2)Inline SQL JSON path expressions

SELECT doc->'$.object.array[0].item' FROM some_table


50 / 90

Support JSON (2)Inline SQL JSON path expressions

SELECT doc->'$.object.array[0].item' FROM some_table

Oprateurs boolens (comparaison de valeurs JSON, ...)

foo = doc->'$.eld'


51 / 90

Support JSON (3)

le meilleur pour la fin...


52 / 90

Support JSON (3)


Colonnes Gnres/Virtuelles (generated/virtual columns)


53 / 90

Support JSON (3)


Colonnes Gnres/Virtuelles (generated/virtual columns)Index de donnes JSON


54 / 90

Support JSON (3)


Colonnes Gnres/Virtuelles (generated/virtual columns)Index de donnes JSONCls trangres vers donnes JSON


55 / 90

Support JSON (3)


Colonnes Gnres/Virtuelles (generated/virtual columns)Index de donnes JSONCls trangres vers donnes JSONVues SQL pour des donnes JSON


56 / 90

Support JSON (3)


Colonnes Gnres/Virtuelles (generated/virtual columns)Index de donnes JSONCls trangres vers donnes JSONVues SQL pour des donnes JSON

ALTER TABLE test_features ADD COLUMN street VARCHAR(30) GENERATED ALWAYS AS (json_unquote(json_extract(`feature`,'$.properties.STREET'))) VIRTUAL;


57 / 90

Document Store

Oprations CRUD


58 / 90

Oprations CRUDCreate, Read, Update et Delete (CRUD) sont les 4 oprations qui peuvent tre excutessur une collection (Document Store Schema) ou une table.

CREATE - collection.add()


59 / 90

Oprations CRUD (2)

READ - collection.find()


60 / 90

Oprations CRUD (3)

UPDATE - collection.modify()


61 / 90

Oprations CRUD (4)

DELETE - collection.remove()


62 / 90

Document Store

X Plugin


63 / 90

X PluginPlugin du serveur MySQL qui active la communication en utilisant le X Protocol.

Ce pluging:


64 / 90


Ce pluging:

supporte les clients ayant implment le X DevAPI


65 / 90


Ce pluging:

supporte les clients ayant implment le X DevAPItransforme MySQL en Document Store.


66 / 90


Ce pluging:

supporte les clients ayant implment le X DevAPItransforme MySQL en Document Store.

mysql> INSTALL PLUGIN mysqlx SONAME "mysqlx.so"

ou

mysqlsh -u user --classic --dba enableXProtocol


67 / 90

Document Store

X Protocol


68 / 90

X ProtocolProtocole qui permet de communiquer avec un MySQL Server sur lequel X Plugin est activ.


69 / 90

X ProtocolProtocole qui permet de communiquer avec un MySQL Server sur lequel X Plugin est activ.

Et donc le X Protocol permet deffectuer des oparations CRUD et SQL, lauthentificationvia SASL, le "streaming" (pipelining) des commandes.


70 / 90

Document Store

The X DevAPI


71 / 90

Oprations orientes Document via SQLTrs puissant


72 / 90

Oprations orientes Document via SQLTrs puissantPermet la construction de requtes complexes


73 / 90

Oprations orientes Document via SQLTrs puissantPermet la construction de requtes complexesMais... encore et toujours difficile utiliser pour les non initis


74 / 90

Oprations orientes Document via SQLTrs puissantPermet la construction de requtes complexesMais... encore et toujours difficile utiliser pour les non initis

CREATE TABLE product ( id VARCHAR(32) GENERATED ALWAYS AS (JSON_EXTRACT(doc, '$.id')) STORED, doc JSON);INSERT INTO product VALUYES (1, '{...}');SELECT * FROM product WHERE JSON_EXTRACT(doc, '$.eld') = value;


75 / 90

The X DevAPIAbstraction au-dessus de SQL


76 / 90

The X DevAPIAbstraction au-dessus de SQLAx sur 4 oprations CRUD de base (Create, Read, Update, Delete)


77 / 90

The X DevAPIAbstraction au-dessus de SQLAx sur 4 oprations CRUD de base (Create, Read, Update, Delete)Native Language API


78 / 90

The X DevAPIAbstraction au-dessus de SQLAx sur 4 oprations CRUD de base (Create, Read, Update, Delete)Native Language APIPas ncessaire de connatre le SQL


79 / 90

The X DevAPIAbstraction au-dessus de SQLAx sur 4 oprations CRUD de base (Create, Read, Update, Delete)Native Language APIPas ncessaire de connatre le SQLX Protocol


80 / 90

The X DevAPIAbstraction au-dessus de SQLAx sur 4 oprations CRUD de base (Create, Read, Update, Delete)Native Language APIPas ncessaire de connatre le SQLX Protocol

les requtes CRUD sont encodes au niveau du protocol


81 / 90

Exemplemysql-py> mybooks.nd("Title LIKE 'Und%'")[ { "Authors": [ "Alexander Sasha Pachev", "Sasha Pachev" ], "ISBN-13": "9780596009571", "Language": "en", "Publisher": ""O'Reilly Media, Inc."", "Title": "Understanding MySQL Internals", "Year": "2007", "_id": "ce9fd5b762ffe6117055685b359e77d5" }]


82 / 90

Exemplemysql-py> mybooks.nd("Title LIKE 'Und%'")[ { "Authors": [ "Alexander Sasha Pachev", "Sasha Pachev" ], "ISBN-13": "9780596009571", "Language": "en", "Publisher": ""O'Reilly Media, Inc."", "Title": "Understanding MySQL Internals", "Year": "2007", "_id": "ce9fd5b762ffe6117055685b359e77d5" }]

Et MySQL le transforme de manire transparente en:

SELECT doc FROM `books`.`mybooks` WHERE (JSON_UNQUOTE(JSON_EXTRACT(doc,'$.Title')) LIKE 'Und%');


83 / 90

Document Store & X DevAPI & MySQL Shell

petite dmo ?


84 / 90

Dmo (1)[[email protected] ~] $ mysqlsh --py Welcome to MySQL Shell 1.0.8-rc

Copyright (c) 2016, 2017, Oracle and/or its afliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or itsafliates. Other names may be trademarks of their respectiveowners.

Type '\help', '\h' or '\?' for help, type '\quit' or '\q' to exit.

Currently in Python mode. Use \sql to switch to SQL mode and execute queries.mysql-py> \c [email protected] a Session to '[email protected]'Enter password: Node Session successfully established. No default schema selected.


85 / 90

Dmo (2)mysql-py> db=session.create_schema("books")mysql-py> mybooks=db.create_collection('mybooks')

mysql-py> from isbntools.app import *

mysql-py> isbn=9781449314286mysql-py> doc=meta(str(isbn))mysql-py> doc["Annee"]=doc.pop("Year")mysql-py> mybooks.add(doc)Query OK, 1 item affected (0.10 sec)

mysql-py> isbn=9780596009571mysql-py> doc=meta(str(isbn))mysql-py> doc["Annee"]=doc.pop("Year")mysql-py> mybooks.add(doc)

mysql-py> isbn=9781430230571mysql-py> doc=meta(str(isbn))mysql-py> doc["Annee"]=doc.pop("Year")mysql-py> mybooks.add(doc)


86 / 90

Dmo (3)mysql-py> mybooks.nd()[ { "Authors": [ "Baron Schwartz", "Peter Zaitsev", "Vadim Tkachenko" ], "ISBN-13": "9781449314286", "Language": "en", "Publisher": ""O'Reilly Media, Inc."", "Title": "High Performance MySQL", "Annee": "2012", "_id": "66f01d3762ffe6117055685b359e77d5" }, ...]3 documents in set (0.00 sec)


87 / 90

Dmo (4)mysql-py> mybooks.nd("Title LIKE '%MySQL%'").elds(["Title","Annee"]).sort("Annee")[ { "Annee": "2007", "Title": "Understanding MySQL Internals" }, { "Annee": "2012", "Title": "High Performance MySQL" }]

mysql-py> mybooks.create_index("Annee_idx").eld("Annee","TEXT(4)", False).execute();


88 / 90

Dmo (5)mysql> show create table books.mybooks\G *************************** 1. row *************************** Table: mybooksCreate Table: CREATE TABLE `mybooks` ( `doc` json DEFAULT NULL, `_id` varchar(32) GENERATED ALWAYS AS (json_unquote(json_extract(`doc`,'$._id'))) STORED NOT NULL, `$ix_t4_589943C550621CA4FF9A742745C76C955B6DDE8E` text GENERATED ALWAYS AS (json_unquote(json_extract(`doc`,'$.Annee'))) VIRTUAL, PRIMARY KEY (`_id`), KEY `Annee_idx` (`$ix_t4_589943C550621CA4FF9A742745C76C955B6DDE8E`(4))) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4


89 / 90

Merci

Des Questions ?


90 / 90

Jeudis du Libre - MySQL comme Document Store

Text of Jeudis du Libre - MySQL comme Document Store

Hadoop / Big Data - cours.tokidev.frcours.tokidev.fr/bigdata/cours/mbds_big_data_hadoop_2017_2018... · 8-3 MySQL applier for Hadoop Dans le cas de MySQL, le connecteur est le MySQL

MySQL, en bref

Manuel MySQL 4.1.x - Version Française - Freebigbozoid.free.fr › CoursIUT › WEB › COURS › Documentation MySQL.… · Sommaire 2 Installation de MySQL 2.5 Changer de version

Jeudis du libre scrum

Site PHP Et MySQL

Jeudis du Libre - Themosis

Administrez Bases Donnees Mysql

MySQL vs PostgreSQL - labunix.uqam.ca

Manuel de référence MySQL - SILECS · Manuel de référence MySQL - SILECS ... mysql. 1

Tuto MySQL WampServer

Les jeudis de Perpignan

MySQL Notice Utilisateur - cecoiawiki.ac-creteil.frcecoiawiki.ac-creteil.fr/wiki/telechargement/GFC/mysql/mysql... · L’écran d’accueil vous indique que vous êtes prêt à installer

BIÈRES EN FÛT - 4 jeudis

Jeudis du libre_git

Decouverte MySQL PostgreSQL Oracle

Tous les jeudis - unipop.fr

Portes de garage - Store 62 : le professionnel du store

MySQL開発最新動向 Oracle MySQL Cloud Serviceの最新情報もご … · 2019-08-06 · MySQL InnoDB Cluster (GA) - MySQL Group Replication - MySQL Router - MySQL Shell MySQL

MySQL Cluster Cette présentation illustre la solution open source MySQL Cluster 7.1. Larchitecture MySQL Cluster 7.1 permet de répondre aux besoins suivants

MySQL java-mysql Java - MySQL - tecfa.unige.chtecfa.unige.ch/guides/tie/pdf/files/java-mysql.pdf · Java - MySQL - 1. Introduction au JDBC java-mysql-3 Internet et Education © TECFA

Connexion Mysql WebSphere 6.1

Environnement MySQL/PHP

Les jeudis de la découverte

MySQL 5 - fnac-static.com

Php mysql cours

Php4 Mysql

PHP #6 : mysql

Compte rendu de TP de MySQL - tiprof.frtiprof.fr/PHP-mySQL/TP-rendus/2009-10/tousCR-2009-2010.pdf · Compte rendu de TP de MySQL Coralie Pierrat • Décembre 2009 • 3EI MySQL est

formation.alterway.fr · Odoo (ex OpenERP) : paramétrage ... Présentation de MySQL 3. Installation de MySQL 4. Connexion à MySQL 5. Moteurs de stockage 6. Bases de données 7

MySQL / SQL EXEMPLES - obs-vlfr.frboebion/Php-Mysql/Seance2/MySQL_exemple.pdf · MySQL / SQL EXEMPLES Typologie du langage ... La création d'un index La création d'index en SQL

Technology

Jeudis du Libre - MySQL comme Document Store

Text of Jeudis du Libre - MySQL comme Document Store