Les Benchmarks pour les SGBDs
49
pages
Español
Documents
Le téléchargement nécessite un accès à la bibliothèque YouScribe Tout savoir sur nos offres
49
pages
Español
Documents
Le téléchargement nécessite un accès à la bibliothèque YouScribe Tout savoir sur nos offres
h
t
t
p
:
/
/
m
e
m
b
r
e
s
-
l
i
g
l
a
b
.
i
m
a
g
.
f
r
/
d
o
n
s
e
z
/
c
o
u
r
s
L
e
s
B
e
n
c
h
m
a
r
k
s
p
o
u
r
l
e
s
S
G
B
D
s
D
id
i
e
r
D
o
n
s
e
z
U
n
i
v
e
r
s
i
t
é
J
o
s
e
p
h
F
o
u
r
i
e
r
-
G
r
e
n
o
b
l
e
1
P
o
l
y
T
e
c
h
’
G
r
e
n
o
b
l
e
-
L
I
G
/
A
D
E
L
E
D
i
d
i
e
r
.
D
o
n
s
e
z
@
i
m
a
g
.
f
r
D
i
d
i
e
r
.
D
o
n
s
e
z
@
i
e
e
e
.
o
r
g 1
1
/
0
6
/
2
0
1
0
L
i
c
e
n
c
e
C
et
t
e
p
r
é
s
e
nt
at
i
o
n
es
t
c
o
uv
e
r
t
e
p
a
r
l
e
c
o
nt
r
a
t
C
r
e
at
i
v
e
C
o
m
m
o
ns
B
y
N
C
N
D
ht
t
p:
/
/
c
r
e
a
t
i
v
ec
o
m
m
o
n
s
.
or
g/
l
i
c
e
n
s
e
s
/
by
-
n
c
-
n
d
/
2
.
0/
f
r
/
2
D
i
d
i
er
D
o
n
s
ez
,
1
9
9
8
-
2
0
1
0
,
B
en
c
h
m
a
r
k
s
p
o
u
r
S
G
B
D
s 1
1
/
0
6
/
2
0
1
0
C
i
t
a
t
i
o
n
W
h
e
n
y
o
u
c
a
n
m
e
a
s
u
r
e
w
h
a
t
y
o
u
ar
e
s
p
e
a
k
i
n
g
ab
o
ut
,
an
d
ex
pr
es
s
i
t
i
n
nu
m
b
e
r
s
,
y
o
u
k
n
o
w
s
o
m
et
h
i
n
g
ab
o
ut
i
t
;
b
u
t
w
h
e
n
y
o
u
c
a
n
n
ot
m
e
a
s
u
r
e
i
t
,
w
h
e
n
y
o
u
c
a
n
n
ot
ex
pr
es
s
i
t
i
n
n
u
m
b
e
r
s
,
y
o
u
r
k
n
o
w
l
e
d
g
e
i
s
of
a
m
e
a
g
e
r
an
d
u
n
s
a
t
i
s
f
ac
t
or
y
k
i
n
d
;
i
t
m
ay
be
t
h
e
be
g
i
n
n
i
n
g
o
f
k
n
o
w
l
e
d
g
e
,
b
u
t
y
o
u
hav
e
s
c
ar
c
e
l
y
i
n
y
o
ur
t
ho
u
g
h
t
s
a
d
v
a
nc
e
d
t
o
t
h
e
s
t
at
e
of
S
c
i
e
nc
e,
w
h
a
t
ev
e
r
t
h
e
m
at
t
er
m
ay
be
.
L
o
r
d
K
el
v
i
n,
1
8
8
3
3
D
i
d
i
er
D
o
n
s
ez
,
1
9
9
8
-
2
0
1
0
,
...
Voir
t
t
p
:
/
/
m
e
m
b
r
e
s
-
l
i
g
l
a
b
.
i
m
a
g
.
f
r
/
d
o
n
s
e
z
/
c
o
u
r
s
L
e
s
B
e
n
c
h
m
a
r
k
s
p
o
u
r
l
e
s
S
G
B
D
s
D
id
i
e
r
D
o
n
s
e
z
U
n
i
v
e
r
s
i
t
é
J
o
s
e
p
h
F
o
u
r
i
e
r
-
G
r
e
n
o
b
l
e
1
P
o
l
y
T
e
c
h
’
G
r
e
n
o
b
l
e
-
L
I
G
/
A
D
E
L
E
D
i
d
i
e
r
.
D
o
n
s
e
z
@
i
m
a
g
.
f
r
D
i
d
i
e
r
.
D
o
n
s
e
z
@
i
e
e
e
.
o
r
g 1
1
/
0
6
/
2
0
1
0
L
i
c
e
n
c
e
C
et
t
e
p
r
é
s
e
nt
at
i
o
n
es
t
c
o
uv
e
r
t
e
p
a
r
l
e
c
o
nt
r
a
t
C
r
e
at
i
v
e
C
o
m
m
o
ns
B
y
N
C
N
D
ht
t
p:
/
/
c
r
e
a
t
i
v
ec
o
m
m
o
n
s
.
or
g/
l
i
c
e
n
s
e
s
/
by
-
n
c
-
n
d
/
2
.
0/
f
r
/
2
D
i
d
i
er
D
o
n
s
ez
,
1
9
9
8
-
2
0
1
0
,
B
en
c
h
m
a
r
k
s
p
o
u
r
S
G
B
D
s 1
1
/
0
6
/
2
0
1
0
C
i
t
a
t
i
o
n
W
h
e
n
y
o
u
c
a
n
m
e
a
s
u
r
e
w
h
a
t
y
o
u
ar
e
s
p
e
a
k
i
n
g
ab
o
ut
,
an
d
ex
pr
es
s
i
t
i
n
nu
m
b
e
r
s
,
y
o
u
k
n
o
w
s
o
m
et
h
i
n
g
ab
o
ut
i
t
;
b
u
t
w
h
e
n
y
o
u
c
a
n
n
ot
m
e
a
s
u
r
e
i
t
,
w
h
e
n
y
o
u
c
a
n
n
ot
ex
pr
es
s
i
t
i
n
n
u
m
b
e
r
s
,
y
o
u
r
k
n
o
w
l
e
d
g
e
i
s
of
a
m
e
a
g
e
r
an
d
u
n
s
a
t
i
s
f
ac
t
or
y
k
i
n
d
;
i
t
m
ay
be
t
h
e
be
g
i
n
n
i
n
g
o
f
k
n
o
w
l
e
d
g
e
,
b
u
t
y
o
u
hav
e
s
c
ar
c
e
l
y
i
n
y
o
ur
t
ho
u
g
h
t
s
a
d
v
a
nc
e
d
t
o
t
h
e
s
t
at
e
of
S
c
i
e
nc
e,
w
h
a
t
ev
e
r
t
h
e
m
at
t
er
m
ay
be
.
L
o
r
d
K
el
v
i
n,
1
8
8
3
3
D
i
d
i
er
D
o
n
s
ez
,
1
9
9
8
-
2
0
1
0
,
...
http://membres-liglab.imag.fr/donsez/cours
Les Benchmarks pour les SGBDs
Didier Donsez Université Joseph Fourier - Grenoble 1 PolyTech’ Grenoble - LIG / ADELE Didier.Donsez@imag.fr Didier.Donsez@ieee.org
Licence Cette présentation est couverte par le contrat Creative Commons By NC ND .snommocecil/gro//p:tthvetieacr//0rf/by-nsesd/2.nc-n
Citation When you can measure what you are speaking about, and express it in numbers, you know something about it; but when you cannot measure it, when you cannot express it in numbers, your knowledge is of a meager and unsatisfactory kind; it may be the beginning of knowledge, but you have scarcely in your thoughts advanced to the state of Science, whatever the matter may be. Lord Kelvin, 1883
Plan
Qu’est ce qu’un Benchmark ? Benchmarks SGBDs Relationnels Benchmarks SGBDs Objets Benchmark SGBDs Objet-Relation
nel Benchmarks, Web et SGBDs Comment sont effectués les Benchmarks ? Interprétation des Résultats Conclusion et Bibliographie
Qu’est ce qu’un Benckmark ?
Benchmark Banc de Performances Mesurer les performances d’un système (matériel / logiciel) sous une charge de travail caractérisant une application type. Cette application peut être définie selon des spécifications écrites par des organismes compétents Intérêt
fournir un indicateur fiable et global de qualitédes produits comparer les produits entre eux (avant d’acheter) irrnoufc stnemugra sed uxommercia dimensionner son système en fonction de ses besoins avant achat ou avant migration version de logiciel ou génération de matériel Remarque :ATTENTION ’écart entre Application Réelle (la votre) et Application «Modèle»à l (celle utilisé par le banc d’essai)
Les Benchmarks pour SGBDs d ’Entreprise
Wisconsin, AS3AP(ANSI SQL Standard Scalable and Portable) Premiers bancs d ’essai TPC-A et TPC-B Transactionnel bancaire TPC-C,TPC-E Système d ’Information d ’Entreprise (Mix) TPC/D, TPC-H,TPC-R InfoCentre (BD Décisionnelle) TPC-W,TPC-App E-business (Web et Commerce Electronique)
Wisconsin Benchmark (University of Wisconsin)
Premier benchmark BD dans la littérature But SGF et Premiers moteurs SGBD-R Comparaison des performances des algorithmes des opérateurs relationnels Variables des tests Taille des relations Sélectivité des attributs (champs) Taille des opérandes Indexé ou non Conditions d ’expérimentation Environnement mono-utilisateur requête 1 à 1 (batch), buffers mémoire purgés
!
TPC(http://www.tpc.org) Transaction Processing-performance Council
corporation de 44 entreprises(San José, 1988) But: Définir des benchmarks pour des SGBDs pour des Moniteurs Transactionnels 5 benchmarks BD bancaire (OLTP)TPC-A et TPC-B Transactionnel Prise de commandeTPC-C et TPC-E Transactionnel (OLTP) TPC-D, TPC-H TPC-R , Décisionnel (OLAP) 1 benchmark Web dynamique TPC-W Web et Commerce Electronique B2C
Status actuels des benchmarks TPC StatusBenchmark Création auTPC-A 1989 obsolète6/6/1995 au obsolèteTPC-B 08/19906/6/1995 TPC-C 07/1992 actif TPC-D 04/1995 obsolète au4/6/99 à l’état de draftTPC-E resté TPC-H actif TPC-R actif TPC-W actif
“The Evolution of TPC Benchmarks: Why TPC-A and TPC-B are Obsolete, C. Levine, J. Gray, S. Kiss, W. Kohler, Open OLTP Report, Vol. 4, No 7, Nov., 1993. pp. 2-14. Standish Group, Yarmouth, MA.
TPC/A & TPC/B: Débit/Crédit L’article initiateur
Anon et al,"A Measure of Transaction Processing Power",Datamation, V.31.7, April 1985, pp. 112-118 TPC/A & B OLTP : OnLine Transaction Processing Simulation d’Opération de Débit et Crédit sur des comptes bancaires TPC/A : Environnement réel Humain (temps de réflexion de 60 secondes) Terminaux, Réseaux (LAN ou WAN), SGBD Contraintes sur les temps de réponse TPC/B : Environnement Batch SGBD standalone plus simple à expérimenter
L’application Datamation
NETWORK
DATABASE
10 Million Customers
Duplex Log
10GB 90-Day History
10 000 Tellers 10/Branch
1000 Branches
Presentation Services Data Communications
Debit-Credit Transaction
1GB 10 Million Accounts
Database
1MB 10 000 Tellers
85
X25
100KB 1000 Branches
