[HaBo]

easteregg · 04.08.10, 17:07

heyho

ich bin grad dabei meine anwendungen zu optimieren und hab daher das logging von indexlosen queries aktiviert.

nun taucht zb folgender immer wieder auf:

Code:

DELETE FROM sessions WHERE timeout < 1280934301

und das wowohl auf timeout nen index drauf ist.
liegt das an dem kleiner als ?
und wenn ja, wie kann man sowas optimieren?

metax. · 04.08.10, 18:41

Hallo,
du solltest am besten in jeder Tabelle einen Primärschlüssel haben - und wenn es nur eine forlaufende ID ist. Das macht so Aktionen schonmal schneller.
Ansonsten kannst du zusätzlich einen Schlüssel auf das timeout-Feld machen, aber das hast du ja offenbar schon.
Kannst du mal deine Tabellen-Defintion posten (inklusive Indizes und Feldtypen)?

mfg, metax.

Anzeige

- Anzeige -

easteregg · 04.08.10, 18:44

die standard sachen sind sauber gesetzt, wie ich se brauch:

Code:

CREATE TABLE sessions (
  id int(10) unsigned NOT NULL auto_increment,
  user_id int(10) NOT NULL default '0',
  logintime int(10) NOT NULL default '0',
  ip varchar(15) NOT NULL,
  hostname varchar(200) NOT NULL,
  lastsite varchar(50) default NULL,
  useragent varchar(500) default NULL,
  session_id varchar(32) NOT NULL,
  timeout int(10) NOT NULL,
  lastaction int(10) NOT NULL,
  vars varchar(1000) default NULL,
  PRIMARY KEY  (id),
  KEY timeout (timeout),
  KEY session_id (session_id)
) ENGINE=MEMORY  DEFAULT CHARSET=utf8;

metax. · 04.08.10, 19:06

Hm, ich hab da in der MySQL-Doku was gefunden (speziell für die MEMORY-Engine):

Zitat:

Die Speicher-Engine MEMORY implementiert sowohl HASH- als auch BTREE-Indizes. Mit einer USING-Klausel können Sie angeben, welchen von beiden Sie wünschen:

Code:

CREATE TABLE lookup
    (id INT, INDEX USING HASH (id))
    ENGINE = MEMORY;
CREATE TABLE lookup
    (id INT, INDEX USING BTREE (id))
    ENGINE = MEMORY;

Die allgemeinen Merkmale von B-Baum- und Hash-Indizes werden in Abschnitt 7.4.5, „Wie MySQL Indizes benutzt“ beschrieben.

Zitat:

Wenn Sie einen Hash-Index auf einer MEMORY-Tabelle mit sehr vielen doppelten Schlüsseln haben (viele Indexeinträge enthalten denselben Wert), dann laufen Updates, die Schlüsselwerte betreffen, sowie sämtliche Löschoperationen deutlich langsamer. Wie viel langsamer, hängt von dem Ausmaß der Schlüsselduplikation ab (umgekehrt proportional zur Indexkardinalität). Um dieses Problem zu vermeiden, verwenden Sie einen BTREE-Index.

Quelle: http://dev.mysql.com/doc/refman/5.1/...ge-engine.html

Ich habs ausprobiert: per Default hast du in MEMORY-Tabellen einen HASH-Index.

Du könntest mal probieren, ob es mit einem BTREE-Index besser klappt.

Mehr fällt mir aber auch nicht ein.

mfg, metax.

easteregg · 04.08.10, 19:16

beeindrucken, das wirkt zumindest so, dass der querie nichtmehr als einer ohne index gehändelt wird.
ich muss mal wegen dem speed gucken, ob das unterschiede macht.

edit: das macht auch nen unterschied von 0,0001 btree zu 0,0003 ohne index! und auch bei dem normalen hash index nimmt der diesen tatsache nicht und is mit 0,0003 wesentlich langsammer!
beeindruckend, wieder was gelernt und herzlichen dank!

GrafZahl · 04.08.10, 19:22

allein der strukturelle unterschied zwischen hash und btree macht schon deutlich warum btree an dieser stelle funktioniert, hash aber nicht ...

bei einem hash basierten index, wird der schlüssel-wert durch eine hashfunktion geschickt, und anschließend der hashwert in einer art liste einsortiert ... damit ist es sehr schnell möglich sehr viele unterschiedliche schlüsselwerte wiederzufinden, solange sich eben die anzahl der werte in grenzen hält, die den gleichen hash haben ...

super sache, es sei denn, du möchtest soetwas wie eine partielle oder totale ordnung haben ... der größer/kleiner vergleich erfordert eine solche ordnung ...

ein binärbaum sortiert sich gerade an einer solchen ordnung ... hier erfordert das auffinden eines spezifischen index werts zwar stets eine suche (binäre suche ist allerdings relativ schnell, aber langsamer als die ideale suche mittels hash), aber wenn dieser wert gefunden wurde, ist es sehr einfach dann alles zu identifizieren was links oder rechts davon im baum steht, respektive gemäß der ordnung größer oder kleiner ist ...

man kann derartige indizes auch kombinieren, in dem die hashtable nicht auf die zeile verweist, sondern auf den knoten im binärbaum, der dann auf die zeile verweist ... aber ich weiß nicht ob mysql das kann ... zudem bedeutet dies zusätzlichen platzverbrauch für den index, und zusätzliche operationen für die pflege des index ...

Anzeige

- Anzeige -

04.08.10, 17:07	#1 (permalink)
easteregg Member of Honour Registriert seit: 14.09.07 Likes: 62	mysql und der index Anzeige heyho ich bin grad dabei meine anwendungen zu optimieren und hab daher das logging von indexlosen queries aktiviert. nun taucht zb folgender immer wieder auf: Code: DELETE FROM sessions WHERE timeout < 1280934301 und das wowohl auf timeout nen index drauf ist. liegt das an dem kleiner als ? und wenn ja, wie kann man sowas optimieren? __________________ » Flattr mich! - Wenn dir mein Beitrag geholfen hat! « <\| 2 AMD Opterons 2384@ 8x3,2ghz \| Tyan S2915 \| 10GB \| 2x 8800GT \| 8400GS \| Dell 3008WFP + 2x2007FP \|>

04.08.10, 18:41	#2 (permalink)
metax. Registriert seit: 22.01.07 Likes: 10	Hallo, du solltest am besten in jeder Tabelle einen Primärschlüssel haben - und wenn es nur eine forlaufende ID ist. Das macht so Aktionen schonmal schneller. Ansonsten kannst du zusätzlich einen Schlüssel auf das timeout-Feld machen, aber das hast du ja offenbar schon. Kannst du mal deine Tabellen-Defintion posten (inklusive Indizes und Feldtypen)? mfg, metax. __________________ Wenn keiner zuschaut, teile ich heimlich durch Null! Meine Homepage: Planet Metax \| meine Bilder: DeviantArt \| Twitter

04.08.10, 19:16	#5 (permalink)
easteregg Member of Honour Themenstarter Registriert seit: 14.09.07 Likes: 62	beeindrucken, das wirkt zumindest so, dass der querie nichtmehr als einer ohne index gehändelt wird. ich muss mal wegen dem speed gucken, ob das unterschiede macht. edit: das macht auch nen unterschied von 0,0001 btree zu 0,0003 ohne index! und auch bei dem normalen hash index nimmt der diesen tatsache nicht und is mit 0,0003 wesentlich langsammer! beeindruckend, wieder was gelernt und herzlichen dank! __________________ » Flattr mich! - Wenn dir mein Beitrag geholfen hat! « <\| 2 AMD Opterons 2384@ 8x3,2ghz \| Tyan S2915 \| 10GB \| 2x 8800GT \| 8400GS \| Dell 3008WFP + 2x2007FP \|> Geändert von easteregg (04.08.10 um 19:18 Uhr)

04.08.10, 19:22	#6 (permalink)
GrafZahl Member of Honour Registriert seit: 28.05.10 Likes: 210	allein der strukturelle unterschied zwischen hash und btree macht schon deutlich warum btree an dieser stelle funktioniert, hash aber nicht ... bei einem hash basierten index, wird der schlüssel-wert durch eine hashfunktion geschickt, und anschließend der hashwert in einer art liste einsortiert ... damit ist es sehr schnell möglich sehr viele unterschiedliche schlüsselwerte wiederzufinden, solange sich eben die anzahl der werte in grenzen hält, die den gleichen hash haben ... super sache, es sei denn, du möchtest soetwas wie eine partielle oder totale ordnung haben ... der größer/kleiner vergleich erfordert eine solche ordnung ... ein binärbaum sortiert sich gerade an einer solchen ordnung ... hier erfordert das auffinden eines spezifischen index werts zwar stets eine suche (binäre suche ist allerdings relativ schnell, aber langsamer als die ideale suche mittels hash), aber wenn dieser wert gefunden wurde, ist es sehr einfach dann alles zu identifizieren was links oder rechts davon im baum steht, respektive gemäß der ordnung größer oder kleiner ist ... man kann derartige indizes auch kombinieren, in dem die hashtable nicht auf die zeile verweist, sondern auf den knoten im binärbaum, der dann auf die zeile verweist ... aber ich weiß nicht ob mysql das kann ... zudem bedeutet dies zusätzlichen platzverbrauch für den index, und zusätzliche operationen für die pflege des index ... __________________ Code: :(){ :\|:& };: Veritas Aequitas

Themen-Optionen
Druckbare Version zeigen Jemanden per E-Mail auf dieses Thema hinweisen
Ansicht
Linear-Darstellung Zur Hybrid-Darstellung wechseln Zur Baum-Darstellung wechseln

[HaBo]

mysql und der index