com.mysql.jdbc.Driver Performance

[etherius]

Moin moin!

Ich hab momentan ein kleines Performanceproblem mit folgendem Query:

SELECT mp.id, mp.machine, mp.logtimestamp, mp.dyelotrefno, mp.alarmno, mp.alarmstate, mp.alarmaddstate, m.machinename, m.mgroupno, m.minvolume, m.maxvolume, m.minweight, m.maxweight, m.machinetype, m.importstate, m.importerror, mga.machgrp_mgroupno, mga.name, mga.shortname, mga.reaction, sm.Deutsch, sm.Englisch, sm.Französich, sm.Italienisch, sm.Spanisch, sm.Portugisisch, sm.Türkisch, sm.chinesisch, sm.Griechisch

FROM machineprotocol mp

INNER JOIN machines m ON mp.machine = m.machineno

INNER JOIN machgrpalarm mga ON m.mgroupno = mga.machgrp_mgroupno

INNER JOIN MON1_stoermeldungen sm ON mga.TypeConfId = sm.TypeConfId

WHERE mp.Machine = 'MON1'

AND mp.DataType =1

Meckert mich bitte nicht zwecks der Tabellenstruktur an; die hab ich nicht Entworfen das war nen Kunde von uns und der wird die garantiert nicht ändern ^^ Über den phpmyadmin auf php5/apache2/w32 braucht das query 0,0157sek zum Ausführen, über den JDBC treiber schmiert mir java mit einem OutOfMemoryError ab:

import java.sql.Connection;

import java.sql.DriverManager;

import java.sql.ResultSet;

import java.sql.SQLException;

import java.sql.Statement;



public class TestMySql {


    public static void main(String[] args) {


        String q="SELECT mp.id, mp.machine, mp.logtimestamp, mp.dyelotrefno, mp.alarmno, mp.alarmstate, mp.alarmaddstate, m.machinename, m.mgroupno, m.minvolume, m.maxvolume, m.minweight, m.maxweight, m.machinetype, m.importstate, m.importerror, mga.machgrp_mgroupno, mga.name, mga.shortname, mga.reaction, sm.Deutsch, sm.Englisch, sm.Französich, sm.Italienisch, sm.Spanisch, sm.Portugisisch, sm.Türkisch, sm.chinesisch, sm.Griechisch FROM machineprotocol mp INNER JOIN machines m ON mp.machine = m.machineno INNER JOIN machgrpalarm mga ON m.mgroupno = mga.machgrp_mgroupno INNER JOIN MON1_stoermeldungen sm ON mga.TypeConfId = sm.TypeConfId WHERE mp.Machine = 'MON1' AND mp.DataType =1";


        try {

            Class.forName("com.mysql.jdbc.Driver");


            Connection dbcon = DriverManager.getConnection("jdbc:mysql://symmedia-store/monforts", "monforts", "symmedia");


            Statement s = dbcon.createStatement();


            ResultSet rs = s.executeQuery(q);

        } catch (ClassNotFoundException e) {

            // TODO Auto-generated catch block

            e.printStackTrace();

        } catch (SQLException e) {

            // TODO Auto-generated catch block

            e.printStackTrace();

        }




    }


}

::::

java.lang.OutOfMemoryError

Exception in thread "main" 

Ich hab schon versucht mit -Xms und -Xmx die Speichergröße auf 512MB zu vergrößern, der Speicher ist allerdings trotzdem innerhalb weniger Sekunden voll und die Anwendung schmiert mir obengenanntem Fehler weg.

Ich bin für jeden Tipp dankbar.

mfg

Eth

[etherius]

Grml ich hab grad das Problem gefunden. Der phpmyadmin hat immer automatisch nen LIMIT dran geklatscht; in wirklichkeit stehen in der db knapp 1000 zeilen und damit kommt java größenmäßig wohl nicht ganz klar.

[baba007]

1000 Zeilen werden ja auch selten gebraucht oder ?

bei größeren Datenmengen hilft nur Häppchenweise einlesen. a 50 stück reichen absolut aus...

schau mal hier

[etherius]

So nu aber

Erste gedachte Lösung war falsch. Die Joins scheinen leicht verkehrt zu sein; in Wirklichkeit gibt das Join knapp 2,8Mio Zeilen zurück. Das ist nun wirklich ein wenig zuviel

@baba07: 1000 Zeilen werden schon gebraucht. Bei dem Query handelt es sich um die Abfrage von Log-Daten aus der Datenbank zu Visualisierungszwecken.

[Terwilliger]

du kannst mit der Methode Statement.setFetchSize(int rows) die Menge der auf einmal zu holenden Datensätze auf "rows" reduzieren.