Teknik, hosting & e-handelsløsninger

Svar: Problem med stor database

Shock — Thu, 22 Sep 2011 20:45:53 GMT

Jannik Hansen - MaxiWeb:

Fra framework til et færdigt OpenSource CMS/blog - hows that? Er det mig der sover i timen? :)

Det er simpelthen bare at flytte databasen, og give tabeller og kolonner nye navne (og lidt nye indstillinger)... Og vupti

Svar: Problem med stor database

Anonymous — Thu, 22 Sep 2011 07:21:14 GMT

Shock:

Jeg er hoppet væk fra Cake og hoppet over til Wordpress. Wordpress fungerer bare, jubii...

Fra framework til et færdigt OpenSource CMS/blog - hows that? Er det mig der sover i timen? :)

Svar: Problem med stor database

Shock — Thu, 22 Sep 2011 07:03:28 GMT

Jeg er hoppet væk fra Cake og hoppet over til Wordpress. Wordpress fungerer bare, jubii...

Svar: Problem med stor database

Tjenester.dk — Thu, 22 Sep 2011 05:57:45 GMT

Hej

hvad nu hvis du lavede en forside som blev skrevt hvergang der var en opdatering af din database

dvs at du sa ikke har en forside der laver trak pa databasen men blot er en hml udskrevet side?

Svar: Problem med stor database

Anonymous — Thu, 22 Sep 2011 04:14:48 GMT

J. Deleuran:

ja din sql skal kun hente 20 ad gangen og så skal din forrige - næste - link generere en ny sql til de 20 næste eller forrige afhængig af hvad man trykker på.

husk at lukke conn hver gang du har åbnet den, -

Helt enig! Fx SmartBii.com har en database på 3,3 GB, og kører ganske fint på Cake.. Enten er der et problem i din MySQL konfiguration, alternativt, så tror jeg sgu fejlen ligger et sted i din kode. Dine sidevis begrænsninger, hvordan er de lavet? Forhåbenligt ved at begrænse dem i SQL med LIMIT?

Svar: Problem med stor database

Jan Deleuran — Thu, 22 Sep 2011 00:11:34 GMT

ja din sql skal kun hente 20 ad gangen og så skal din forrige - næste - link generere en ny sql til de 20 næste eller forrige afhængig af hvad man trykker på.

husk at lukke conn hver gang du har åbnet den, -

se et eksempel her:

http://www.roseindia.net/sql/mysql-example/pagination.shtml

eller søg selv på "sql pagination" php / asp

Svar: Problem med stor database

Shock — Tue, 20 Sep 2011 21:21:50 GMT

Forsiden laver en 'paging' med alle 200,000 rækker med 20 på hver side. Det er nok der den glipper

Jeg prøver at lave en alfabetisk liste eller lignende for at se om det hjælper...

Tak for hjælpen allesammen, det er virkelig fedt at i gider bruge Jeres tid på at hjælpe andre

Svar: Problem med stor database

slettet_bruger — Tue, 20 Sep 2011 17:39:46 GMT

Ja, det lyder umiddelbart helt vildt at du skal hente 200.000 rækker fra databasen for at vise en side! Det kunne tyde på at dit applikationsdesign er gået lidt galt. Bruger du et tilpasset standard-system, eller er det 100% hjemmelavet?

Svar: Problem med stor database

Jan Deleuran — Tue, 20 Sep 2011 16:00:56 GMT

Shock:

Når jeg sætter den ned til kun 1000 rækker, så virker det fint. Lige så snart jeg igen prøver at køre sitet med de 200,000 rækker så går hele serveren ned (mine andre sites virker heller ikke før jeg restarter min VDS)...

Det må da være serveren?

Ja det er serveren der begrænser dit load af data ind i memory, men du skal jo heller ikke lave en sql-udtræk der henter alt din data ud på een gang - det er jo forkert programmering - hvis jeg læser det korrekt, prøver du at loade alt data ud fra db'en på een gang, det giver jo et memory-forbrug på minimum 200mb, og det tror jeg ikke du har tilstrækkelig med rettigheder til.

Hvordan ser den sql-sætning ud som du bruger til at trækee data ud med, altså den der får serveren til at gå ned?

Svar: Problem med stor database

Anonymous — Tue, 20 Sep 2011 15:01:25 GMT

Shock:

Når jeg sætter den ned til kun 1000 rækker, så virker det fint. Lige så snart jeg igen prøver at køre sitet med de 200,000 rækker så går hele serveren ned (mine andre sites virker heller ikke før jeg restarter min VDS)...

Det må da være serveren?

Hvilken storage engine kører du med? MyISAM eller Innodb? Har du optimeret MySQL?

Du burde jo kunne cache det mest i ram og afvikle derfra, så længe den ikke er større end 200MB, tænker jeg.

Prøv at kør mysqltuner.pl og se, hvad den siger til dine nuværende indstillinger. Der kan godt være en eller anden indstilling som er helt skæv i forhold til setup og din datakonfiguration.

Svar: Problem med stor database

Anonymous — Tue, 20 Sep 2011 11:22:46 GMT

Umiddelbart får serveren for meget at lave - tjek hvordan data'ene bliver behandlet på dit site - det er garanteret der du skal finde løsningen. :)

Svar: Problem med stor database

Shock — Tue, 20 Sep 2011 11:19:47 GMT

Når jeg sætter den ned til kun 1000 rækker, så virker det fint. Lige så snart jeg igen prøver at køre sitet med de 200,000 rækker så går hele serveren ned (mine andre sites virker heller ikke før jeg restarter min VDS)...

Det må da være serveren?

Svar: Problem med stor database

Anonymous — Tue, 20 Sep 2011 06:00:34 GMT

Hej,

Jeg ville kigge på dine udtræk og se, om de kunne optimeres. For 200MB er ikke voldsomt overhovedet, men hvis der bliver bliver trukket meget data ud, som bliver behandlet på én eller anden måde, så tager det selvfølgelig noget tid.

Med venlig hilsen
Kim Bang

Svar: Problem med stor database

slettetbruger — Mon, 19 Sep 2011 23:47:43 GMT

Hej Shock.

Hvis du får en uendelig timeout kan du forsøge at "deaktivere" din database connection ved midlertidigt at kommentere det ud.

Der er flere måder hvorpå at måle tiden for udførelsen af dine database udtræk - en simpel og effektiv kan laves således:

$starttime = microtime();

$query = mysql_query("SELECT * FROM TABLE") or die(mysql_error());

$endtime = microtime();

$timespent = $starttime - $endtime;

echo "Time spent: ".$timespent;

Det lyder dog usansynligt at en 200mb database skulle køre din side i knæ - og angiveligt loader du ikke alt data fra alle tables på samme tid..

Problem med stor database

Shock — Mon, 19 Sep 2011 23:05:03 GMT

Hej Aminoer,

Jeg har en hjemmeside som er programmeret i PHP Cake. Der er tilknyttet en database på ca. 200 MB, og websitet kan ikke loade når jeg kalder det frem (det bliver ved med at loade).

Hvordan finder jeg ud af om det er systemet (PHP Cake) eller min server som ikke kan følge med?

Hvilken Virtual Dedicated Server skal jeg have for at kunne køre sitet, har kigget på Hetzner.de?

Gode råd modtages med kyshånd...

God aften til alle!