![]() |
Optimera MySQL
Hej!
Jag har en VPS där jag precis lagt upp en site. Jag har dock lite problem med MySQL och får ofta ett fel i stil med: "Incorrect key file for table '/tmp/#sql...." Jag har läst att detta kan bero på att det är för lite plats på disken för /tmp/... Kollade i katalogen på disken och hittade en fil som hette #sql_33ba_0.MDY som är ca 270MB stor. Vad används denna fil till? Hur stor är "normalt" att den är? Jag har i huvudsak två tabeller som har många rader. Den ena har 19.000 rader och den andra 34.000 rader. Tips på hur jag kan försöka analysera och optimera ev. flaskhalsar och problem? EDIT: Körde OPTIMIZE TABLE på dessa två tabeller och då försvann .MYD-filen så nu verkar det fungera bättre. Hur kan jag undvika samma problem i framtiden? |
Använd index och optimera sql frågorna. Kör EXPLAIN framför dem.
Många säger att man ska undvika att program som "mysqltuner" osv och istället konsultera MySQL konsulter. eftersom programmen inte kan ge optimala svar. Dom har iofs rätt, men du kan testa programmet iaf. Det ger dig ett litet hum om vad som kan vara fel. |
Det finns en rad enkla saker man man göra manuellt på egen hand utan att behöva en konsult eller ett program som mysqltuner.
.myd är helt enkelt bara databasens datafil. I det här fallet är det förmodligen en backupfil som kan användas för att återställa databasen. Storleken är inte alls extrem och du har ganska små tabeller med några 10k rader så det ska inte ställa till några problem. En enkel repair table fungerar förmodligen för dig. |
mysqltuner har jag.
.myd filen är en tmp-fil som mysql skriver till tabellen när den gör en av mina JOINS verkar det som. Den vill alltså inte använda mina index. Har en tråd på Stack Overflow som jag fått lite tips i jag ska testa :) |
Ah, läste lite snabbt, det var en tillfällig fil. De borde tas bort per automatik, kör du en gammal MySQL-version tro?
|
MySQL v.5.0.91 är det. Filerna verkar tas bort dock. Hade nog inget att göra med att jag körde "OPTIMIZE TABLE". Dock tar ju queryn väldigt lång tid att köra när den måste skriva en tmp-tabell på 200-400MB till disk för att köra den.
Här finns mina querys och tabeller beskrivna mer detaljerat: http://stackoverflow.com/questions/5...ze-mysql-query |
Jag kopierar in mitt inlägg från SO här så kanske någon här kan hjälpa mig med detta.
EXPLAIN på queryn som beskrivs nedan ger detta: http://img268.imageshack.us/img268/3...10309kl015.png Vilket tyder på att problemet har med catraws-tabellen att göra. Den gör ju en full table scan på den verkar det som och måste skriva en tmp-tabell till disken då. Hi! I have a database that stores products. The two biggest tables are my products table and images table. Products: ~19.000 rows Images: ~34.000 rows Categories: ~60 rows Raw categories: ~1200 rows Brands: 700 rows (The other tables are only a couple of rows) I also have a table with brands, raw categories, static categories (the raw categories are mapped to a static category). I have created a Product VIEW to gather the data I need, like this: Kod:
CREATE OR REPLACE VIEW `jos_clothes_view_products` AS Then when running a query like this from PHP: SELECT `tbl`.* FROM `jos_clothes_view_products` AS `tbl` WHERE `tbl`.`cat1` != 'NULL' AND `tbl`.`enabled` = '1' ORDER BY `created_on` DESC , `ordering` ASC LIMIT 0 , 20; The query is often very slow! Not always though (probably because of caching?). I have also noticed that it creates a tmp-table at about 200MB in size. Sometimes it gets even bigger and fails with "Invalid key for file....". Any ideas how I can optimize the query? Or the VIEW actually, I guess it's the bottleneck here. Correct? Product table structure: Kod:
CREATE TABLE IF NOT EXISTS `jos_clothes_products` ( Best Regards EDIT: Structure of jos_clothes_catraws Kod:
-- |
Blir det bättre om du sätter index på kolumnerna
`clothes_category_id`och `clothes_reseller_id` i tabellen `jos_clothes_catraws`? |
Citat:
|
Och hur fungerar denna frågan:
Citat:
|
Hmmm. Ser inte ut att göra någon skillnad när jag kör EXPLAIN på den i alla fall.
Problemet verkar ju ligga i att den gör full table scan på catraws-tabellen för varje rad i category-tabellen. |
Du joinar mellan catraws och categories på två olika sätt, kan vara det som stökar till det.
Full table scan får man leva med ibland. men jag trodde att det vara den temporära tabellen som var ditt stora problem? |
Har du satt index i båda tabellerna dvs både på Främmande nyckel och primärnyckel? Det kan ha betydelse när SQL ska söka efter en FK (Forreign Key).
Ett vanligt problem är att man glömmer att indexera Främmande nycklar, det finns de som kör utan primärnycklar också. Kolla hur dina sammansatta index ser ut dvs om du har fler kolumner i ett och samma index eller primärnyckel. Kolla att du har samma ordning i JOIN och WHERE satser. Kolla även att du har det mest diskriminerande värdet först, och sen i fallande skala... |
Jag skulle nog se över databasdesignen i allmänhet.
Citat:
|
Citat:
Ta Currency som har en internationellt standardiserad 3-ställig valutakod SEK, NOK; USD; EUR mfl dessa passar betydligt bättre som primärnycklar än ett orelaterat heltalsvärde. |
Citat:
|
Citat:
När man bygger en databasstruktur i en relationsdatabas så är det viktigaste att man får en inbyggd kvalitetskontroll på informationen man lagrar. Då är naturliga primärnycklar en naturlig del av det arbetet. Främmande nycklar som då länkar till primärnycklar är en annan del. Atomära egenskaper ytterligare en. Att följa normalformernas definitioner ytterligare en. Att använda syntetsiska primärnycklar ska manundvika och endast använda i de fall när det inte finns en naturlig primärnyckel eller där en naturlig primärnyckel kommer att bestå av orimligt många kolumner (typ; >7 kolumner). Den "prestandavinst" man vinner på att använda syntetiska PK är oftast så marginell att den inte är värd att beakta, i de flesta fall. Man förlorar så otroligt mycket mer vad gäller den inbyggda kvalitetskontrollen av information när man gör det. Använder man naturliga PK så kan man som människa utföra okulärbesiktning av data på ett enklare sätt än med syntetiska PK. Du kan m a o direkt se om set står NOK i en kolumn där du för väntar dig att det ska stå SEK, men om det står 4 i stället för 7 så finns det inget naturligt sätt för en människa att avgöra om informationen är korrekt eller inte. Man måste ha mycket mer komplexa sätt att kontrollera om informationen är korrekt och det innebär att det är lättare att man får strukturella fel i sin databas och sina applikationer. |
Citat:
Vilken databasdesign som passar bäst beror ju på hur databasen ska användas. Men använder man ett RDBMS är man antagligen intresserad av att efterleva ACID. Annars ska man nog titta på andra databassystem med andra sätt att lagra data. Du säger: "När man bygger en databasstruktur i en relationsdatabas så är det viktigaste att man får en inbyggd kvalitetskontroll på informationen man lagrar.". Det är ju just det man åsidosätter genom att göra som du föreslår? Genom att acceptera redundans ber man om dataanomalier i databasen. För att inte tala om prestandakostnaden att i beräkningar jämföra VARCHAR med VARCHAR jämfört med INT med INT... |
Citat:
Det där med texterminal förstod jag inte? Jag använder grafiska verktyg att analysera data med. |
Citat:
Nej, det där tänket bör förpassas till det förgångna en gång för alla. |
Man kan inte säga att man generellt ska undvika syntetiska primärnycklar.
Jag säger tvärtom , undvik naturliga primärnycklar i 9 fall av 10. Speciellt viktigt då det är flera kolumner, tänk att göra en många-till-många relation, givet att du har t.ex två PK bestående av 4 kolumner så får du du 8 kolumner i kopplingstabellen jämfört med två kolumner om du kör syntetiska primärnycklar. Det där med anomalier med syntetiska PK förstår jag inte, man är med det 100% säker på att man inte har dubletter. Och självklart har man foreign key constraints och valideringar av data ändå. En primärnyckel ska vara unik och inte ha en mening, då denna "mening" kan ändras, personnummer är ett exempel. Vad gäller prestanda så är joins mellan char avsevärt mycket slöare jämfört med integers. Så pass att det kan orsaka upplevd seghet med mycket data. Och vad gör man då, designar om databasen? Njae.... |
Citat:
|
Citat:
Citat:
Citat:
Citat:
Citat:
|
Alla tider är GMT +2. Klockan är nu 02:43. |
Programvara från: vBulletin® Version 3.8.2
Copyright ©2000 - 2025, Jelsoft Enterprises Ltd.
Svensk översättning av: Anders Pettersson