Puisque tu as mis une prime, je vais partager mes secrets durement gagnés ...
En général, tous les SQL que j'ai réglés aujourd'hui nécessitaient l'utilisation de sous-requêtes. Venant du monde des bases de données Oracle, les choses que je tenais pour acquises ne fonctionnaient pas de la même manière avec MySQL. Et mes lectures sur le réglage de MySQL me font conclure que MySQL est derrière Oracle en termes d'optimisation des requêtes.
Alors que les requêtes simples requises pour la plupart des applications B2C peuvent bien fonctionner pour MySQL, la plupart des types de requêtes de rapport agrégé nécessaires pour Intelligence Reporting semblent nécessiter un peu de planification et de réorganisation des requêtes SQL pour guider MySQL pour les exécuter plus rapidement.
Administration:
max_connections
est le nombre de connexions simultanées. La valeur par défaut est 100 connexions (151 depuis 5.0) - très petite.
Remarque:
les connexions prennent de la mémoire et votre système d'exploitation peut ne pas être en mesure de gérer un grand nombre de connexions.
Les binaires MySQL pour Linux / x86 vous permettent d'avoir jusqu'à 4096 connexions simultanées, mais les binaires auto-compilés ont souvent moins de limite.
Définissez table_cache pour correspondre au nombre de vos tables ouvertes et connexions simultanées. Regardez la valeur open_tables et si elle augmente rapidement, vous devrez augmenter sa taille.
Remarque:
Les 2 paramètres précédents peuvent nécessiter beaucoup de fichiers ouverts. 20 + max_connections + table_cache * 2 est une bonne estimation de ce dont vous avez besoin. MySQL sur Linux a une option open_file_limit, définissez cette limite.
Si vous avez des requêtes complexes, sort_buffer_size et tmp_table_size sont probablement très importants. Les valeurs dépendent de la complexité de la requête et des ressources disponibles, mais 4 Mo et 32 Mo, respectivement, sont des points de départ recommandés.
Remarque: il s'agit de valeurs "par connexion", parmi read_buffer_size, read_rnd_buffer_size et quelques autres, ce qui signifie que cette valeur peut être nécessaire pour chaque connexion. Tenez donc compte de votre charge et des ressources disponibles lors de la définition de ces paramètres. Par exemple, sort_buffer_size est alloué uniquement si MySQL a besoin de faire un tri. Remarque: veillez à ne pas manquer de mémoire.
Si vous avez établi de nombreuses connexions (c'est-à-dire un site Web sans connexions persistantes), vous pouvez améliorer les performances en définissant thread_cache_size sur une valeur différente de zéro. 16 est une bonne valeur pour commencer. Augmentez la valeur jusqu'à ce que vos threads_created n'augmentent pas très rapidement.
CLÉ PRIMAIRE:
Il ne peut y avoir qu'une seule colonne AUTO_INCREMENT par table, elle doit être indexée et elle ne peut pas avoir de valeur DEFAULT
KEY est normalement un synonyme d'INDEX. L'attribut clé PRIMARY KEY peut également être spécifié comme juste KEY lorsqu'il est donné dans une définition de colonne. Cela a été mis en œuvre pour la compatibilité avec d'autres systèmes de base de données.
Une clé PRIMAIRE est un index unique où toutes les colonnes clés doivent être définies comme NOT NULL
Si un index PRIMARY KEY ou UNIQUE se compose d'une seule colonne de type entier, vous pouvez également faire référence à la colonne en tant que «_rowid» dans les instructions SELECT.
Dans MySQL, le nom d'une CLÉ PRIMAIRE est PRIMAIRE
Actuellement, seules les tables InnoDB (v5.1?) Prennent en charge les clés étrangères.
Habituellement, vous créez tous les index dont vous avez besoin lorsque vous créez des tables. Toute colonne déclarée comme PRIMARY KEY, KEY, UNIQUE ou INDEX sera indexée.
NULL signifie "n'ayant pas de valeur". Pour tester NULL, vous ne pouvez pas utiliser les opérateurs de comparaison arithmétique tels que =, <ou <>. Utilisez plutôt les opérateurs IS NULL et IS NOT NULL:
NO_AUTO_VALUE_ON_ZERO supprime l'incrémentation automatique pour 0 afin que seul NULL génère le numéro de séquence suivant. Ce mode peut être utile si 0 a été stocké dans la colonne AUTO_INCREMENT d'une table. (Soit dit en passant, stocker 0 n'est pas une pratique recommandée.)
Pour modifier la valeur du compteur AUTO_INCREMENT à utiliser pour les nouvelles lignes:
ALTER TABLE mytable AUTO_INCREMENT = value;
ou SET INSERT_ID = valeur;
Sauf indication contraire, la valeur commencera par: 1000000 ou spécifiez-la ainsi:
...) MOTEUR = MyISAM DEFAULT CHARSET = latin1 AUTO_INCREMENT = 1
HORAIRES:
Les valeurs des colonnes TIMESTAMP sont converties du fuseau horaire actuel en UTC pour le stockage et de UTC au fuseau horaire actuel pour la récupération.
http://dev.mysql.com/doc/refman/5.1/en/timestamp.html
Pour une colonne TIMESTAMP dans une table, vous pouvez affecter l'horodatage actuel comme valeur par défaut et la valeur de mise à jour automatique.
une chose à surveiller lors de l'utilisation de l'un de ces types dans une clause WHERE, il est préférable de faire WHERE datecolumn = FROM_UNIXTIME (1057941242) et non WHERE UNIX_TIMESTAMP (datecolumn) = 1057941242. faire ce dernier ne profitera pas d'un index sur cette colonne.
http://dev.mysql.com/doc/refman/5.1/en/date-and-time-functions.html
UNIX_TIMESTAMP()
FROM_UNIXTIME()
UTC_DATE()
UTC_TIME()
UTC_TIMESTAMP()
si vous convertissez un datetime en horodatage unix dans MySQL:
Et puis ajoutez-y 24 heures:
Et puis convertissez-le en un datetime il perd comme par magie une heure!
Voici ce qui se passe. Lors de la conversion de l'horodatage Unix en une date / heure, le fuseau horaire est pris en compte et il se trouve qu'entre le 28 et le 29 octobre 2006, nous avons quitté l'heure d'été et perdu une heure.
À partir de MySQL 4.1.3, les fonctions CURRENT_TIMESTAMP (), CURRENT_TIME (), CURRENT_DATE () et FROM_UNIXTIME () renvoient des valeurs dans le fuseau horaire actuel de la connexion , qui est disponible comme valeur de la variable système time_zone. De plus, UNIX_TIMESTAMP () suppose que son argument est une valeur datetime dans le fuseau horaire actuel.
Le paramètre de fuseau horaire actuel n'affecte pas les valeurs affichées par des fonctions telles que UTC_TIMESTAMP () ou les valeurs des colonnes DATE, TIME ou DATETIME.
REMARQUE: ON UPDATE met à jour UNIQUEMENT la DateTime si un champ est modifié. Si une MISE À JOUR entraîne aucun champ en cours de modification, la DateTime n'est PAS mise à jour!
De plus, le premier TIMESTAMP est toujours AUTOUPDATE par défaut même s'il n'est pas spécifié
Lorsque je travaille avec des dates, je convoque presque toujours la date julienne car les mathématiques des données sont alors une simple question d'ajouter ou de soustraire des entiers et des secondes depuis minuit pour la même raison. Il est rare que j'aie besoin d'une résolution temporelle d'une granularité plus fine que les secondes.
Les deux peuvent être stockés sous forme d'entier de 4 octets, et si l'espace est vraiment restreint, ils peuvent être combinés en temps UNIX (secondes depuis l'époque 1/1/1970) sous forme d'entier non signé qui sera bon jusqu'à environ 2106 comme:
'secondes en 24 heures = 86400
'Valeur max. De l'entier signé = 2,147,483,647 - peut contenir 68 années de secondes
'Valeur max. D'un entier non signé = 4 294 967 295 - peut contenir 136 années de secondes
Protocole binaire:
MySQL 4.1 a introduit un protocole binaire qui permet d'envoyer et de renvoyer des valeurs de données non-chaîne au format natif sans conversion vers et depuis le format chaîne. (Très utile)
De plus, mysql_real_query () est plus rapide que mysql_query () car il n'appelle pas strlen () pour agir sur la chaîne de l'instruction.
http://dev.mysql.com/tech-resources/articles/4.1/prepared-statements.html
Le protocole binaire prend en charge les instructions préparées côté serveur et permet la transmission de valeurs de données au format natif. Le protocole binaire a subi de nombreuses révisions lors des versions précédentes de MySQL 4.1.
Vous pouvez utiliser la macro IS_NUM () pour tester si un champ a un type numérique. Passez la valeur de type à IS_NUM () et il est évalué à TRUE si le champ est numérique:
Une chose à noter est que les données binaires PEUVENT être envoyées dans une requête normale si vous les échappez et que vous vous souvenez que MySQL ne nécessite que la barre oblique inverse et le caractère guillemet échappé. C'est donc un moyen très simple d'INSÉRER des chaînes binaires plus courtes comme des mots de passe cryptés / salés par exemple.
Serveur maître:
http://www.experts-exchange.com/Database/MySQL/Q_22967482.html
http://www.databasejournal.com/features/mysql/article.php/10897_3355201_2
GRANT REPLICATION SLAVE ON . à slave_user IDENTIFIED BY 'slave_password'
#Master Binary Logging Config STATEMENT causes replication
to be statement-based - default
log-bin=Mike
binlog-format=STATEMENT
server-id=1
max_binlog_size = 10M
expire_logs_days = 120
#Slave Config
master-host=master-hostname
master-user=slave-user
master-password=slave-password
server-id=2
Le fichier journal binaire doit lire:
http://dev.mysql.com/doc/refman/5.0/en/binary-log.html
http://www.mydigitallife.info/2007/10/06/how-to-read-mysql-binary-log-files-binlog-with-mysqlbinlog/
http://dev.mysql.com/doc/refman/5.1/en/mysqlbinlog.html
http://dev.mysql.com/doc/refman/5.0/en/binary-log.html
http://dev.mysql.com/doc/refman/5.1/en/binary-log-setting.html
Vous pouvez supprimer tous les fichiers journaux binaires avec l'instruction RESET MASTER, ou un sous-ensemble d'entre eux avec PURGE MASTER
--result-file = binlog.txt TrustedFriend-bin.000030
Normalisation:
http://dev.mysql.com/tech-resources/articles/intro-to-normalization.html
Fonctions UDF
http://www.koders.com/cpp/fid10666379322B54AD41AEB0E4100D87C8CDDF1D8C.aspx
http://souptonuts.sourceforge.net/readme_mysql.htm
Types de données:
http://dev.mysql.com/doc/refman/5.1/en/storage-requirements.html
http://www.informit.com/articles/article.aspx?p=1238838&seqNum=2
http://bitfilm.net/2008/03/24/saving-bytes-efficient-data-storage-mysql-part-1/
Une chose à noter est que sur une table mixte avec à la fois CHAR et VARCHAR, mySQL changera les CHAR en VARCHAR
RecNum integer_type UNSIGNED NOT NULL AUTO_INCREMENT, PRIMARY KEY (RecNum)
MySQL représente toujours les dates avec l'année en premier, conformément aux spécifications standard SQL et ISO 8601
Divers:
La désactivation de certaines fonctionnalités MySQl se traduira par des fichiers de données plus petits et un accès plus rapide. Par exemple:
--datadir spécifiera le répertoire de données et
--skip-innodb désactivera l'option inno et vous fera économiser 10-20M
Plus ici
http://dev.mysql.com/tech-resources/articles/mysql-c-api.html
Télécharger le chapitre 7 - gratuit
InnoDB est transactionnel mais il y a une surcharge de performance qui l'accompagne. J'ai trouvé les tables MyISAM suffisantes pour 90% de mes projets. Les tables non sécurisées pour les transactions (MyISAM) présentent plusieurs avantages qui leur sont propres, qui se produisent tous parce que:
il n'y a pas de frais généraux de transaction:
Plus vite
Besoins d'espace disque réduits
Moins de mémoire requise pour effectuer les mises à jour
Chaque table MyISAM est stockée sur disque dans trois fichiers. Les fichiers ont des noms qui commencent par le nom de la table et ont une extension pour indiquer le type de fichier. Un fichier .frm stocke le format de la table. Le fichier de données a une extension .MYD (MYData). Le fichier d'index a une extension .MYI (MYIndex).
Ces fichiers peuvent être copiés dans un emplacement de stockage intact sans utiliser la fonction de sauvegarde des administrateurs MySQL qui prend du temps (tout comme la restauration)
L'astuce consiste à faire une copie de ces fichiers, puis à DROPER la table. Lorsque vous remettez les fichiers en place, MySQl les reconnaît et met à jour le suivi de la table.
Si vous devez sauvegarder / restaurer,
La restauration d'une sauvegarde ou l'importation à partir d'un fichier de vidage existant peut prendre du temps en fonction du nombre d'index et de clés primaires que vous avez sur chaque table. Vous pouvez accélérer considérablement ce processus en modifiant votre fichier de vidage d'origine en l'entourant des éléments suivants:
SET AUTOCOMMIT = 0;
SET FOREIGN_KEY_CHECKS=0;
.. your dump file ..
SET FOREIGN_KEY_CHECKS = 1;
COMMIT;
SET AUTOCOMMIT = 1;
Pour augmenter considérablement la vitesse de rechargement, ajoutez la commande SQL SET AUTOCOMMIT = 0; au début du fichier de vidage et ajoutez le COMMIT; commande jusqu'à la fin.
Par défaut, l'autocommit est activé, ce qui signifie que chaque commande d'insertion dans le fichier de vidage sera traitée comme une transaction distincte et écrite sur le disque avant le démarrage de la suivante. Si vous n'ajoutez pas ces commandes, le rechargement d'une grande base de données dans InnoDB peut prendre plusieurs heures ...
La taille maximale d'une ligne dans une table MySQL est de 65 535 octets
La longueur maximale effective d'un VARCHAR dans MySQL 5.0.3 et on = taille de ligne maximale (65 535 octets)
Les valeurs VARCHAR ne sont pas complétées lorsqu'elles sont stockées. Les espaces de fin sont conservés lorsque les valeurs sont stockées et récupérées, conformément au SQL standard.
Les valeurs CHAR et VARCHAR dans MySQL sont comparées sans tenir compte des espaces de fin.
L'utilisation de CHAR n'accélérera votre accès que si l'ensemble de l'enregistrement est de taille fixe. Autrement dit, si vous utilisez un objet de taille variable, vous pouvez tout aussi bien rendre tous les objets de taille variable. Vous ne gagnez aucune vitesse en utilisant un CHAR dans une table qui contient également un VARCHAR.
La limite VARCHAR de 255 caractères a été augmentée à 65535 caractères à partir de MySQL 5.0.3
Les recherches en texte intégral sont prises en charge uniquement pour les tables MyISAM.
http://dev.mysql.com/doc/refman/5.0/en/fulltext-search.html
Les colonnes BLOB n'ont pas de jeu de caractères, et le tri et la comparaison sont basés sur les valeurs numériques des octets dans les valeurs de colonne
Si le mode SQL strict n'est pas activé et que vous attribuez une valeur à une colonne BLOB ou TEXT qui dépasse la longueur maximale de la colonne, la valeur est tronquée pour s'adapter et un avertissement est généré.
Commandes utiles:
vérifier le mode strict: SELECT @@ global.sql_mode;
désactiver le mode strict:
SET @@ global.sql_mode = '';
SET @@ global.sql_mode = 'MYSQL40'
ou supprimez: sql-mode = "STRICT_TRANS_TABLES, ...
MONTRER LES COLONNES DE mytable
SELECT max (namecount) AS virtualcolumn
FROM mytable ORDER BY virtualcolumn
http://dev.mysql.com/doc/refman/5.0/en/group-by-hidden-fields.html
http://dev.mysql.com/doc/refman/5.1/en/information-functions.html#function_last-insert-id
last_insert_id ()
vous obtient le PK de la dernière ligne insérée dans le thread actuel max (pkcolname) vous obtient le dernier PK global.
Remarque: si la table est vide, max (pkcolname) renvoie 1 mysql_insert_id () convertit le type de retour de la fonction native MySQL C API mysql_insert_id () en un type long (nommé int en PHP).
Si votre colonne AUTO_INCREMENT a un type de colonne BIGINT, la valeur retournée par mysql_insert_id () sera incorrecte. À la place, utilisez la fonction SQL MySQL interne LAST_INSERT_ID () dans une requête SQL.
http://dev.mysql.com/doc/refman/5.0/en/information-functions.html#function_last-insert-id
Juste une note que lorsque vous essayez d'insérer des données dans une table et que vous obtenez l'erreur:
Unknown column ‘the first bit of data what you want to put into the table‘ in ‘field list’
en utilisant quelque chose comme
INSERT INTO table (this, that) VALUES ($this, $that)
c'est parce que vous n'avez pas d'apostrophes autour des valeurs que vous essayez de coller à la table. Vous devriez donc changer votre code en:
INSERT INTO table (this, that) VALUES ('$this', '$that')
rappel que `` sont utilisés pour définir des champs, bases de données ou tables MySQL, pas des valeurs;)
Connexion perdue au serveur pendant la requête:
http://dev.mysql.com/doc/refman/5.1/en/gone-away.html
http://dev.mysql.com/doc/refman/5.1/en/packet-too-large.html
http://dev.mysql.com/doc/refman/5.0/en/server-parameters.html
http://dev.mysql.com/doc/refman/5.1/en/show-variables.html
http://dev.mysql.com/doc/refman/5.1/en/option-files.html
http://dev.mysql.com/doc/refman/5.1/en/error-log.html
Requêtes de réglage
http://www.artfulsoftware.com/infotree/queries.php?&bw=1313
Et bien ça devrait suffire pour gagner le bonus je pense ... Les fruits de nombreuses heures et de nombreux projets avec une excellente base de données gratuite . Je développe des serveurs de données d'application sur des plates-formes Windows principalement avec MySQL. Le pire désordre que j'ai dû redresser était
Le cauchemar ultime des bases de données héritées MySQL
Cela nécessitait une série d'applications pour transformer les tables en quelque chose d'utile en utilisant de nombreuses astuces mentionnées ici.
Si vous avez trouvé cela incroyablement utile, exprimez vos remerciements en votant.
Consultez également mes autres articles et livres blancs sur: www.coastrd.com