Comment stocker le caractère Emoji dans la base de données MySQL

J'utilise le caractère Emoji dans mon projet. Ces caractères sont enregistrés (??) dans la base de données mysql. J'avais utilisé le classement par défaut de la base de données dans utf8mb4_general_ci. Cela montre

1366 Valeur de chaîne incorrecte: '\ xF0 \ x9F \ x98 \ x83 \ xF0 \ x9F ...' pour la colonne 'commentaire' à la ligne 1

Étape 1, modifiez le jeu de caractères par défaut de votre base de données:

ALTER DATABASE database_name CHARACTER SET = utf8mb4 COLLATE = utf8mb4_unicode_ci;

étape 2, définissez le jeu de caractères lors de la création de la table:

CREATE TABLE IF NOT EXISTS table_name (
...
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE utf8mb4_general_ci;

ou modifier la table

ALTER TABLE table_name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;
ALTER TABLE table_name modify name text charset utf8mb4;

1) Base de données: remplacez le classement par défaut de la base de données par utf8mb4.

2) Table: modifiez le classement de la table en CHARACTER SET utf8mb4 COLLATE utf8mb4_bin.

Requete:

ALTER TABLE Tablename CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_bin

3) Code:

INSERT INTO tablename (column1, column2, column3, column4, column5, column6, column7)
VALUES ('273', '3', 'Hdhdhdh😜😀😊😃hzhzhzzhjzj 我爱你 ❌', 49, 1, '2016-09-13 08:02:29', '2016-09-13 08:02:29')

4) Définir utf8mb4dans la connexion à la base de données:

  $database_connection = new mysqli($server, $user, $password, $database_name); 
  $database_connection->set_charset('utf8mb4');

Les bases de données et les tables doivent avoir un jeu de caractères utf8mb4et un classement utf8mb4_unicode_ci.

Lors de la création d'une nouvelle base de données, vous devez utiliser:

CREATE DATABASE mydb CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

Si vous avez une base de données existante et que vous souhaitez ajouter un support:

ALTER DATABASE database_name CHARACTER SET = utf8mb4 COLLATE = utf8mb4_unicode_ci;

Vous devez également définir le jeu de caractères et le classement corrects pour vos tables:

CREATE TABLE IF NOT EXISTS table_name (
    ...
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE utf8mb4_unicode_ci;

ou modifiez-le si vous avez des tables existantes avec beaucoup de données:

ALTER TABLE table_name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

Notez que ce utf8_general_cin'est plus la meilleure pratique recommandée. Voir les questions et réponses associées:

Quelle est la différence entre utf8_general_ci et utf8_unicode_ci sur Stack Overflow.

Si vous utilisez Solr + Mysql + Java, vous pouvez utiliser:

Cela peut être utilisé:

• case1: Lorsque vous ne voulez pas modifier DB.
• case2: lorsque vous devez importer des émoticônes de votre Mysql vers le noyau Solr.

Dans le cas ci-dessus, c'est l'une des solutions pour stocker vos émoticônes dans votre système.

Étapes pour l'utiliser:

Bibliothèque utilisée: import java.net.URLDecoder; import java.net.URLEncoder;

1. Utilisez urlEncoder pour encoder votre chaîne avec des émoticônes.
2. Stockez-le dans DB sans modifier le MysqlDB.
3. Vous pouvez le stocker dans solr core (forme décodée) si vous le souhaitez ou vous pouvez stocker sous forme codée.
4. Lorsque vous récupérez ces émoticônes à partir du noyau DB ou Solr, vous pouvez maintenant les décoder à l'aide de urlDecoder.

Exemple de code:

import java.net.URLDecoder;
import java.net.URLEncoder;

public static void main(String[] args) {
    //SpringApplication.run(ParticipantApplication.class, args);
    System.out.println(encodeStringUrl("🇺🇸🇨🇳🇯🇵🇩🇪🔳🔺🆔🆔🆑3⃣5⃣3⃣‼〽➗➗🎦🔆🎦🔆♋♍♋♍⬅⬆⬅⬅🛂🚹🛂🛄🚳🚬💊🔧💊🗿     "));
    System.out.println(decodeStringUrl("Hello+emoticons%2C%2C%F0%9F%98%80%F0%9F%98%81%F0%9F%98%8A%F0%9F%98%8B%F0%9F%98%8E%F0%9F%98%8A%F0%9F%98%8D%E2%98%BA%F0%9F%98%98%E2%98%BA%F0%9F%98%91%F0%9F%98%87%F0%9F%98%98%F0%9F%98%8B%F0%9F%90%84"));
}

public static String encodeStringUrl(String url) {
    String encodedUrl =null;
    try {
         encodedUrl = URLEncoder.encode(url, "UTF-8");
    } catch (UnsupportedEncodingException e) {
        return encodedUrl;
    }
    return encodedUrl;
}

public static String decodeStringUrl(String encodedUrl) {
    String decodedUrl =null;
    try {
         decodedUrl = URLDecoder.decode(encodedUrl, "UTF-8");
    } catch (UnsupportedEncodingException e) {
        return decodedUrl;
    }
    return decodedUrl;
}

J'ai mis à jour ma base de données et ma table pour passer de utf8 à utf8mb4 . Mais rien ne fonctionne pour moi. Ensuite, j'ai essayé de mettre à jour le type de données de colonne en blob , heureusement cela a fonctionné pour moi et les données ont été enregistrées. Même ma base de données et ma table sont toutes les deux CHARACTER SET utf8 COLLATE utf8_unicode

La commande pour modifier la colonne est:

ALTER TABLE TABLE_NAME MODIFY COLUMN_NAME TYPE;

Et nous devons utiliser type = BLOB

L'exemple à modifier est le suivant: -

ALTER TABLE messages MODIFY content BLOB;

J'ai vérifié que les dernières bases de données mySQL et autres n'ont pas besoin ''d'être utilisées dans la commande sur nom_table, nom_colonne, etc.

Extraire et enregistrer les données: enregistrez directement le contenu du chat dans la colonne et pour récupérer les données, récupérez les données sous forme de tableau d'octets à (byte[])partir de la colonne db, puis convertissez-les en stringpar exemple (code Java)

new String((byte[]) arr) 

Ma réponse ne fait qu'ajouter à la réponse de Selvamani P.

Vous devrez peut-être également modifier les SET NAMES utf8requêtes avec SET NAMES utf8mb4. Cela a fait l'affaire pour moi.

En outre, c'est un excellent article pour porter votre site Web de utf8 à utf8mb4. En particulier, l'article fait 2 bons points sur les index et la réparation des tables après les avoir convertis en utf8mb4:

LES INDICES

Lors de la conversion de utf8 en utf8mb4, la longueur maximale d'une colonne ou d'une clé d'index reste inchangée en termes d'octets. Par conséquent, il est plus petit en termes de caractères, car la longueur maximale d'un caractère est désormais de quatre octets au lieu de trois. [...] Le moteur de stockage InnoDB a une longueur d'index maximale de 767 octets, donc pour les colonnes utf8 ou utf8mb4, vous pouvez indexer un maximum de 255 ou 191 caractères, respectivement. Si vous avez actuellement des colonnes utf8 avec des index de plus de 191 caractères, vous devrez indexer un plus petit nombre de caractères lors de l'utilisation de utf8mb4.

TABLES DE RÉPARATION

Après avoir mis à niveau le serveur MySQL et effectué les modifications nécessaires expliquées ci-dessus, assurez-vous de réparer et d'optimiser toutes les bases de données et tables. Je ne l'ai pas fait tout de suite après la mise à niveau (je ne pensais pas que c'était nécessaire, car tout semblait bien fonctionner à première vue), et j'ai rencontré des bogues étranges où les instructions UPDATE n'avaient aucun effet, même si non des erreurs ont été lancées.

En savoir plus sur les requêtes pour réparer les tables dans l'article.

Le point principal n'a pas été mentionné dans les réponses ci-dessus:

Nous devons passer la chaîne de requête avec les options "useUnicode=yes"et la "characterEncoding=UTF-8"chaîne de connexion

Quelque chose comme ça

mysql://USERNAME:PASSWORD@HOSTNAME:PORT/DATABASE_NAME?useUnicode=yes&characterEncoding=UTF-8

Eh bien, vous n'avez pas besoin de changer le jeu de caractères Whole DB. Au lieu de cela, vous pouvez le faire en changeant la colonne en type blob .

ALTER TABLE messages MODIFY content BLOB;

J'ai une bonne solution pour gagner du temps. Je rencontre également le même problème mais je n'ai pas pu résoudre ce problème par la première réponse.

Votre personnage par défaut est utf-8. Mais emoji a besoin de utf8mb4 pour le supporter. Si vous avez l'autorisation de réviser le fichier de configuration de mysql, vous pouvez suivre cette étape.

Par conséquent, procédez comme suit pour mettre à niveau votre jeu de caractères (de utf-8 à utf8mb4).

étape 1. ouvrez votre my.cnf pour mysql, ajoutez ces lignes suivantes à votre my.cnf.

[mysqld]
character-set-server = utf8mb4
collation-server = utf8mb4_general_ci
init_connect='SET NAMES utf8mb4'

[mysql]
default-character-set = utf8mb4


[client]
default-character-set = utf8mb4

étape 2. arrêtez votre service mysql et démarrez le service mysql

mysql.server stop
mysql.server start

Fini! Ensuite, vous pouvez vérifier que votre personnage est changé en utf8mb4.

mysql> SHOW VARIABLES LIKE 'character_set%';
+--------------------------+----------------------------------------------------------+
| Variable_name            | Value                                                    |
+--------------------------+----------------------------------------------------------+
| character_set_client     | utf8mb4                                                  |
| character_set_connection | utf8mb4                                                  |
| character_set_database   | utf8mb4                                                  |
| character_set_filesystem | binary                                                   |
| character_set_results    | utf8mb4                                                  |
| character_set_server     | utf8mb4                                                  |
| character_set_system     | utf8                                                     |
| character_sets_dir       | /usr/local/Cellar/mysql@5.7/5.7.29/share/mysql/charsets/ |
+--------------------------+----------------------------------------------------------+
8 rows in set (0.00 sec)

Prise en charge des emojis pour les applications ayant une pile technologique - mysql, java, springboot, hibernate

Appliquez ci-dessous les modifications dans mysql pour la prise en charge d'unicode.

1. ALTER DATABASE <database-name> CHARACTER SET = utf8mb4 COLLATE = utf8mb4_unicode_ci;
2. ALTER TABLE <table-name> CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

Connexion à la base de données - Modification de l'URL jdbc:

jdbc:mysql://localhost:3306/<database-name>?useUnicode=yes&characterEncoding=UTF-8

Remarque - Si l'étape ci-dessus ne fonctionne pas, veuillez mettre à jour la version du connecteur mysql vers la version 8.0.15. (mysql 5.7 fonctionne avec la version 8.0.15 du connecteur pour le support Unicode)

La solution la plus simple qui fonctionne pour moi est de stocker les données sous json_encode .

plus tard, lorsque vous récupérez, assurez-vous simplement de le json_decode .

Ici, vous n'avez pas à modifier le classement ou le jeu de caractères de la base de données et de la table.

Pour quiconque essaie de résoudre ce problème sur une instance MySQL gérée (dans mon cas sur AWS RDS), le moyen le plus simple était de modifier le groupe de paramètres et de définir le jeu de caractères du serveur et le classement sur utf8mb4et utf8mb4_bin, respectivement. Après le redémarrage du serveur, une requête rapide vérifie les paramètres des bases de données système et de celles nouvellement créées:

SELECT * FROM information_schema.SCHEMATA S;