Administrateurs de bases de données bulk

2

Optimiser les performances de mise à jour en masse dans PostgreSQL

Utiliser PG 9.1 sur Ubuntu 12.04. Il nous faut actuellement jusqu'à 24 heures pour exécuter un grand nombre d'instructions UPDATE sur une base de données, qui se présente sous la forme: UPDATE table SET field1 = constant1, field2 = constant2, ... WHERE id = constid (Nous ne faisons que remplacer …

37 postgresql performance update bulk

2

Le moyen le plus efficace de supprimer en vrac des lignes de postgres

Je me demande quel serait le moyen le plus efficace de supprimer un grand nombre de lignes de PostgreSQL, ce processus ferait partie d'une tâche récurrente chaque jour pour importer en masse des données (un delta d'insertions + suppressions) dans une table. Il pourrait y avoir des milliers, voire des …

23 postgresql delete bulk

3

Pourquoi «LOAD DATA INFILE» est-il plus rapide que les instructions INSERT normales?

J'ai lu un article qui mentionnait que nous pouvons réaliser 60 000 insertions par seconde en utilisant l' LOAD DATA IN FILEinstruction, qui lit à partir de fichiers csv et insère les données dans une base de données. Pourquoi devrait-il différer des inserts normaux? EDIT: J'ai réduit l'aller-retour en appelant …

22 mysql import bulk

2

Que fait spécifiquement OracleBulkCopy et comment puis-je optimiser ses performances?

Pour résumer les détails: nous devons regrouper environ 5 millions de lignes dans une base de données fournisseur (Oracle). Tout va très bien pour les lots de 500 000 lignes utilisant OracleBulkCopy(ODP.NET), mais lorsque nous essayons de passer à 5 Mo, les performances commencent à ralentir à une analyse une …

14 oracle bulk

3

Créer une table à partir d'un fichier CSV avec des en-têtes

Je cherche un moyen de générer une nouvelle table MySQL uniquement sur la base du contenu d'un CSV spécifié. Les fichiers CSV que j'utiliserai ont les propriétés suivantes; "|" délimité. La première ligne spécifie les noms des colonnes (en-têtes), également "|" délimité. Les noms et l'ordre des colonnes ne sont …

12 mysql csv import bulk

1

Meilleur moyen de réimporter une grande quantité de données avec un temps d'arrêt minimal

J'ai besoin d'importer environ 500 000 enregistrements contenant des données de recherche IP (référence en lecture seule) environ une fois par semaine (seulement trois colonnes int / bigint). Je ne veux pas vraiment m'inquiéter de la fusion des données avec la table existante, je préfère effacer l'ancien et réimporter. Idéalement, …

11 sql-server import bulk

4

Suggestion pour l'importation de données en masse

Nous travaillons sur un projet qui nécessite d'importer quotidiennement des données à partir d'une feuille de calcul Excel. Les données seront importées à partir d'un modèle prédéfini et ce que nous pensons, nous allons d'abord télécharger les données dans une table temporaire et effectuer une opération de nettoyage (supprimer les …

8 sql-server bulk import

Questions marquées «bulk»