Unix & Linux performance

1

Comment puis-je suivre le suivi de l'utilisation des E / S sous Linux et autres * nix OS '?

Parfois, quelque chose sur mon système commence à marteler le disque. Je voudrais enregistrer des données qui me permettraient de connaître l'utilisation des E / S par processus, puis je pourrais y revenir plus tard et voir ce qui continue de faire cela. Comment dois-je procéder pour résoudre ce problème? …

15 performance io

5

Des millions de (petits) fichiers texte dans un dossier

Nous aimerions stocker des millions de fichiers texte dans un système de fichiers Linux, dans le but de pouvoir compresser et servir une collection arbitraire en tant que service. Nous avons essayé d'autres solutions, comme une base de données clé / valeur, mais nos exigences de concurrence et de parallélisme …

15 files filesystems performance ext4

2

Le moyen le plus rapide de supprimer les doublons dans une grande liste de mots?

J'ai besoin de dédupliquer une grande liste de mots. J'ai essayé plusieurs commandes et fait des recherches ici et ici où elles expliquent que le moyen le plus rapide de dédupliquer une liste de mots semble utiliser awk. awk -> O (n)? trier -> O (n log n)? Cependant, j'ai …

14 bash awk performance sort

2

Exécution de milliers de processus d'arrière-plan curl en parallèle dans le script bash

J'exécute des milliers de processus d'arrière-plan curl en parallèle dans le script bash suivant START=$(date +%s) for i in {1..100000} do curl -s "http://some_url_here/"$i > $i.txt& END=$(date +%s) DIFF=$(( $END - $START )) echo "It took $DIFF seconds" done J'ai un serveur dédié 49Gb Corei7-920 (non virtuel). Je surveille la …

14 linux performance bash curl wget

1

Ionice fonctionne-t-il avec le planificateur d'échéances?

Mes systèmes Debian Wheezy utilisent le deadlineplanificateur. Je suis habitué à utiliser ionicepour replanifier la priorité d'E / S des travaux gourmands en disque aux heures de pointe, et cela semble anecdotique (mais je n'ai aucune preuve tangible). La ionicepage de manuel , la documentation du noyau et ce document …

13 linux performance

6

Puis-je paralléliser le tri?

Par exemple, bzipil existe pbzip , une version parallèle de bzip. Existe-t-il de tels outils de parallélisation pour sortaméliorer les performances?

13 performance sort

4

Grep en quelques milliers de fichiers

J'ai un répertoire avec des fichiers cca 26 000 et j'ai besoin de grep dans tous ces fichiers. Le problème est que j'en ai besoin le plus rapidement possible, il n'est donc pas idéal de créer un script où grep prendra le nom d'un fichier de la commande find et …

13 files grep performance

1

La désactivation des barrières pour ext4 est-elle sûre sur un ordinateur portable avec batterie?

La page de manuel indique à propos de l' barrieroption pour ext4: Les barrières d'écriture imposent un ordre sur disque approprié des validations de journal, ce qui rend les caches d'écriture sur disque volatiles sûrs à utiliser, avec une certaine perte de performances. Si vos disques sont alimentés par batterie …

13 hard-disk performance ext4 laptop cache

3

Forte activité d'écriture sur les performances du système de disques SSD

J'ai remarqué que lorsque je fais des applications d'écriture lourdes, tout le système ralentit. Pour tester cela plus loin, je l'ai exécuté pour faire une activité de disque (relativement) faible en CPU et haute: john -incremental > file_on_SSD Cela pompe des dizaines de milliers de chaînes par seconde dans un …

13 kernel performance io ssd

1

Utilisation de groupes de contrôle Linux pour équilibrer les performances du processeur

J'ai deux systèmes Linux dual-core installés à l'aide de groupes de contrôle Linux avec des noyaux relativement récents; l'un exécute Debian Squeeze, l'autre Ubuntu 11.04 Natty Narwhal. J'ai obtenu un équilibrage de la charge CPU avec des groupes de contrôle fonctionnant un peu mieux sur le système Debian malgré son …

13 linux performance cgroups

1

Pourquoi traiter le pourcentage d'utilisation du processeur supérieur à la durée totale du processeur

Lorsque j'exécute la commande TOP, un processus affiche une utilisation de 1208% du processeur et le temps total d'utilisation du processeur est de 81,7% avec le mode IRIX activé. Lorsque je passe en mode IRIX désactivé, le processus affiche une utilisation de 99% du processeur et le temps total du …

13 performance cpu top

2

Comment empêcher les tâches cron d'être exécutées à certains moments dans Debian? (un «mode de jeu» / «performance»)

On dirait que j'ai logcheck mis en place comme une tâche cron et chaque fois qu'il est procédé course greppar logcheckoccupe environ un quart de mon CPU. Maintenant, j'ai certains moments pendant lesquels j'ai besoin de ma pleine capacité CPU et que mon système utilise le moins de ressources possible, …

12 debian cron performance cpu laptop

1

Pourquoi «strace» ne montre-t-il pas que ce processus attend quelque chose?

Le puissant stracem'a laissé tomber. Comment est-ce possible? time foomontre que l' fooexécution prend plusieurs secondes ("réel"), mais utilise un temps processeur négligeable, à la fois dans l'espace utilisateur ("utilisateur") et dans le noyau ("sys"). Pour les curieux, fooest défini ci-dessous. Il passe donc la plupart de son temps à …

11 performance time strace

3

Comment configurer la permutation dans Linux Memory Management?

Le paramètre swappiness contrôle la tendance du noyau à déplacer les processus de la mémoire physique vers le disque d'échange. Quel est le paramètre par défaut et comment le configurer pour améliorer les performances globales ?

11 linux performance swap

2

Baisse massive et imprévisible des performances d'E / S sous Linux

J'utilise les tests Debian sans aucun problème depuis environ 6 ans (je ne fais que les mettre à jour régulièrement), mais récemment, il a commencé à montrer un comportement aléatoire qui peut être résumé comme "de faibles performances d'E / S qui persistent jusqu'au redémarrage". Le problème est que, soudainement, …

11 linux performance io

Questions marquées «performance»