Les Allergies
Alimentaires
Posez votre question Signaler

MYSQL importer un gros fichier .dump [Résolu]

Pascal_22 512Messages postés 20 mars 2006Date d'inscription 25 mai 2012Dernière intervention - Dernière réponse le 7 déc. 2011 à 19:21
Bonjour,
J'ai une base de donnée Mysql sur un serveur distant(serveur dédier) ainsi que cette même base sur un pc de programmation, pour faire le développement et les modifications.
Sur mon pc de développement, quand j'importe un fichier .dump qui créer un table avec
près de 200 000 enregistrement, ça prend 1 minutes.
Je fais la même manoeuvre sur mon serveur dédié, et j'ai ce message:
Script timeout passed, if you want to finish import, please resubmit same file and import will resume. après 5 minutes.
Donc je réimporte et l'importation se termine.
Pourquoi ai-je une aussi différence de temps entre les 2 serveurs? De plus, c'est le même version de WAMP (c'est la plus récente.)
MErci!
Pascal
Lire la suite 

MYSQL importer un gros fichier .dump »

13 réponses
Réponse
+0
moins plus
Cela dépend de la puissance du serveur dédié, mais il également clair que le lancer en ligne de commande directement sur le serveur et non via une interface Web devrait améliorer les choses.
Ajouter un commentaire
Réponse
+0
moins plus
Merci beaucoup de ta réponse Arth,

Est-ce possible de le faire par ligne de commande avec WAMPSERVEUR? JE n'était pas au courant, je passais toujours par l'interface web.

MErci encore!

Pascal
Ajouter un commentaire
Réponse
+0
moins plus
Il est question de 200000 enregistrements, mais si on considère qu'un enregistrement n'est codé que sur un seul octet, ça fait déjà 200Ko le fichier.

Vu que je suppose qu'il y a des données en volumétrie plus importante, ça doit au moins dépasser le mega non?

Dépendant aussi de la vitesse de connexion à laquelle va être uploadé le fichier sur le serveur et en même temps importé, je ne trouve pas ça déconnant que ça mette du temps, à savoir près de 10 minutes.

En passant par Wampserver ce sera la même chose, le mieux serait d'avoir une base de Dev sur le serveur de prod, en gros sur le même serveur MYSQL. Ou avoir un deuxième serveur MySQL juste pour le Dev, mais connaissant la question des coûts, c'est à mon avis pas possible pour toi :-)

Après il est toujours possible de programmer un script BAT qui fera l'extraction et l'import en même temps, et qui ne sera pas soumis au Timeout de PHP, vu que l'import se fait par l'interface Web et dont la limite de timeout de l'exécution du script doit être fixée à 5 minutes ou 360 Secondes.
Ajouter un commentaire
Réponse
+0
moins plus
super! Merci pour ces infos,

Je vais me pencher sur le .bat, a savoir comment écrire les lignes de commande pour importer un fichier .sql vers wampserver.

Si tu as un tuto à me proposer, je suis preneur!

Merci!

PAscal
MErci!
Ajouter un commentaire
Réponse
+0
moins plus
En fait il faut travailler directement sur MySQL.

Le problème dans ton cas serait la sécurité, si le serveur MySQL est ouvert vers l'extérieur, ce qui n'est je pense pas le cas.

Petite question : C'est toi l'admin du serveur?
Ajouter un commentaire
Réponse
+0
moins plus
Bonjour Arth,

En fait, J'ai un serveur Prod et et serveur dédier qui héberge mon site et sur le serveur dédier, je peux m'y connecter physiquement, car le datacenter est local dans ma ville.

Donc de cette façon, pas besoin d'ouvrir mysql à l'extérieur.

Je n'aurais qu'a copier mon fichier .dump sur le serveur, puis exécuter une commande à l,aide d'un fichier .bat..

Est-ce correct de cette façon?
Ca éviterais de passé directement via upload de phomyadmin..


Merci
Pascal
Ajouter un commentaire
Réponse
+0
moins plus
Oui oui c'est tout à fait cela :-)

Après cela reste un peu plus contraignant, étant donné qu'il s'agit d'un serveur Windows en face.

Les outils de MySQL se trouvant dans le répertoire de WAMP, dans le dossier bin de mysql, Pour le dump MySQL :

mysqldump -u utilisateur -pmotdepasse -rC:\export.sql NomDeLaDatabseDeDev

Cela va exporter la base de données de Dev

Après s'il n'y a qu'une seule table à exporter :

mysqldump -u utilisateur -pmotdepasse -rC:\export.sql NomDeLaDatabseDeDev NomDeLaTable
Ajouter un commentaire
Réponse
+0
moins plus
MErci beaucoup Arth pour ces infos,

Je viens de tester et il me semble que je fais qq chose de pas correct. J'ai ouvert la console MySql de Wampserver

J'ai entrer mon mot de passe et j'ai appuyé sur ENTRÉE.
Ensuite, voici ma commande:
mysqldump -u root -pmotdepasse -rC:\export.sql DB_TEST


ET ça me fait une erreur:Unknow command \E

J'ai alors pensé de enlever le C:\ donc au final j'avais ...-rexport.sql DB_TEST, j'appuie donc sur ENTRÉE par la suite, aucune erreur ne s'affiche, donc ça semble avoir passé mais je ne trouve pas mon fichier export.sql, il n'est même pas dans C:\wamp\bin\mysql\mysql5.5.16

Est-ce que je fais qq chose de pas correct?

Merci milles fois!

PAscal
Ajouter un commentaire
Réponse
+0
moins plus
Cette commande n'est pas à taper dans la console de MySQL.

MySQLDump est un outil de MySQL, qui devrait se trouver dans C:\wamp\bin\mysql\mysql5.5.16\bin si je me souviens bien.

Sinon faire un recherche de mysqldump.exe sur le disque C:.
Ajouter un commentaire
Réponse
+0
moins plus
ha ok!!

Ce fichier est bien dans C:\wamp\bin\mysql\mysql5.5.16\bin

Quand je double clique dessus, une fenêtre DOS apparaît et ce ferme immédiatement.

J'imagine que je tape ma commande dans un fichier .bat?
MErci
Ajouter un commentaire
Réponse
+0
moins plus
Super cela a fonctionné!!

Merci beaucoup!
Pouvons nous spécifier de exporter en gzip?
Ajouter un commentaire
Réponse
+0
moins plus
Hmmmm non.

Mais rien n'empêche de mettre un utilitaire gzip au même endroit que l'utilitaire MySQLDUMP

Tu pourras le trouver ici pour Windows :

http://gnuwin32.sourceforge.net/packages/gzip.htm

Ou directement ici :

http://freefr.dl.sourceforge.net/project/gnuwin32/gzip/1.3.12-1/gzip-1.3.12-1-bin.zip

Ensuite décompresser le répertoire, et l'utilitaire gzip se trouve dans : gzip-1.3.12-1-bin\bin

Pour compresser, lancer la commande : gzip C:\export.sql (par exemple)
Ajouter un commentaire
Réponse
+0
moins plus
wow!! Merci beaucoup de ton aide!

J'apprécie énormément!

Pascal
Ajouter un commentaire
Ce document intitulé « MYSQL importer un gros fichier .dump » issu de CommentCaMarche (www.commentcamarche.net) est mis à disposition sous les termes de la licence Creative Commons. Vous pouvez copier, modifier des copies de cette page, dans les conditions fixées par la licence, tant que cette note apparaît clairement.
Dossier à la une
Passage au tout numérique : quel coût pour les particuliers ?