récuper des données d'un fichier xml et les incrires dans mysqlFermé

Question

Bonjour, Dans un fchier xml j'ai besoin de récupérer aux lignes devices les valeurs de : name="" , id="" , room="" afin de les inscrire dans une table mysql. ID - name - id - room Je vous écris par avoir votre avis sur la façon de procéder pour effectuer ce script bash. Faut il utiliser awk ? Merci. Extrait du fichier xml, section device. Configuration: Linux / Firefox 24.0 Merci.

zipe31 · Answer

Salut,

Ce qu'il faudrait surtout savoir c'est comment tu attends tes données en sortie ?
Et est-ce que ton échantillon de fichier contient toutes les données du fichier xml ou est-ce uniquement un bout de ton fichier ? 

Parce que en partant de ton exemple, juste une simple requête avec grep + sed :

$ grep -P -o '\b(name|id|room)="\K[^"]*' plop | sed 'N;N;s/
/-/g'4 in 1 sensor (light)-45-204 in 1 sensor (motion)-43-204 in 1 sensor (temp)-44-20Battery Monitor-25-0Détecteur d'humidité-46-20Embedded Humidity Sensor-15-18Embedded Humidity Sensor-38-6Embedded Humidity Sensor-50-16Embedded Temperature Sensor-14-18Embedded Temperature Sensor-37-6Embedded Temperature Sensor-49-16Ensemble TV Chambre des invités-42-5Ensemble TV chambre des parents-40-16Lampadaire-11-18Lumière bureau serveur-30-6Lumière variateur-39-5Prises bureau chambre de Loïc-41-15Samsung TV Remote-21-18Sonde de tempèrature salon (1er étage)-13-18Temp Humidity Sensor-36-6Temp Humidity Sensor-48-16VeraAlerts-23-0Webcall Dialer-22-0$

mamiemando · Answer

Awk est une manière de faire, mais ce n'est pas la seule, en soit n'importe quel langage permettant de parser un fichier (voire parser un fichier xml) peut faire l'affaire.

Ici c'est aussi complètement faisable en shell avec du sed (voire même grep), en perl, en python (en fait c'est faisable avec la plupart des langages mais on va dire que ceux-là s'y prêtent bien).

- Une première stratégie consisterait à créer à chaque fois qu'on lit une ligne construire un dictionnaire ayant pour clé un attribut (name, id...) et en donnée la valeur correspondante. Il suffit ensuite d'écrire la ligne désirée à partir de ce dictionnaire. C'est ce que je ferais si je devais l'écrire en python. On peut imaginer faire de même par exemple en shell mais beaucoup plus fastidieux à écrire.

- Si on a envie de le faire en shell (avec awk ou sed), et si on suppose que l'ordre des attributs est connu, une substitution est suffisante.

Bonne chance

zipe31 · Answer

Re-

Par contre, et je te l'avais déjà signifié je ne sais plus où, il serait plus correct de ta part de bien vouloir donner signe de vie lorsque tu poses une question et que des personnes te répondent ne serait-ce que pour remercier ces dites personnes et surtout histoire de savoir si la/les solution(s) donnée(s) t'a/ont été utile(s) ;-(

Quelques exemple parmi d'autres :
https://forums.commentcamarche.net/forum/affich-28105947-lister-le-contenu-d-une-table-mysql-dans-un-menu-zenity
https://forums.commentcamarche.net/forum/affich-28846611-connexion-serveur-mysql-via-un-script-bash
https://forums.commentcamarche.net/forum/affich-27929457-comment-ajout-l-utilisateur-admin-dans-un-groupe-d-utilisateur

Merci de faire un effort de ce côté là.

xunil2003 · Answer

Bonsoir, Merci pour vos réponses. Pour l'instant je suis sur du bash. ZIPE31 J'ai essayé votre commande, qui ne trouve pas la même chose que vous serveur@serveur-msi:~$ grep -P -o '\b(name|id|room)="\K[^"]*' $HOME/vera/vera_09-10-2013_2246.xml | sed 'N;N;s/ /-/g'My Home-1-Banderie 8-Bureau -6Chambre Loïc (1er étage)-15-Chambre des invités5-Chambre parent (1er étag-16Chaudière -7-Couloir R.D.C 4-Couloir escalier -3Cuisine -12-Cuisine d'été 9-Jardin du bas-21Jardin du haut-20-S.D.B (1er étage)14-S.D.B (R.D.C)-19S.D.S -1-Salon (1er étage)18-Salon d'été -10Véranda (1er étage)-13-hall d'entrée 2-Nouvelle scène1-16-4 in 1 sensor (light)-4520-4 in 1 sensor (motion)-4320-4 in 1 sensor (temp)-4420-Battery Monitor-250-Détecteur d'humidité-4620-Embedded Humidity Sensor-1518-Embedded Humidity Sensor-386-Embedded Humidity Sensor-5016-Embedded Temperature Sensor-1418-Embedded Temperature Sensor-376-Embedded Temperature Sensor-4916-Ensemble TV Chambre des invités-425-Ensemble TV chambre des parents-4016-Lampadaire-1118-Lumière bureau serveur-306-Lumière variateur-395-Prises bureau chambre de Loïc-4115-Samsung TV Remote-2118-Sonde de tempèrature salon (1er étage)-1318-Temp Humidity Sensor-366-Temp Humidity Sensor-4816-VeraAlerts-230-Webcall Dialer-220-Interface-1Dimmable Light-2-Switch3-Sensor-4Remote Control-9-Humidity Sensor16-Temperature Sensor-17Light Sensor18serveur@serveur-msi:~$ C'est normal car comme je l'ai dit dans mon premier poste seule les lignes avec le mot device. sont a prendre en compte. Pour bien comprendre, le fichier xml au complet ressemble a ceci : Fichier xml au complet

Merci.

xunil2003 · Answer

Bonjour,

ZIP31 

Quand je mets le résultat en variable ou en fonction 
test () { grep '<device ' $HOME/vera/vera_09-10-2013_2246.xml |grep -P -o '\b(name|id|room)="\K[^"]*' | sed 'N;N;s/.*/"&"/Mg;s/
/ /g'}echo ""echo $(test)
ou
test='grep -P -o '\b(name|id|room)="\K[^"]*' $fichier_device | sed 'N;N;s/
/-/g''echo $test
j'ai ceci qui s'affiche :
"4 in 1 sensor (light)" "45" "20" "4 in 1 sensor (motion)" "43" "20" "4 in 1 sensor (temp)" "44" "20" "Battery Monitor" "25" "0" "Détecteur d'humidité" "46" "20" "Embedded Humidity Sensor" "15" "18" "Embedded Humidity Sensor" "38" "6" "Embedded Humidity Sensor" "50" "16" "Embedded Temperature Sensor" "14" "18" "Embedded Temperature Sensor" "37" "6" "Embedded Temperature Sensor" "49" "16" "Ensemble TV Chambre des invités" "42" "5" "Ensemble TV chambre des parents" "40" "16" "Lampadaire" "11" "18" "Lumière bureau serveur" "30" "6" "Lumière variateur" "39" "5" "Prises bureau chambre de Loïc" "41" "15" "Samsung TV Remote" "21" "18" "Sonde de tempèrature salon (1er étage)" "13" "18" "Temp Humidity Sensor" "36" "6" "Temp Humidity Sensor" "48" "16" "VeraAlerts" "23" "0" "Webcall Dialer" "22" "0"

Quand j'exécute ceci :
grep '<device ' $HOME/vera/vera_09-10-2013_2246.xml |grep -P -o '\b(name|id|room)="\K[^"]*' | sed 'N;N;s/.*/"&"/Mg;s/
/ /g'
ceci s'affiche comme ceci :
"4 in 1 sensor (light)" "45" "20""4 in 1 sensor (motion)" "43" "20""4 in 1 sensor (temp)" "44" "20""Battery Monitor" "25" "0""Détecteur d'humidité" "46" "20""Embedded Humidity Sensor" "15" "18""Embedded Humidity Sensor" "38" "6""Embedded Humidity Sensor" "50" "16""Embedded Temperature Sensor" "14" "18""Embedded Temperature Sensor" "37" "6""Embedded Temperature Sensor" "49" "16""Ensemble TV Chambre des invités" "42" "5""Ensemble TV chambre des parents" "40" "16""Lampadaire" "11" "18""Lumière bureau serveur" "30" "6""Lumière variateur" "39" "5""Prises bureau chambre de Loïc" "41" "15""Samsung TV Remote" "21" "18""Sonde de tempèrature salon (1er étage)" "13" "18""Temp Humidity Sensor" "36" "6""Temp Humidity Sensor" "48" "16""VeraAlerts" "23" "0""Webcall Dialer" "22" "0"


le problème est comment y mettre en variable caque champs .
Exemple sur la 1er  ligne :  "4 in 1 sensor (light)" "45" "20"
Variable1_name="4 in 1 sensor (light)"
Variable2_id="45"
Variable3_room="20"

afin que mysql y insert dans la table.
mysql ...... insert into (...,...,...) ......

Merci.

xunil2003 · Answer

Bonjour, Zipe31 Je n'arrive pas a comprendre comment résoudre mon problème via sed ? J'ai un fichier dans lequel je doit récupérer les fails. while IFS="-" read var_Completed var_Device var_LastNote var_NodeDescriptiondoecho "var_Completed = ${var_Completed}var_Device = ${var_Device}var_LastNote = ${var_LastNote}var_NodeDescription = ${var_NodeDescription}"#echo "date : $Completed"#echo "id : $Device" #echo "detail fail : $LastNote"#echo "Nom du module : $NodeDescription"#echo ""done < <(ssh $LOGIN_VERA@$IP_VERA grep "Expiration" $FICHIER | grep -P -o '\b(Completed|Device|LastNote|NodeDescription)="\K[^"]*' | sed 'N;N;s/.*/"&"/Mg;s/ / /g')echo "" Et voila comment s'affiche le résultat: (La date et l'heure et le numéro id est décalé) root@192.168.0.5's password: var_Completed = "56" "2013var_Device = 10var_LastNote = 17 14:09:23" "Expiration du délai d'attente pour la réponse du noeud"var_NodeDescription = var_Completed = Lave lingevar_Device = var_LastNote = var_NodeDescription = Ors il faut que le résultat s'affiche comme ceci : root@192.168.0.5's password: var_Completed = 2013 10 17 14:09:23var_Device = 6var_LastNote = Expiration du délai d'attente pour la réponse du noeudvar_NodeDescription = Lave linge Voici une ligne entière cat LuaUPnP.log | grep Expiration04 10/17/13 14:09:23.242 <0x2b847680>root@MiOS_35108117:/tmp/log/cmh# Comment dois je procéder ? Merci.

xunil2003 · Answer

Re,

Merci Zipe31.

J'ai m'y ceci :
while IFS="|" read  var_Completed var_Device var_LastNote var_NodeDescriptiondoecho "var_Completed = ${var_Completed}var_Device = ${var_Device}var_LastNote = ${var_LastNote}var_NodeDescription = ${var_NodeDescription}"#echo "date : $Completed"#echo "id : $Device" #echo "detail fail : $LastNote"#echo "Nom du module : $NodeDescription"#echo ""done < <(ssh $LOGIN_VERA@$IP_VERA grep "Expiration"  $FICHIER | grep -P -o '\b(Completed|Device|LastNote|NodeDescription)="\K[^"]*' | sed 'N;N;s/.*/"&"/Mg;s/
/|/g')echo ""

et le résultat est encore décalé
root@192.168.0.5's password: var_Completed = "56"var_Device = "2013-10-17 14:09:23"var_LastNote = "Expiration du délai d'attente pour la réponse du noeud"var_NodeDescription = var_Completed = Lave lingevar_Device = var_LastNote = var_NodeDescription = 

Merci.

xunil2003 · Answer

Re,

Ce n'est pas grave ça m'arrive ainsi. 
Êtes vous sûre de la commande sed, car avec :
while IFS="|" read  var_Completed var_Device var_LastNote var_NodeDescriptiondoecho "var_Completed = ${var_Completed}var_Device = ${var_Device}var_LastNote = ${var_LastNote}var_NodeDescription = ${var_NodeDescription}"#echo "date : $Completed"#echo "id : $Device" #echo "detail fail : $LastNote"#echo "Nom du module : $NodeDescription"#echo ""done < <(ssh $LOGIN_VERA@$IP_VERA grep "Expiration"  $FICHIER | grep -P -o '\b(Completed|Device|LastNote|NodeDescription)="\K[^"]*' | sed 'N;N;N;s/.*/"&"/Mg;s/
/|/g'
Y a plus rien ??

Résultat
root@192.168.0.5's password: serveur@serveur-msi:~$ 

Merci.

xunil2003 · Answer

Re,

Zipe31, c'est bon ça marche.

Résultat
root@192.168.0.5's password: var_Completed = "56"var_Device = "2013-10-17 17:59:22"var_LastNote = "Expiration du délai d'attente pour la réponse du noeud"var_NodeDescription = "Lave linge"

Avec
while IFS="|" read  var_Completed var_Device var_LastNote var_NodeDescriptiondoecho "var_Completed = ${var_Completed}var_Device = ${var_Device}var_LastNote = ${var_LastNote}var_NodeDescription = ${var_NodeDescription}"#echo "date : $Completed"#echo "id : $Device" #echo "detail fail : $LastNote"#echo "Nom du module : $NodeDescription"#echo ""done < <(ssh $LOGIN_VERA@$IP_VERA grep "Expiration"  $FICHIER | grep -P -o '\b(Completed|Device|LastNote|NodeDescription)="\K[^"]*' | sed 'N;N;N;s/.*/"&"/Mg;s/
/|/g')echo ""

Encore une fois, merci zipe31.

Mais comment puis je retire chaque " " de la valeur des variables ?
Merci.

xunil2003 · Answer

Re?

J'ai trouvé
en remplaçant sed 'N;N;N;s/.*/"&"/Mg;s/
/|/g'  par 
sed 'N;N;N;s/.*/ & /Mg;s/
/|/g' 
résultat 
root@192.168.0.5's password: var_Completed =  56 var_Device =  2013-10-17 17:59:22 var_LastNote =  Expiration du délai d'attente pour la réponse du noeud var_NodeDescription =  Lave linge 

Merci.

Récuper des données d'un fichier xml et les incrires dans mysql

10 réponses

Discussions similaires

Newsletters