Convertisseur en ligne gratuit de XML en SQLITE

Une application, un outil de reporting ou une archive peut nécessiter une base de données locale interrogeable au lieu d’un document XML hiérarchique. La conversion des données en SQLite les rend accessibles aux outils SQL et peut éviter d’analyser à nouveau le XML pour chaque requête.

La conversion mappe les données dans un nouveau schéma ; elle ne se contente pas de modifier l’extension du nom de fichier.

Qu’est-ce que le format XML ?

XML (Extensible Markup Language) est un format texte destiné aux données structurées. Il représente les informations au moyen d’éléments imbriqués, d’attributs, de texte, d’espaces de noms, de commentaires et de métadonnées. Les outils d’exportation de bases de données, les applications d’entreprise, les systèmes de gestion de contenu, les utilitaires de configuration et les services d’échange de données créent couramment des fichiers XML.

XML ne définit pas un schéma de base de données universel. Un document peut contenir des éléments répétés représentant des enregistrements, des entités imbriquées telles que des commandes et des lignes de commande, ou du contenu mixte sans équivalent relationnel direct. La conversion doit mapper ces structures vers des tables, des colonnes et des relations SQLite.

Qu’est-ce que le format SQLITE ?

SQLite est un moteur de base de données relationnelle intégré dont les tables, les index, les vues et le schéma sont stockés dans un seul fichier. Les fichiers de base de données SQLite utilisent couramment l’extension .sqlite, .sqlite3 ou .db ; l’extension seule ne détermine pas le format.

SQLite ne nécessite aucun serveur de base de données et est pris en charge par son utilitaire en ligne de commande, les gestionnaires de bases de données pour ordinateur, les applications mobiles et les langages de programmation. Il fournit des requêtes SQL, des transactions, des index, des contraintes et des affinités de type déclarées telles que INTEGER, REAL, TEXT, BLOB et NULL. Il convient aux applications locales, aux jeux de données hors ligne, aux données portables et aux archives compactes, mais il ne conserve pas automatiquement la hiérarchie XML.

Convertir avec un outil en ligne ou pour ordinateur

Pour un fichier XML simple, utilisez le convertisseur sur 101convert.com : choisissez le fichier XML comme entrée, choisissez SQLite comme sortie, démarrez la conversion, puis enregistrez la base de données générée. Aucune installation de logiciel n’est nécessaire. Examinez les tables et les colonnes obtenues, car un convertisseur automatique doit déduire les limites des enregistrements, les noms, les types et les relations à partir du XML.

Ne téléversez pas de XML confidentiel, réglementé ou autrement soumis à des restrictions, sauf si la politique applicable de traitement des données l’autorise. Pour les données sensibles ou un schéma qui doit rester prévisible, effectuez la conversion localement avec un script ou un outil de base de données.

Convertir avec Python pour contrôler le schéma

Python inclut un pilote SQLite et un analyseur XML, ce qui permet de créer une base de données sans serveur distinct. Cet exemple attend des éléments record répétés contenant des éléments enfants name et value :

import sys
import sqlite3
import xml.etree.ElementTree as ET

xml_file = sys.argv[1]
db_file = sys.argv[2]
root = ET.parse(xml_file).getroot()

with sqlite3.connect(db_file) as db:
    db.execute('CREATE TABLE IF NOT EXISTS records (id INTEGER PRIMARY KEY, name TEXT, value TEXT)')
    rows = []
    for record in root.findall('.//record'):
        rows.append((record.findtext('name'), record.findtext('value')))
    db.executemany('INSERT INTO records (name, value) VALUES (?, ?)', rows)

Enregistrez le fichier sous le nom convert.py et exécutez python convert.py input.xml output.sqlite. Modifiez les chemins des éléments et l’instruction CREATE TABLE pour les adapter à la source. Les paramètres fictifs tels que ? empêchent les valeurs XML d’être interprétées comme de la syntaxe SQL.

Pour les données imbriquées, utilisez des tables associées au lieu de placer chaque valeur dans une seule table très large. Par exemple, créez orders et order_items, puis stockez la clé parente dans order_items.order_id. Convertissez les nombres réels en INTEGER ou REAL, mais conservez les identifiants en TEXT lorsque les zéros initiaux ou le format exact sont importants. Décodez le contenu Base64 avant de le stocker en tant que BLOB.

Les espaces de noms XML nécessitent des recherches tenant compte des espaces de noms. Un chemin tel que .//record ne trouvera pas un élément dont le nom développé inclut un espace de noms, sauf si la requête de l’analyseur tient compte de cet espace de noms. Les fichiers XML volumineux peuvent nécessiter une analyse incrémentielle avec iterparse plutôt que le chargement de l’arborescence entière en mémoire.

Vérifier la base de données générée

Ouvrez la sortie avec le programme en ligne de commande SQLite :

sqlite3 output.sqlite

.tables
.schema records
SELECT COUNT(*) FROM records;
SELECT * FROM records LIMIT 10;

Un gestionnaire graphique SQLite peut également ouvrir output.sqlite ; utilisez sa commande d’ouverture de base de données, généralement affichée sous la forme File → Open database, puis examinez les tables, les types de colonnes, les clés et les valeurs.

Limites de qualité et de compatibilité

Une conversion automatique peut supprimer les commentaires, les instructions de traitement, l’ordre des éléments, les détails des espaces de noms, le texte mixte, les attributs et la distinction entre un élément absent et un élément vide. Conservez le XML d’origine lorsque ces détails sont importants, ou mappez-les explicitement vers des colonnes et des tables enfants.

Validez le nombre de lignes, les champs obligatoires, les identifiants en double, les dates, les séparateurs décimaux, l’encodage des caractères, la gestion des valeurs nulles et les relations avant de supprimer la source. Utilisez une transaction afin qu’une erreur d’analyse ou d’insertion ne puisse pas laisser une base de données partiellement remplie. Pour du XML non fiable, utilisez un analyseur configuré pour un traitement XML sécurisé et rejetez les entrées anormalement volumineuses ou mal formées.

SQLite autorise des valeurs dont les types à l’exécution diffèrent de l’affinité déclarée d’une colonne. Ajoutez les définitions NOT NULL, UNIQUE, de clé étrangère et d’index lorsque les règles de la source l’exigent ; activez l’application des clés étrangères avec PRAGMA foreign_keys = ON. Testez la sortie avec l’application cible, car celle-ci peut exiger des noms de tables, des noms de colonnes, des relations, des extensions de nom de fichier ou une version de SQLite compatibles spécifiques.