Guides

TXT, TSV & CSV vers SQL : flux propre pour l'import en base de données

Transformez logs TXT et feuilles TSV en CSV RFC 4180, déduisez les types SQL et générez des requêtes PostgreSQL, MySQL ou SQLite par lots.

4 min de lecture

Réponse rapide: Normalisez d'abord vos logs TXT séparés par espaces, barres verticales ou points-virgules et vos feuilles TSV en CSV RFC 4180 dûment entrecoché, puis lancez CSV vers SQL pour inférer les types de colonnes et générer CREATE TABLE et INSERT par lots pour PostgreSQL, MySQL ou SQLite directement en mémoire navigateur.

Pourquoi les logs TXT bruts et exports TSV cassent les assistants d'import

Les sorties CLI, anciens rapports ERP et copier-coller de tableurs arrivent souvent en fichiers .txt à espacement variable, fichiers délimités par pipes (|) ou feuilles .tsv plutôt qu'en CSV RFC 4180 propre.

Dès qu'une valeur contient une virgule comme "Tokyo, JP", une apostrophe comme O'Brien ou un BOM UTF-8 Excel en tête, les scripts simples décalent les colonnes ou échouent sur une erreur de syntaxe.

  • Les colonnes alignées par espaces variables cassent les découpeurs à virgule sans règle d'espaces blancs.
  • Les champs TSV contenant des virgules brisent les pipelines CSV s'ils ne sont pas entourés de guillemets doubles.
  • Les importeurs SQL exigent des guillemets d'identifiants, une gestion de NULL et un échappement propres à chaque SGBD.

Normaliser fichiers TXT et TSV en CSV conforme RFC 4180

Utilisez TXT vers CSV à partir de logs délimités par espaces, tabulations, barres verticales, points-virgules ou deux-points. Activez Rogner les espaces des cellules (trimFields) et Ignorer les lignes vides (skipEmptyLines), puis cochez Préfixer BOM UTF-8 pour Excel si vos équipes ouvrent le CSV sous Windows.

Pour les exports tabulés, TSV vers CSV analyse les tabulations via PapaParse et propose d'entourer chaque cellule de guillemets (quoteAll) afin qu'aucun importateur strict ne scinde des valeurs contenant des virgules.

text
Raw TXT (whitespace):
node-01   us-east   200   14ms
node-02   ap-south  503   98ms

Normalized CSV:
node-01,us-east,200,14ms
node-02,ap-south,503,98ms

Convertir des logs TXT en CSV propre localement

Générer CREATE TABLE typé et requêtes INSERT par lots

Passez le CSV propre dans CSV vers SQL pour générer des scripts prêts à exécuter sans téléverser de tables clients ou de télémétrie interne. L'analyseur détecte virgules, tabulations, pipes et points-virgules, supprime tout BOM UTF-8 avant le premier en-tête et infère INTEGER/BIGINT, décimal, booléen ou texte à partir des vraies cellules.

Personnalisez Nom de la table SQL (tableName, par défaut imported_data), activez CREATE TABLE et réglez Taille des lots INSERT (batchSize de 1 à 1000 lignes par requête, 100 par défaut). Les cellules vides produisent SQL NULL sans guillemets et les apostrophes sont échappées automatiquement.

Générer du SQL PostgreSQL, MySQL & SQLite depuis CSV

FonctionnalitéPostgreSQLMySQLSQLite
Guillemets d'identifiant"column_name"`column_name`"column_name"
Type & littéral booléenBOOLEAN (TRUE / FALSE)BOOLEAN (TRUE / FALSE)INTEGER (1 / 0)
Types flottant / chaîneDOUBLE PRECISION / TEXTDOUBLE / VARCHAR(255) ou TEXTREAL / TEXT
Échappement des chaînesDoublement de l'apostrophe ('')'' plus échappements \, \n, \r, \0Doublement de l'apostrophe ('')

Valider les types inférés avec CSV vers JSON avant l'import en production

Avant d'exécuter le SQL généré sur un environnement de préproduction ou de production, vérifiez la conversion des lignes en nombres et booléens avec CSV vers JSON ou contrôlez votre feuille tabulée via TSV vers CSV.

Repérer des identifiants en texte à zéros initiaux, des cellules vides imprévues ou un mauvais séparateur prend quelques secondes hors ligne.

Convertir des exports TSV en CSV RFC 4180

Références

Questions fréquentes

CSV vers SQL gère-t-il les en-têtes avec BOM UTF-8 issus d'Excel ?

Oui. CSV vers SQL retire automatiquement tout BOM UTF-8 initial (EF BB BF) pour que le nom de la première colonne ne récupère aucun caractère invisible.

Comment les cellules CSV vides sont-elles traduites dans les INSERT SQL ?

Les cellules vides ou composées uniquement d'espaces produisent des valeurs SQL NULL sans guillemets au lieu de chaînes vides.

Puis-je ignorer CREATE TABLE et n'exporter que des INSERT par lots ?

Oui. Décochez Inclure l'instruction CREATE TABLE et ajustez la Taille des lots INSERT (1 à 1000 lignes) pour alimenter directement une table existante.

Formats associés

Comparatifs associés

Guides associés