エンジニアリングガイド
テキスト・文字コード・AI活用の実践ガイド
TOON による LLM トークン削減、Excel CSV の UTF-8 BOM 文字化け対策、Shift-JIS/GBK 修復、RAG 用 Markdown 抽出、JSONL データセット構築、ゼロアップロードの仕組みを詳解。
TOON vs JSON:LLM プロンプトのトークンコストを 30〜60% 削減
TOON 形式が均一配列で重複する JSON キーを排除し、GPT-5・Claude 4・Gemini 2.5 の入力トークンコストを半減させる仕組みを解説します。
JSON → TOON 変換TOON → JSON 変換LLM トークン計測Excel で UTF-8 の CSV が文字化けする原因と UTF-8 BOM による解決法
Windows 版 Excel で日本語や多言語の UTF-8 CSV が文字化けする原因と、3 バイトの UTF-8 BOM を先頭に付与して安全に修復する方法を解説します。
Excel 用 CSV 文字コード修復XLSX → CSV 変換JSON → CSV 変換Shift-JIS・GBK・Big5・EUC-KR の文字化けテキストをローカルで UTF-8 修復
文字化けした日本語 Shift-JIS、中国語 GBK/GB18030/Big5、韓国語 EUC-KR ファイルをデータを壊さずブラウザ内で UTF-8 へ復元します。
GBK / Shift-JIS → UTF-8 変換Excel 用 CSV 文字コード修復CRLF → LF 改行変換PDF・Word・Excel を RAG・LLM 向けのクリーンな Markdown へ変換する方法
機密性の高い PDF、Word (DOCX)、Excel シートをサーバー送信なしで構造化された Markdown へ抽出し、ベクトル検索や LLM 入力に最適化します。
PDF → Markdown 変換Word → Markdown 変換Excel → Markdown 表変換JSON vs YAML vs TOML vs .env:設定ファイル形式の使い分けガイド
JSON、YAML、TOML、.env の 4 つの設定フォーマットをコメント対応・ネスト・シークレット安全性・用途別で比較し、ローカルで安全に変換します。
YAML → JSON 変換JSON → YAML 変換TOML → JSON 変換CSV・JSON から有効な LLM ファインチューニング用 JSONL データセットを作成
スプレッドシートや JSON 配列から OpenAI Chat・Alpaca・Gemini ファインチューニング用の有効な .jsonl を全行検証付きでローカル生成します。
CSV → JSONL 変換JSON → JSONL 変換LLM トークン計測SRT vs WebVTT vs ASS:字幕形式の変換とタイミング同期ガイド
SRT・WebVTT・ASS/SSA 字幕の正確なタイムスタンプ規則を比較し、形式変換・自動字幕の重複除去・ミリ秒単位の音ズレ修正をローカルで行います。
SRT → VTT 変換VTT → SRT 変換ASS → SRT 変換ChatGPT・Claude の AI Markdown 記号を Word やメール向けに綺麗に整形する方法
AI 回答の **太字** や ### 見出し記号、コードフェンスを綺麗に取り除く方法と、Word・Google ドキュメントへ書式付きで貼り付ける手順を紹介します。
AI Markdown 記号除去Markdown → HTML 変換不要な改行を除去JSON から TypeScript・Zod・Pydantic v2 スキーマを自動生成して型安全を確保
API の JSON サンプルから TypeScript インターフェース、実行時 Zod バリデータ、Python Pydantic v2 BaseModel を省略可能・エイリアス推論付きで生成。
JSON → TypeScript 型生成JSON → Zod スキーマ生成JSON → Pydantic モデル生成Excel をフリーズさせずに大容量 CSV をブラウザ内で結合・分割する方法
複数 CSV を列名一致で安全にマージしたり、巨大 CSV をヘッダー付きで固定行数ごとに分割して一括 ZIP 出力したりする方法を解説します。
CSV ファイル結合大容量 CSV 分割Excel 用 CSV 文字コード修復EPUB 電子書籍を Obsidian・AI 学習向けの Markdown に変換する方法
DRM フリーの EPUB を OPF スパイン順でローカル展開し、見出し・リンクを保った Obsidian 向け Markdown や章分割 ZIP を作成します。
EPUB → Markdown 変換EPUB → TXT 変換LLM トークン計測なぜサーバー送信型のオンライン整形ツールは危険なのか — ゼロアップロード設計の仕組み
.env・JWT・顧客 CSV・契約書を外部変換サイトへ貼る危険性と、DevTools Network タブで送信量 0 バイトを確認できる仕組みを解説します。
.env → JSON 変換Base64・JWT デコーダーJSON 整形・修復ChatGPT 向けにテキスト・契約書・ログをローカルで匿名化する方法
ChatGPT や Claude に貼り付ける前に、氏名・IBAN・契約書・API キーをブラウザ RAM 内で可逆 [[TYPE-NN]] トークンへ置換します。
AI テキスト匿名化・マスクPII 個人情報マスク契約書 ChatGPT 匿名化AI 分析前に CSV・JSON 顧客データをローカルでマスクする方法
ブラウザ RAM 内で CSV 列を匿名化し、売上金額を比例スケーリング(×k)、ネスト JSON キーを構文を壊さずローカルでマスクします。
CSV 列別マスクJSON 機密フィールドマスク財務テキスト匿名化XML から JSON への変換:属性・CDATA・RSS フィードを保持する実践ガイド
XML・RSS・SVG をブラウザメモリ内で JSON に変換し、@_ 属性や CDATA テキスト、数値型を保持したまま XML への往復変換も行えます。
XML → JSON 変換JSON → XML 変換JSON 整形・修復HTML → Markdown 変換 vs HTML タグ除去:Web テキストのローカル整形
HTML を構造化 GFM Markdown へ変換すべき場面と、タグ除去で純粋なテキストを取り出す場面の違いを解説。ナビやスクリプト削除・エンティティ復号もオフライン完結。
HTML → Markdown 変換HTML タグ除去Markdown → HTML 変換TXT・TSV・CSV → SQL:安全なデータベース投入ワークフロー
スペースやパイプ区切りの TXT ログや TSV を RFC 4180 準拠 CSV へ整形し、型推論付きで PostgreSQL・MySQL・SQLite 用 SQL をローカル生成。
TXT → CSV 変換TSV → CSV 変換CSV → SQL 変換Markdown → PDF 出力 & PDF → TXT 抽出:完全オフライン文書ワークフロー
Markdown を日本語対応の A4/Letter PDF へローカル出力し、セルフホスト PDF.js で PDF から改行・ハイフン補正済みの TXT や Markdown を抽出します。
Markdown → PDF 変換PDF → TXT 変換PDF → Markdown 変換リスト重複削除・連絡先抽出・ケース変換のローカル一括処理ガイド
雑多なリストやログをブラウザ内で整理。大文字小文字を区別しない重複行削除、メール・URL の CSV 抽出、技術略語を保つ 9 種のケース変換を解説します。
重複行を削除メール&URL 抽出ケース変換ツールオフライン JWT デコード・Base64URL・セマンティック JSON Diff ガイド
送信ゼロのブラウザメモリ上で JWT のヘッダーとクレームをデコードし、パディングなし Base64URL 変換やキー順を問わないセマンティック JSON Diff、ログ秘匿化を実行。
Base64・JWT デコーダーテキスト・JSON 差分比較JSON 整形・修復アップロード不要のローカル運用向けに設計
各ガイドでは実際の構文、バイト列の仕組み、実装スニペットを、100% クライアントサイドで動く TxtTo ツールとあわせて解説します。