Криминалистика и восстановление кодировки текста

Криминалистика и восстановление кодировки текста | Бесплатный онлайн-инструмент | Elysia Tools

Руководство по использованию инструмента

Узнайте, когда использовать этот инструмент, что он поддерживает и как его применяют пользователи.

Ключевые факты

Категория: Text Processing
Типы ввода: textarea, file, select, checkbox
Тип вывода: json
Покрытие примерами: 4
API доступен: Да

Обзор

Инструмент анализирует текст или поддерживаемый текстовый файл, определяет кодировку, BOM, стиль переводов строк и признаки mojibake, а затем формирует локальный вариант исправления в формате JSON.

Когда использовать

Когда текст отображается как mojibake, например «CafÃ©» вместо «Café».
Когда нужно удалить BOM или привести переводы строк к LF либо CRLF.
Когда требуется проверить UTF-8, UTF-16, GB18030, Windows-1252 или ISO-8859-1 перед исправлением текста.

Как это работает

1Вставьте текст или загрузите файл TXT, CSV, JSON либо Markdown размером до 10 МБ.
2Выберите исходную кодировку или оставьте автоматическое определение.
3Укажите режим исправления, стиль переводов строк и необходимость удалить BOM.
4Получите JSON с исправленным текстом и диагностикой, включая оценку mojibake и обнаруженный стиль строк.

Сценарии использования

Восстановление текста после ошибочного преобразования UTF-8 через Latin-1.
Подготовка текстовых файлов с единым стилем переводов строк для дальнейшей обработки.
Проверка BOM и кодировки перед публикацией или передачей TXT, CSV, JSON и Markdown-файлов.

Примеры

1. Исправление искажённой UTF-8-строки

Редактор локализации

Контекст

После импорта фраза «Café déjà vu» отображается как «CafÃ© dÃ©jÃ vu».

Проблема

Нужно проверить признаки mojibake и получить исправленный вариант текста.

Как использовать

Вставьте строку в поле «Текст», оставьте автоматическое определение кодировки и выберите автоматическое исправление mojibake.

sourceEncoding: auto; repairMode: auto; newlineMode: preserve; removeBom: true

Результат

Инструмент формирует repairedText со строкой «Café déjà vu» и показывает mojibakeScoreAfter: 0.

2. Нормализация BOM и переводов строк

Разработчик

Контекст

Текстовый файл в UTF-8 начинается с BOM и содержит переводы строк CRLF.

Проблема

Нужно удалить BOM и привести строки к формату LF.

Как использовать

Загрузите текстовый файл, выберите UTF-8, режим нормализации, LF и включите удаление BOM.

FAQ

Какие данные можно проверить?

Можно вставить текст или загрузить файл TXT, CSV, JSON либо Markdown.

Какие кодировки доступны?

Доступны автоматическое определение, UTF-8, UTF-16 LE, UTF-16 BE, GB18030/GBK, Windows-1252 и ISO-8859-1.

Что такое mojibake?

Можно ли сохранить исходный текст без исправлений?

Да. Для этого выберите режим «Preserve Text».

Что делает настройка переводов строк?

Она сохраняет исходный стиль либо преобразует переводы строк в LF или CRLF.

sourceEncoding: utf-8; repairMode: normalize; newlineMode: lf; removeBom: true

Запустить этот инструмент

Примеры для этого инструмента

Продолжить с похожими инструментами и темами

Узнайте, когда использовать этот инструмент, что он поддерживает и как его применяют пользователи.

Ключевые факты

Обзор

Когда использовать

Как это работает

Сценарии использования

Примеры

1. Исправление искажённой UTF-8-строки

2. Нормализация BOM и переводов строк

FAQ

PDF Примеры

CSV Примеры

Примеры Python

Примеры Hex/Unicode Конвертера

Оценщик AI-токенов

Удалитель BOM Символов

Мастер преобразования неструктурированного текста в данные

Объединитель TXT