[Презентация] Цифровое представление информации

Многие задачи используют вещественные числа с дробной частью их хранение в виде целых значений с фиксированным масштабом неудобно из-за ограниченного диапазона и сложности выбора единственного множителя В вычислительной технике применяются числа с плавающей точкой, основанные на научной нотации, где число представлено как произведение мантиссы на основание системы счисления (обычно 2) в степени порядка Стандарт IEEE 754 описывает наиболее распространённые форматы представления чисел с плавающей точкой: одинарной и двойной точности

ASCII – семибитная кодировка для английского языка и символов, из-за ограниченности пространства появились однобайтные расширения ISO 8859, Windows‑1251, KOI8‑R Интернет стимулировал потребность в унифицированном методе кодирования символов различных письменностей. Решением стала технология Юникод, обеспечивающая единое пространство кодовых позиций для символов Юникод использует UTF-8 для практического хранения и передачи данных, где символы кодируются последовательностями от одного до четырёх байтов с сохранением кодов ASCII в однобайтном представлении

Растровое изображение состоит из сетки пикселей, где каждый элемент имеет определённый цвет заданный в цветовом пространстве, например RGB Каждая компонента хранится в одном байте, обеспечивая 256 уровней яркости и более 16 миллионов цветов на пиксель В этой модели цвет описывается тремя компонентами: интенсивностью красной, зелёной и синей составляющих Графическая информация, то есть изображения, в цифровой форме представляется в виде массивов числовых значений Представление графической информации Описание цвета в модели RGB Хранение цветовой информации Растровая модель изображения

Векторная графика представляет изображения через линии, кривые, многоугольники и трансформации, сохраняя качество при изменении размера за счет повторного расчета объектов при выводе Векторные форматы используют наборы координат и параметров, организованные в соответствии со стандартами, например SVG или проприетарными форматами САПР Выбор той или иной модели влияет на объём данных и возможности их последующей обработки

1 3 5 4 2 Стандартные частоты дискретизации Глубина квантования в аудио Параметры цифрового звука Дискретизация и частота Квантование амплитуды

Типичное цифровое видео представляет собой последовательность кадров, синхронизированных с аудиодорожкой. Каждый кадр содержит пиксели и может иметь разное разрешение. Важной особенностью является применение цветовых пространств и субдискретизации цветности. Видеопоток обычно представлен в виде контейнера, содержащего сжатые кадры и служебную информацию Типичное цифровое видео

Формат данных описывает структуру и способ кодирования информации в файл или поток байтов, определяя поля, порядок расположения, длины, типы данных и методы сжатия Файл представляет собой последовательность байтов хранящихся на носителе. Формат указывает правила интерпретации этой последовательности данных Для корректного извлечения информации из файла важно знать спецификации его формата, иначе программа не сможет правильно обработать данные даже при их корректной кодировке

1 3 5 4 2 Компактность, простота и независимость файлов Ограничена поддержка сложного форматирования Языки разметки отделяют содержание от представления Файл plain text содержит текст и элементы управления Формат применяется для исходного кода и конфигов

Форматы структурированных данных: CSV, XML, JSON Рост объёма обмена данными потребовал создания удобных форматов для структурированных данных. Форматы CSV, XML и JSON представляют данные в структурированной форме, обеспечивая удобство обработки и человекочитаемость. XML поддерживает схему валидации и широко используется в корпоративных системах, JSON удобен для веб-сервисов и API, а CSV остаётся популярным благодаря простоте и совместимости с электронными таблицами. Эти форматы используют текстовую природу и чёткую структуру, позволяя однозначно интерпретировать данные

Включают как контейнеры для несжатого звука (WAV), так и форматы сжатого аудио (MP3, AAC, FLAC) Зависит от требований к качеству, необходимости последующей обработки, ограничений по объёму и скорости передачи данных Графические форматы, такие как MP4, MKV и AVI, являются контейнерами со сжатыми видеопотоками, одной или несколькими аудиодорожками и служебной информацией Форматы изображений делятся на растровые BMP, PNG, JPEG и векторные SVG, PDF (векторное описание), форматы САПР Типы изображений Видео форматы Выбор графического формата Аудиоформаты

Аудио‑и видеоформаты опираются на сжатие данных Аудио- и видеоформаты Использует пространственную и временную избыточность, извлекая изменения между кадрами Видеосжатие Форматы MP3 и AAC удаляют неслышимые компоненты звука Аудиоформаты с потерями Кодеки сжимают данные, контейнеры задают структуру файла Форматы файлов

Исторически офисные форматы были проприетарными и закрытыми, что мешало обмену документами между программами. Современные форматы, например .docx и .xlsx, представляют собой контейнеры с XML-файлами и ресурсами Проприетарные офисные форматы PDF сохраняет визуальное представление документа независимо от среды Особенности формата PDF Современные офисные форматы структурированы в контейнерах с XML-файлами Структура современных офисных форматов Открытые стандарты офисных форматов обеспечивают совместимость документов Открытые стандарты офисных форматов

Метаданные содержат информацию о свойствах файла, условиях создания, параметрах съёмки, авторе, ключевых словах и версиях документа. В графических файлах, таких как JPEG, применяются блоки EXIF с данными о камере, выдержке, диафрагме и местоположении съёмки В аудиофайлах содержатся теги с информацией об исполнителе, альбоме, названии композиции и жанре. Видеофайлы имеют метаданные, включающие характеристики потока, языки аудиодорожек, субтитры и структуру глав Эти данные не связаны напрямую с пиксельной информацией, но имеют большое значение для каталогизации, поиска, обработки и правового сопровождения В большинстве случаев при работе с форматами данных помимо основных сведений учитываются метаданные, представляющие собой информацию о самих данных Значение метаданных Метаданные в аудиофайлах Метаданные в видеофайлах Метаданные в графических форматах

Сжатие данных важно для обработки больших объёмов информации Значение сжатия данных Они лежат в основе таких широко используемых форматов и утилит, как ZIP, GZIP, PNG и других Широко используемые форматы и утилиты Методы сжатия без потерь: Хаффман, арифметическое кодирование, LZ77, LZ78 Методы сжатия без потерь Контролируемое искажение снижает объём данных Сжатие с потерями

1 3 5 4 2 Гибкость представления информации Требования к программному обеспечению Возможности и риски обработки Структура контейнеров и форматы Вложенные объекты и методы кодирования

Реализация стандартов различается на разных платформах из-за особенностей архитектуры процессоров, порядка байтов и поддержки библиотек Практикующий специалист должен учитывать несовместимость форматов при выборе решений для долговременного хранения и обмена данными Для уменьшения проблем совместимости используют открытые стандарты, сертификацию и тестовые наборы файлов Проблема кроссплатформенности форматов данных делает вопрос совместимости ключевым Проблема совместимости Методы решения проблемы Рекомендации специалиста Различия реализации стандартов

1 3 5 4 2 Архиваторы используют простые и открытые форматы Избегать закрытых редких форматов Хранить данные в устойчивых форматах Форматы данных эволюционируют под влиянием технологий Устаревание форматов угрожает доступности информации

Сложность форматов увеличивает риски атак Аспект информационной безопасности форматов данных Неправильно реализованные парсеры форматов содержат уязвимости Уязвимости парсеров Офисные документы и PDF-файлы содержат потенциально опасные элементы Примеры угроз Ограничивать доверие, использовать проверенные библиотеки и простые форматы Рекомендации по безопасности

Выбор формата данных – компромисс между компактностью, качеством, скоростью обработки и поддержкой. Важны открытость спецификаций, совместимость с ПО и удобство чтения библиотеками. Для архивов выбирают форматы с метаданными, для интернета – сжатые с потерями, в аудио и видео учитывают качество и каналы распространения Критерии выбора формата данных Гибридные подходы сочетают текстовые и бинарные форматы Гибридные подходы в хранении Баланс качества и скорости влияет на выбор формата данных Баланс качества и скорости Практические решения выбирают формат данных исходя из задач и условий Примеры практических решений

Тенденции развития цифровых форматов данных характеризуются усилением роли самодокументируемых и расширяемых решений, обеспечивающих автоматическую интерпретацию структуры без глубокого понимания контекста Доля полуструктурированных и слабо структурированных данных, включая логи, социальные медиа и сенсорные потоки, увеличивается, так как традиционные форматы становятся менее удобными для их представления Одновременно сохраняются высокоэффективные бинарные форматы, оптимизированные специально для компьютерной графики и телекоммуникаций