Добавлен: 14.07.2023
Просмотров: 81
Скачиваний: 3
Компоненты мультимедийных ресурсов
Мультимедиа – одновременное использование различных форм представления информации и ее обработки в едином объекте-контейнере. Например, в одном объекте-контейнере может содержаться текстовая, аудиальная, графическая и видео информация, а также, возможно, способ взаимодействия с ней. Термин мультимедиа также зачастую используется для обозначения носителей информации, позволяющих хранить значительные объемы данных и обеспечивать достаточно быстрый доступ к ним (первыми носителями такого типа были CD-ROM). В таком случае термин мультимедиа означает, что компьютер может использовать такие носители и предоставлять информацию пользователю через все возможные виды данных, такие как аудио, видео, анимация, графика и другие в дополнение к традиционным способам представления информации, таким как текст.
Мультимедиа может быть классифицирована на две основные группы:
• Линейная. Аналогом линейного способа представления является кино. Человек, просматривающий данный документ, никаким образом не может повлиять на его вывод.
• Нелинейная. Нелинейный способ представления информации позволяет человеку участвовать в выводе информации, взаимодействуя каким-либо образом со средством отображения мультимедийных данных.
основные компоненты мультимедийных объектов.
Текст
Текст – это упорядоченный набор предложений, предназначенный для того, чтобы выразить некий смысл. В смысловой цельности текста отражаются те связи и зависимости, которые имеются в самой действительности (общественные события, явления природы, человек, его внешний облик и внутренний мир, предметы неживой природы и т.д.). Восприятие текста изучается в рамках таких дисциплин, как лингвистика текста и психолингвистика.
Текстовый файл – обычная форма представления текста на компьютере. Каждый символ из используемого набора символов кодируется в виде одного байта, а иногда в виде последовательности подряд идущих двух, трех и более байтов.
Особой разновидностью текстовых данных следует считать т. н. гипертекст.
Общеизвестным и притом ярко выраженным примером гипертекста служат веб-страницы – документы на HTML (гипертекстовом языке разметки), размещенные в интернете.
Существуют стилистические, жанровые и тематические классификации текста.
Аудио
Аудио– общий термин, относящийся к звуковым технологиям. Как правило, под термином аудио понимают звук, записанный на звуковом носителе, а также запись и воспроизведение звука, звукозаписывающая и звуковоспроизводящая аппаратура. Таким образом, аудиальный компонент мультимедийной информации предназначен для передачи звуковых данных. Как физическое явление звук изучается в рамках акустики, но при этом акустика является междисциплинарной наукой, использующей для решения своих проблем широкий круг дисциплин: математику, физику, психологию, архитектуру, электронику, биологию, теорию музыки и др. Непосредственное отношение к вопросам мультимедиа-технологий имеют такие направления современной акустики, как музыкальная акустика, электроакустика, акустика речи, цифровая акустика.
По содержанию аудиальный компонент мультимедиа обычно классифицируется на музыкальный и речевой звук. Музыкальный звук обладает следующими характеристиками:
• определенной высотой (обычно от 16 до 4500 Гц);
• тембром, который определяется присутствием в звуке обертонов и зависит от источника звука;
• громкостью, которая не может превышать болевого порога;
• длительностью.
Среди звуковых носителей информации выделяют аналоговые и цифровые носители. Для целей мультимедиа-технологий наибольшее значение имеют последние, причем преимущественно это аудио-файлы, значительное количество которых было разработано в последние годы. В классификации форматов аудио-файлов выделяют форматы без потерь и форматы с потерями. Аудиоформаты без потерь предназначены для точного (с точности до частоты дискретизации) представления звука. В свою очередь они делятся на несжатые и сжатые форматы.
Примеры несжатых форматов:
• RAW – сырые замеры без какого-либо заголовка или синхронизации.
• WAV – разработан Microsoft совместно с IBM, распространенная форма представления звуковых данных небольшой продолжительности.
• CDDA – стандарт для аудио-CD. Первая редакция стандарта издана в июне 1980 года компаниями Philips и Sony, затем была доработана организацией Digital Audio Disc Committee.
Примеры сжатых форматов:
• WMA– лицензируемый формат аудио-файлов, разработанный компанией Microsoft для хранения и трансляции. В рамках формата есть возможность кодирования звука как с потерей, так и без потери качества.
• FLAC – популярный формат для сжатия аудиоданных. Поддерживается многими аудио-приложениями, а также устройствами воспроизведения звука. Аудиоформаты с потерями ориентированы в первую очередь на по возможности компактное хранение звуковых данных: при этом идеально точное воспроизведение записанного звука не гарантируется.
Примеры таких форматов:
• MP3 – лицензируемый формат файла для хранения аудиоинформации, разработанный рабочей группой института Фраунхофера MPEG в 1994 году.
• Vorbis – свободный формат сжатия звука с потерями, появившийся летом 2002 года. Психоакустическая модель, используемая в Vorbis, по принципам действия близка к MP3.
• AAC– формат аудио-файла с меньшей потерей качества при кодировании, чем MP3 при одинаковых размерах. Изначально создавался как преемник MP3 с улучшенным качеством кодирования, но в настоящий момент распространен существенно меньше, чем MP3.
• WMA –
Компьютерная графика
Данное направление мультимедийных технологий предназначено для передачи пользователю визуальных изображений. Первые вычислительные машины не имели отдельных средств работы с графикой, однако уже использовались для получения и обработки изображений. Существенный прогресс компьютерная графика испытала с появлением возможности запоминать изображения и выводить их на компьютерном дисплее.
По способам построения изображений компьютерную графику можно разделить на двумерную и трехмерную графику. Двумерная компьютерная графика (2D) классифицируется по типу представления графической информации, и следующими из него алгоритмами обработки изображений.
Известны следующие виды двумерной графики:
• Растровая графика. Эта разновидность двумерной графики всегда оперирует двумерным массивом (матрицей) пикселов.
• Векторная графика. Представляет изображение как набор примитивов, в качестве которых обычно выбираются точки, прямые, окружности, прямоугольники, а также сплайны некоторого порядка. Объектам присваиваются некоторые атрибуты (толщина линий, цвет заполнения и т.д.).
• Фрактальная графика. Фракталом в общем смысле называется объект, отдельные элементы которого наследуют свойства родительских структур. Поскольку более детальное описание элементов меньшего масштаба происходит по простому алгоритму, описать такой объект можно всего лишь несколькими математическими уравнениями.
Трехмерная компьютерная графика. Трехмерная компьютерная графика (3D) оперирует с объектами в трехмерном пространстве. Обычно результаты визуализации трехмерной графики представляют собой плоскую картинку, проекцию .
Для передачи и хранения цвета в компьютерной графике используются различные формы его представления. В общем случае цвет представляет собой набор чисел, координат в некоторой цветовой системе. Известны, например, следующие модели цветопередачи:
• RGB (аббревиатура английских слов Red, Green, Blue – красный, зеленый, синий) – аддитивная цветовая модель: цвета получаются путем добавления к черному.
• CMYK (от англ. Cyan, Magenta, Yellow, black – голубой, пурпурный, желтый, черный) – субтрактивная схема формирования цвета, используемая обычно в полиграфии для стандартной триадной печати.
• HSV (от англ. Hue, Saturation, Value – тон, насыщенность, значение) – цветовая модель, в которой координатами являются цветовой тон, насыщенность (называемая также чистотой цвета) и значением (яркостью) цвета. Данная модель является нелинейным преобразованием модели RGB.
Компьютерная графика представляет собой одно из наиболее мощных современных направлений развития компьютерных технологий.
Видео
Видео– под этим термином понимают широкий спектр технологий записи, обработки, передачи, хранения и воспроизведения визуального и аудиовизуального материала на мониторах. Наиболее важные характеристики видеосигнала – это количество кадров в секунду, развертка, разрешение, соотношение сторон, цветовое разрешение, ширина видеопотока, качество. Рассмотрим эти характеристики по отдельности.
Количество кадров в секунду (частота) – это число неподвижных изображений, сменяющих друг друга при показе 1 секунды видеоматериала и создающих эффект движения на экране. Чем больше частота кадров, тем более плавным и естественным будет казаться движение. Минимальный показатель, при котором движение будет восприниматься однородным – примерно 10 кадров в секунду (это значение индивидуально для каждого человека). Компьютерные оцифрованные видеоматериалы хорошего качества, как правило, используют частоту 30 кадров в секунду.
Любой видеосигнал характеризуется вертикальным и горизонтальным разрешением, измеряемым в пикселах (см. выше). Обычное аналоговое телевизионное разрешение составляет 720×576 пикселей. Новый стандарт высокоотчетливого цифрового телевидения HDTV предполагает разрешения до 1920×1080 с прогрессивной разверткой.
Соотношение ширины и высоты кадра – важнейший параметр в любом видеоматериале. Старому стандарту, который предписывает соотношение сторон как 4:3
Количество цветов и цветовое разрешение видеосигнала описывается цветовыми моделями, рассмотренными ранее. В компьютерной технике применяется в основном RGB и HSV. Ширина видеопотока или битрейт (от англ. bit rate – частота битов) – это количество обрабатываемых бит видеоинформации за секунду времени. Чем выше ширина видеопотока, тем в общем лучше качество видео.
Например, для формата VideoCD битрейт составляет всего примерно 1 Мбит/с, для DVD – около 5 Мбит/с, а для формата HDTV – около 10 Мбит/с.
Качество видео измеряется с помощью формальных метрик, таких, как PSNR или SSIM, или с использованием субъективного сравнения с привлечением экспертов.
Из современных стандартов цифрового кодирования и сжатия видеоматериалов можно выделить следующие:
• MPEG-2 – группа стандартов цифрового кодирования видео и аудио сигналов. MPEG-2 в основном используется для кодирования видео и аудио при вещании, включая спутниковое вещание и кабельное телевидение. С некоторыми модификациями этот формат также используется как стандарт для сжатия DVD.
• MPEG-4 – новый международный стандарт сжатия цифрового видео и аудио, появившийся в 1998 году. Используется для вещания (потоковое видео), записи дисков с фильмами, видеотелефонии и широковещания. Включает в себя многие функции MPEG-2 и других стандартов, добавляя такие функции, как поддержка языка виртуальной разметки VRML для показа 3D-объектов, объектно-ориентированные файлы, поддержка управления правами и разные типы интерактивного медиа.
Технические и программные средства мультимедиа.
Технические средства позволяют привнести в образовательную деятельность возможность оперирования с информацией разных типов таких, как звук, текст, фото и видео изображение. Эти средства, в ряде случаев, оказываются очень сложными в техническом и технологическом отношении и вполне могут рассматриваться как средства мультимедиа Технологии мультимедиа позволяют осмысленно и гармонично интегрировать многие виды информации. Это позволяет с помощью компьютера представлять информацию в различных формах таких как
- изображения, включая отсканированные фотографии, чертежи, карты и слайды;
- - звукозаписи голоса, звуковые эффекты и музыка;
- - видео, сложные видеоэффекты;
- - анимации и анимационное имитирование.
Для создания многих простейших мультимедиа-ресурсов широко используются различные HTML-редакторы
При создании мультимедийных гипертекстовых ресурсов и мультимедийных страниц для сети Интернет чаще всего используются следующие языки и инструменты [12]:
1. язык разметки гипертекста (HTML) - стандартный язык, используемый в Интернет для создания, форматирования и демонстрации информационных страниц;
2. язык Java - специализированный объектно-ориентированный язык программирования, аналогичный языку C++. Данный язык был разработан специально для использования интерактивной графики и анимации в ресурсах Интернет. Многие готовые приложения (Java applets) доступны в Интернет и их можно выгрузить на компьютер пользователя для дальнейшего использования при создании собственных информационных сетевых и несетевых мультимедиа-ресурсов.
Технология виртуальная реальность.
Виртуальная реальность (VR) — Технология виртуальной реальности (virtual reality, VR) – это комплексная технология, позволяющая погрузить человека в иммерсивный виртуальный мир при использовании специализированных устройств (шлемов виртуальной реальности). Виртуальная реальность обеспечивает полное погружение в компьютерную среду, окружающую пользователя и реагирующую на его действия естественным образом.
Технология дополненной реальности (augmented reality, AR) – технология, позволяющая интегрировать информацию с объектами реального мира в форме текста, компьютерной графики, аудио и иных представлений в режиме реального времени. Информация предоставляется пользователю с использованием heads-up display (индикатор на лобовом стекле), очков или шлемов дополненной реальности (HMD) или иной формы проецирования графики для человека (например, смартфон или проекционный видеомэппинг). Технология дополненной реальности позволяет расширить пользовательское взаимодействие с окружающей средой.