ПОСМОТРЕТЬ ПОСЛЕДНИЕ НОВОСТИ

 

Аппаратные и программные средства мультимедиа

Слово «мультимедиа» прочно вошло в наш лексикон, и без него уже трудно представить современный компьютерный мир. Как и всякое удачное понятие, оно многообразно. Пожалуй, наиболее точная формулировка принадлежит одному из пионеров мультимедиа - Сергею Новосельцеву: «Мультимедиа (англ. multimedia от лат. multum – много и media, medium – средоточие, средства) – это комплекс аппаратных и программных средств, позволяющих пользователю работать в диалоговом режиме с разнородными данными (графикой, текстом, звуком, видео и анимацией), организованными в виде единой информационной среды».
Мультимедиа — это технология, объединяющая информацию (данные), звук, анимацию и графические изображения. Кроме того, мультимедиа — это средства обмена информацией между компьютером и внешней средой. Слово мультимедиа означает множество носителей. Мультимедийный продукт — интерактивная компьютерная разработка, в состав которой могут входить музыкальное и речевое сопровождение, видеоклипы, анимация, графические изображения и слайды, базы данных, текст и т.д. Мультимедийные продукты делятся на энциклопедии, обучающие и развивающие программы, игры и программы для детей, рекламные программы и презентации.
Идейной предпосылкой возникновения технологии мультимедиа считают концепцию организации памяти «МЕМЕХ», предложенную еще в 1945 году американским ученым Ваннивером Бушем. Она предусматривала поиск информации в соответствии с ее смысловым содержанием, а не по формальным признакам (по порядку номеров, индексов или по алфавиту и т. п.). Эта идея нашла свое выражение и компьютерную реализацию сначала в виде системы гипертекста (система работы с комбинациями текстовых материалов), а затем и гипермедиа (система, работающая с комбинацией графики, звука, видео и анимации), и, наконец, в мультимедиа, соединившей в себе обе эти системы.
Однако всплеск интереса в конце 80-х годов XX в. к применению мультимедиа технологии в гуманитарной области (и, в частности, в историко-культурной) связан, несомненно, с именем выдающегося американского компьютерщика-бизнесмена Билла Гейтса, которому принадлежит идея создания и успешной реализации на практике мультимедийного продукта на основе служебной музейной инвентарной базы данных с использованием в нем всех возможных «сред»: изображений, звука, анимации, гипертекстовой системы («National Art Gallery London»).

Именно этот продукт аккумулировал в себе три основные принципа мультимедиа:
− представление информации с помощью комбинации множества воспринимаемых человеком сред;
− наличие нескольких сюжетных линий в содержании продукта (в том числе и выстраиваемых самим пользователем на основе «свободного поиска» в рамках предложенной в содержании продукта информации);
− художественный дизайн интерфейса и средств навигации.
Несомненным достоинством и особенностью технологии являются следующие возможности мультимедиа, которые активно используются в представлении информации:
− возможность хранения большого объема самой разной информации на одном носителе;
− возможность увеличения (детализации) на экране изображения или его наиболее интересных фрагментов, иногда в двадцатикратном увеличении (режим «лупа») при сохранении качества изображения. Это особенно важно для презентации произведений искусства и уникальных исторических документов;
− возможность сравнения изображения и обработки его разнообразными программными средствами с научно-исследовательскими или познавательными целями;
− возможность выделения в сопровождающем текстовом или другом визуальном материале «горячих слов (областей)», по которым осуществляется немедленное получение справочной или любой другой пояснительной (в том числе визуальной) информации (технологии гипертекста и гипермедиа);
− возможность осуществления непрерывного музыкального или любого другого аудиосопровождения, соответствующего статичному или динамичному визуальному ряду;
− возможность использования видеофрагментов из фильмов, видеозаписей и т. д., функции «стоп-кадра», покадрового «пролистывания» видеозаписи;
− возможность включения в содержание диска баз данных, методик обработки образов, анимации (к примеру, сопровождение рассказа о композиции картины графической анимационной демонстрацией геометрических по строений ее композиции) и т. д.;
− возможность подключения к глобальной сети Internet;
− возможность работы с различными приложениями (текстовыми, графическими и звуковыми редакторами, картографической информацией);
− возможность создания собственных «галерей» (выборок) из представляемой в продукте информации (режим «карман» или «мои пометки»);
− возможность «запоминания пройденного пути» и создания «закладок» на заинтересовавшей экранной «странице»;
− возможность автоматического просмотра всего содержания продукта («слайд-шоу») или создания анимированного и озвученного «путеводителя-гида» по продукту («говорящей и показывающей инструкции пользователя»), включение в состав продукта игровых компонентов с информационными составляющими;
− возможность «свободной» навигации по информации и выхода в основное меню (укрупненное содержание), на полное оглавление или вовсе из программы в любой точке продукта.
Технологию мультимедиа составляют специальные аппаратные и программные средства.
Для построения мультимедиа системы необходима дополнительная аппаратная поддержка: аналого-цифровые и цифроаналоговые преобразователи для перевода аналоговых аудио- и видеосигналов в цифровой эквивалент и обратно, видеопроцессоры для преобразования обычных телевизионных сигналов к виду, воспроизводимому электронно-лучевой трубкой дисплея, декодеры для взаимного преобразования телевизионных стандартов, специальные интегральные схемы для сжатия данных в файлы допустимых размеров и т. д.
Аппаратные средства
Все оборудование, отвечающее за звук, объединяется в звуковые карты, а за видео – в видеокарты.
Аппаратные средства мультимедиа:
− Средства звукозаписи (звуковые платы, микрофоны);
− Средства звуковоспроизведения (усилитель, колонки, акустические системы, наушники и гарнитуры);
− Манипуляторы (компьютерные мыши, джойстики, миди-клавиатуры);
− Средства «виртуальной реальности» (перчатки, очки, шлемы виртуальной реальности, используемые в играх);
− Носители информации (CD, DVD и HDD);
− Средства передачи (мини видеокамеры, цифровые фотоаппараты);
− Средства записи (приводы CD / DVD-ROM , CDRW / DVD+RW, TV- и FM-тюнеры);
− Средства обработки изображения (платы видеомонтажа, клавиатуры, графические акселераторы).
− Компьютер, телевизор, средства для получения и удобного восприятия информации и др.
Программные средства мультимедиа технологии.
Программные средства мультимедиа складываются из трех компонентов:
1. Системные программные средства.
2. Инструментальные программные средства.
3. Прикладные программные средства.
Системные программные средства – это набор программ, входящих в состав операционной системы компьютера и осуществляющих управление устройствами мультимедиа, причем это управление на двух уровнях – физическое управление вводом-выводом информации на низком уровне с помощью машинных команд и управление пользователем характеристиками устройств с помощью графического интерфейса, изображающего пульт управления устройством, например регулировки громкости звука, тембра, стереобаланса и т. д. Как правило, программы физического управления устройствами называют драйверами устройств.
Инструментальные программные средства – программы позволяющие модифицировать мультимедийные файлы и создавать мультимедийные приложения.
Инструментальные программные средства – это пакеты программ для создания мультимедийных приложений:
− редакторы неподвижных графических изображений,
− средства создания анимированных GIF-файлов,
− средства аудио- и видеомонтажа,
− средства создания презентаций,
− средства распознавания текстов, введенных со сканера,
− средства создания обучающих программ,
− системы распознавания голоса и преобразования звуковых файлов в текстовые,
− системы создания приложений виртуальной реальности и другие.
Инструментальные средства существенно расширяют возможности управления мультимедийными устройствами по сравнению с теми, которые предоставляют системные средства, но это всегда платные продукты и некоторые из них стоят очень дорого, например профессиональные системы видеомонтажа.
Прикладные программные средства – это готовые и, как правило, продаваемые программные системы на CD или DVD дисках – фильмы, учебники, энциклопедии, игры, книги, виртуальные музеи, путеводители, рекламные материалы и т. д.

Остановимся на некоторых аппаратных средствах поподробнее.
Звуковые Карты
С течением времени перечень задач выполняемых на ПК вышел за рамки просто использования электронных таблиц или текстовых редакторов. Компакт- диски со звуковыми файлами, подготовка мультимедиа презентаций, проведение видеоконференций и телефонные средства, а также игры и прослушивание аудио CD для всего этого необходимо чтобы звук стал неотъемлемой частью ПК. Для этого необходима звуковая карта.
Наличие дисковода CD-ROM позволяет только прослушивать звуковые компакт-диски. Звуковая карта необходима, чтобы получить профессиональное качество звукового сопровождения, создавать и записывать звуки, синтезировать сложные аудиоэффекты, смешивать звуковую информацию от нескольких источников, самостоятельно включать звуковое сопровождение в мультимедийные презентации, дополнять документы голосовыми аннотациями и др. Звуковая карта (или Sound Blaster) устанавливается, как правило, в виде электронной платы в разъём материнской платы компьютера.
История развития звуковых карт начинается с выпуском самых первых моделей компьютеров фирмы IBM. Изначально компьютеры были снабжены только PC Speaker-ом (Динамиком), который не предназначен для воспроизведения нормального звука.
В то время ни о каких мультимедиа программах никто и не помышлял, и практически единственным применением хорошему звуку были компьютерные игры. Первой звуковую карту для IBM PC сделала фирма TANDY. Звучание этой карты было примерно аналогично звучанию карт в игровых компьютерах (3 музыкальных голоса). Звуковые карты стали выпускать и другие фирмы. Наиболее известные из них Adlib, Creative и Roland. Звуковые карты Adlib - это одни из самых простых и дешёвых из использующихся на сегодняшний день звуковых карт. Их звучание основано, как и у большинства распространённых карт, на модуляции частоты (Frequency Modulation — FM).
Карта содержит 11 голосов FM и может достаточно неплохо воспроизводить музыку. Но цифровой (или оцифрованный) звук ей не под силу. Карты этого типа - монофонические, но они часто используют принцип псевдостерео. На сегодняшний день карты, поддерживающие только стандарт Adlib, морально устарели. Звуковые карты фирмы Creative Labs стали стандартом для современных систем мультимедиа. Важным отличием этих карт является возможность воспроизводить цифровой звук, то есть практически все, что только можно услышать. Качество же воспроизведения зависит от двух важнейших параметров - разрядности и частоты дискретизации (это частота обновления данных). Разрядность карт обычно составляет 8 и 16 бит, а частота дискретизации — 4 до 44.1 кГц.
Цифровой звук карты воспроизводят и записывают благодаря цифро-аналоговому и аналого-цифровому преобразователям (ЦАП и АЦП).
Файлы, содержащие видеоизображения и звук, имеют расширения *.avi, *.mov, *.mpg. Специальный фонограф — Sound Recorder, предназначен для записи и воспроизведения звука, а также для редактирования звуковых файлов.
Звуковые файлы имеют расширения *.wav, *.mid, *.mod, *.voc, *.fli.

Лазерные диски, CD-ROM
В связи с ростом объемов и сложности программного обеспечения, широким внедрением мультимедиа приложений, сочетающих движущиеся изображения, текст и звук, огромную популярность в последнее время приобрели устройства для чтения компакт- дисков CD-ROM.
Компакт- диски изначально разработанные для любителей высоко качественного звучания, прочно вошли на рынок компьютерных устройств. Оптические компакт- диски перешли на смену виниловым в 1982 году. Было решено, что стандарт рассчитан на 74 минуты звучания "Red Book". Когда 74 минуты пересчитали в байты получилось 640 Мбайт. Первые приводы имели единичную скорость (Single speed) равную 150 Кбайт/с. Модели накопителей с удвоенной скоростью появились в 1992 году. Приводы с утроенной и с учетверенной скоростью в начале 1994 году. Сегодня речь уже идет о скорости увеличенной в шесть и даже восемь раз. Коэффициент увеличения скорости не обязательно целый.
Как и в компакт-дисках, применяемых в бытовых СD-плейерах, информация на компьютерных компакт-дисках кодируется посредством чередования отражающих и не отражающих свет участков на подложке диска. При промышленном производстве компакт-дисков эта подложка выполняется из алюминия, а не отражающие свет участки делаются с помощью продавливания углублений в подложке специальной пресс-формой. При единичном производстве компакт-дисков (так называемых СD-R дисков, см. ниже) подложка выполняется из золота, а нанесение информации на нее осуществляется лучом лазера. В любом случае сверху от подложки на компакт-диске находится прозрачное покрытие, защищающее занесенную на компакт-диск информацию от повреждений. Хотя по внешнему виду и размеру используемые в компьютерах компакт-диски не отличаются от дисков, применяемых в бытовых СD плейерах, однако компьютерные устройства для чтения компакт-дисков стоят существенно дороже. Это не удивительно, ведь чтение программ и компьютерных данных должно выполняться с гораздо высокой надежностью, чем та, которая достаточна при воспроизведении музыки. Поэтому чтение используемых в компьютере компакт-дисков осуществляется с помощью луча лазера небольшой мощности. Однако скорость чтения данных с компакт-дисков значительно ниже, чем с жестких дисков. Одна из причин этого состоит в том, что компакт-диски при чтении вращаются не с постоянной угловой скоростью, а так, чтобы обеспечить неизменную линейную скорость отхождения информации под читающей головкой. Стандартная скорость чтения данных с компакт-дисков всего 150-200 Кбайт/с, а время доступа 0,4 с. Впрочем, в последнее время выпускаются в основном устройства с двойной, тройной и даже четвертой скоростью вращения, они обеспечивают соответственно более высокие скоростные показатели: время доступа 0,2-0,3 с, скорость считывания 500 Кбайт/с. Заметим, однако, что устройства с тройной скоростью в реальных задачах увеличивают скорость работы с компакт-диском не в полтора и не в два раза по сравнению с устройством с двойной скоростью, а всего на 30 - 60%.
Дисководы для CD производят такие известные фирмы, как Sony, NEC, Panasonic, Plextor, Creative, LG и др.
Видеокарты
При смешении сигналов основные проблемы возникают с видеоизображением. Различные ТВ–стандарты, существующие в мире (NTSC, PAL, SECAM), применение разных мониторов и видеоконтроллеров диктует разнообразие подходов в разрешении возникающих проблем. Однако в любом случае требуется синхронизация двух изображений, для чего служит устройство генлок (genlock). С его помощью на экране монитора могут быть совмещены изображение, сгенерированное компьютером (анимированная или неподвижная графика, текст, титры), и “живое” видео. Если добавить еще одно устройство — кодер (encoder), компьютерное изображение может быть преобразовано в форму ТВ–сигнала и записано на видеопленку. "Настольные видеостудии”, являющиеся одним из примеров применения систем мультимедиа, позволяют готовить совмещенные видео–компьютерные клипы, титры для видеофильмов, помогают при монтаже кинофильмов.
Системы такого рода не позволяют  как-то обрабатывать или редактировать само аналоговое изображение. Для того, чтобы это стало возможным, его необходимо оцифровать и ввести в память компьютера. Для этого служат так называемые платы захвата (capture board, frame grab­bers). Оцифровка аналоговых сигналов порождает огромные массивы данных. Так, кадр стандарта NTSC (525 строк), преобразованный платой типа Truevision, превращается в компьютерное изображение с разрешением 512x482 пиксель. Если каждая точка представлена 8 битами, то для хранения всей картинки требуется около 250 Кбайт памяти, причем падает качество изображения, так как обеспечивается только 256 различных цветов. Считается, что для адекватной передачи исходного изображения требуется 16 млн. оттенков, поэтому используется 24-битовый формат хранения цветной картинки, а необходимый размер памяти возрастает. Оцифрованный кадр может затем быть изменен, отредактирован обычным графическим редактором, могут быть убраны или добавлены  детали, изменены цвета, масштабы, добавлены спецэффекты, типа мозаики, инверсии и т.д. Естественно, интерактивная экранная обработка возможна лишь в пределах разрешения, обеспечиваемого данным конкретным видеоадаптером.
Обработанные кадры могут быть записаны на диск в каком–либо графическом формате и затем использоваться в качестве реалистического неподвижного фона для компьютерной анимации. Возможна также   покадровая  обработка исходного изображения и вывод обратно на видеопленку для создания псевдореалистического мультфильма.
Запись последовательности кадров в цифровом виде требует от компьютера больших объемов внешней памяти: частота кадров в американском ТВ–стандарте NTSC — 30 кадров/с (PAL, SECAM — 25 кадров/с), так что для запоминания одной секунды полноцветного полноэкранного видео требуется 20–30 Мбайт, а оптический диск емкостью 600 Мбайт вместит менее полминуты изображения. Но последовательность кадров недостаточно только запомнить, ее надо еще вывести на экран в соответствующем темпе. Подобной скоростью передачи информации — около 30 Мбайт / с — не обладает ни одно из существующих внешних запоминающих устройств. Чтобы выводить на экран компьютера оцифрованное видео, приходится идти на уменьшение объема передаваемых данных, (вывод уменьшенного изображения в небольшом окне, снижение частоты кадровой развертки до 10–15 кадров / с, уменьшение числа бит / пиксель), что, в свою очередь приводит к ухудшению качества изображения.
Более радикально обе проблемы — памяти и пропускной способности — решаются с помощью методов сжатия / развертки данных, которые позволяют сжимать информацию перед записью на внешнее устройство, а затем считывать и разворачивать в реальном режиме времени при выводе на экран. Так, для движущихся видеоизображений существующие адаптивные разностные алгоритмы могут сжимать данные с коэффициентом порядка 100:1— 160:1, что позволяет разместить на CD–ROM около часа полноценного озвученного видео. Работа этих алгоритмов основана на том, что обычно последующий кадр отличается от предыдущего лишь некоторыми деталями, поэтому, взяв какой–то кадр за базовый, для следующих можно хранить только относительные изменения. При значительных изменениях кадра, например, при монтажной склейке, наезде или панорамировании камеры, автоматически выбирается новый базовый кадр. Для статических изображений коэффициент сжатия, естественно, ниже — порядка 20–30:1. Для аудиоданных применяют свои методы компрессии.
При использовании специальных видео–адаптеров (видеобластеров) мультимедиа–ПК становятся центром бытовой видео–системы, конкурирующей с самым совершенным телевизором.
Новейшие видеоадаптеры имеют средства связи с источниками телевизионных сигналов и встроенные системы захвата кадра (компрессии / декомпрессии видеосигналов) в реальном масштабе времени, т.е. практически мгновенно.
Видеоадаптеры имеют быструю видеопамять до 512 Мбайт и специальные графические 3D-ускорители процессоры. Это позволяет получать до 100 кадров в секунду и обеспечить вывод подвижных полноэкранных изображений.
Имеется большое количество устройств, предназначенных для работ с видеосигналами на IBM PC совместимых компьютеров. Условно можно разбить на несколько групп: устройства для ввода и захвата видеопоследовательностей (Cupture play), фреймграбберы (Framegrabber), TV-тюнеры, преобразователи сигналов VGA-TV и др..

 

TVтюнеры
Эти устройства выполняются обычно в виде карт или бокса (небольшой коробочки). Они преобразуют аналоговый видеосигнал поступающий по сети кабельного телевидения или от антенны, от видеомагнитофона или камкордера (camcorder). TV-тюнеры могут входить в состав других устройств таких как MPEG-плейеры или фреймграбберы. Некоторые из них имеют встроенные микросхемы для преобразования звука. Ряд тюнеров имеют возможность для вывода телетекста.

 

Фреймграбберы
Как правило они объединяют графические, аналогово-цифровые и микросхемы для обработки видеосигналов, которые позволяют дискретизировать видеосигнал, сохранять отдельные кадры изображения в буфере с последующей записью на диск либо выводить их непосредственно в окно на мониторе компьютера. Содержимое буфера обновляется каждые 40 мс. То есть с частотой смены кадров. Вывод видеосигналов происходит в режиме наложения (overby). Для реализации окна на экране монитора с "живым" видео карта фреймграббера соединена с графическим адаптером через 26 контактный Feature коннектор. С ним обычно поставляется пакет Video for Windows вывод картинки размером 240*160 пикселов при воспроизведении 256 цветов и больше. Первые устройства - Video Blaster, Video Spigot.

 

Преобразователи VGA-TV
Данные устройства транслируют сигнал в цифровом образе VGA изображения в аналоговый сигнал пригодный для ввода на телевизионный приемник. Производители обычно предлагают подобные устройства выполненные либо как внутренние ISA карта либо как внешний блок. Ряд преобразователей позволяют накладывать видеосигнал например для создания титров. При этом осуществляется полная синхронизация преобразованного компьютерного сигнала по внешнему(gtnlok). При наложении формируется специальный ключевой (key) сигнал трех видов lumakey, chromakey или alpha chenol.

 

MPEG-плейеры
Данные устройства позволяют воспроизводить последовательности видеоизображения (фильмы) записываемых на компакт- дисках, качеством VNS. Скорость потока сжатой информации не превышает обычно 150 Кбайт/с. Основная сложность задачи решаемой MPEG кодером, состоит в определении для каждого конкретного видеопотока оптимального соотношения между тремя видами изображения: (I)ntra, (P)redicted и (B)idirectional. Первым MPEG –плейером была плата Reel Magic компании Sigina Desing в 1993 году.

 

Мультимедиа презентации
Мультимедиа презентация представляет собой мультимедийный продукт, в состав которого могут входить текст и текстовые спецэффекты, речевое и музыкальное сопровождение, анимации, видеоклипы, галереи картин и слайдов (слайд-шоу) и т.д.
Мультимедиа презентации широко используются при создании обучающих программ, в том числе и на на лазерных дисках, при создании рекламных роликов, видеоклипов и т.д. Существует ряд программ, позволяющих создавать мультимедиа презентации, например MicroSoft PowerPoint (4.0, 7.0, 97). Среди этих программ большое значение имеют программы, которые могут захватывать видеоролики с экрана и преобразовывать их в AVI и EXE видеофайлы. К таким программам относятся программы MicroSoft Camcorder, Hiper Cam, Lotus ScreenCam. Однако, такие презентации не являются интерактивными, но они могут стать частью большой интерактивной презентации.
Большие возможности при создании мультимедиа презентаций даёт применение Интернет-технологий, например использование редактора языка HTML и просмотрщика Web-страниц MicroSoft Internet Explorer, который установлен на большинстве современных компьютеров. В простейшем случае в качестве редактора языка HTML можно использовать редактор Блокнот (Notepad) для Windows. Такая технология значительно проще, чем использование программы PowerPoint, а эффективность её достаточно высока (на уровне возможностей компьютерной сети Интернет).
Можно на языке HTML создавать Web-страницы — файлы формата htm или html, содержащие текст, картинки, анимации, речевое и музыкальное сопровождение, видеоклипы, связанные между собой гипертекстовыми ссылками. Переходя от одной Web-страницы к другой при помощи гипертекстовых ссылок, можно создавать при помощи кнопок и других элементов диалога интерактивную мультимедиа презентацию (мультимедиа проект) на любую тему.

Программные средства мультимедиа

Графика и фотоизображения
Один из способов представления изображения в компьютере — растровая графика (bitmap). В этом случае изображение делится на элементы (pixels), которые определяют размер картинки — X пикселов по ширине и Y пикселов по высоте. Важной характеристикой является цветовое разрешение растровой графики, определяемое числом битов, используемых для кодирования цвета каждого пиксела (его называют также числом битовых плоскостей). Понятно, что чем больше битовых плоскостей в файле, тем больше места требуется на диске для его сохранения.
Другой способ представления — векторные изображения, которые сохраняются в виде геометрического описания объектов, составляющих рисунок. Эти изображения могут также включать в себя данные в формате растровой графики. В векторных форматах число битовых плоскостей заранее не определено.
Сетевая графика представлена преимущественно двумя форматами файлов - GIF (Graрhics Interchange Format) и JРG (Joint Рhotograрhics Exрerts Grouр). Оба этих формата являются компрессионными, то есть данные в них уже находятся в сжатом виде.