XenData MX64 Edition

Краткое описание продукта:

Программное обеспечение для создания цифровых архивов, версия MX64 Archive Series от компании XenData, функционирует на базе серверов, поддерживающих 64-х битные приложения. Использование данного ПО позволяет создавать цифровые видео архивы с очень высокой производительностью. MX64 может управлять одной или несколькими ленточными библиотеками и поддерживает все наиболее часто используемые ленточные форматы, включая LTO. Видео архив, созданный с использованием ПО XenData MX64 Edition, удовлетворяет всем требованиям заказчиков на уровне крупных медийных компаний.

Предлагаемое решение проиллюстрировано на примере работы одной из ведущих телевещательных компаний Соединенного Королевства.

О компании XenData

Компания XenData Software специализируется на разработке программного обеспечения для создания цифровых видео архивов, базирующихся на принятых в IT-индустрии стандартах и позволяющих масштабировать архивы от терабайт к петабайтам. Все решения архивного хранения, созданные на базе ПО XenData, обеспечивают хранение видео файлов на ленточных носителях в формате LTO. Компания XenData Software в своих разработках использует стандартный интерфейс файловой системы, что гарантирует легкое интегрирование продукта и совместное использование широкого спектра оборудования, а также удобное управление данными с помощью соответствующего программного обеспечения, мониторинг и пост-продакшн. ПО от XenData Software совместимо с разработками таких компаний как Apple, Blue Order, Cinegy, Crispin, Dalet, Fission Software, Gallery (Sienna), Media Alliance, NVerzion, Pharos, Pro-Bel, Quantel, TMD, Volicon и др.

MX64 Edition – гарантированная высокая скорость передачи данных

Версия MX64 ПО XenData Archive Series оптимизирована под создание больших цифровых видео архивов, что соответствует требованиям современных телевещательных компаний. ПО функционирует под Windows-серверами, поддерживающими 64-х битные приложения, что обеспечивает равномерную загрузку и высокую скорость передачи данных. Программное обеспечение управляет одной или более ленточными библиотеками и кэш-памятью на жестких дисках, создавая высокомасштабируемый цифровой архив.

Архив под управлением версии MX64 обеспечивает такой же универсальный интерфейс файловой системы, как и версии X32 и X64 под стандартным Windows-сервером. За счет функционала версии MX64 снимаются ограничения, накладываемые одиночным сервером, а также увеличивается возможность масштабирования за счет использования множества серверов для обеспечения требуемой производительности архива.
В дополнение к высокой скорости передачи данных версия MX64 обеспечивает следующие преимущества:

Стандартный интерфейс файловой системы Windows

Дополнительная защита данных. Система обеспечивает опцию автоматической репликации ленточных картриджей, создавая при этом дополнительные копии для каждого картриджа. После заполнения, реплицированные картриджи могут быть экспортированы из ленточной библиотеки и размещены на хранение в любом безопасном месте. При необходимости реплицированные картриджи могут быть быстро импортированы в резервную архивную систему.

Формат хранения на ленте

Версия МX64 поддерживает различные ленточные форматы, включая лидирующий на рынке формат ленточного хранения LTO. Последнее поколение LTO-4 обладает следующими характеристиками:

	LTO-4
Объем хранения на картридж (без сжатия)	800 ГБ
Количество часов записи при потоке SD (25 Mб\сек)	71 час
Количество часов записи при потоке HD (50 Mб\сек)	35.5 часов
Maкс. скорость передачи данных (без сжатия)	120 MБ/с
Время жизни стандартной ленты медиа архива	30 лет

Каждый ленточный картридж LTO-4 характеризуется объемом до 800 ГБ, что означает хранение 70-ти часов записи при потоке SD, 35-ти часов записи при потоке HD и более 17-ти часов при потоке 100 Mб\сек.

Конфигурация цифрового архива с использованием Версии MX64

Архив состоит из следующих компонентов:

Головного сервера под управлением ОС Windows Server 2003 X64
Множества серверов перемещения данных под управлением ОС Windows Server 2003 X64
Внутренней сети, соединяющей головной сервер с серверами перемещения данных

Головной сервер использует оперативную память и, таким образом, функционирует как высокоскоростной канал передачи данных для файлов, передающихся между внешней высокоскоростной LAN и серверами перемещения данных..
Наличие множества серверов перемещения данных позволяет сбалансировать загрузку и обеспечить общую высокую скорость передачи данных.

Ниже показана типичная конфигурация для такого архива:
PICTURE 1

Вне зависимости от того, какое количество серверов включено в систему, архив представлен на головном сервере, поддерживающем 64-х битные приложения под Windows 2003, как один логический диск. Обычно на мастер-сервере используется несколько портов по 1Гб для внешних соединений, которые при необходимости могут быть объединены в “team” .
Версия MX64 поддерживает широкий спектр ленточных библиотек лидирующих мировых производителей, включая HP, IBM, Overland Storage, Qualstar, Quantum, Rorke Data, Sony, Spectra Logic и Sun Microsystems. Кроме этого данная версия ПО поддерживает множество опций по подключению с интерфейсами Fibre Channel и SCSI. При этом Fibre Channel предпочтителен для крупных систем, т.к. данный тип подключения обеспечивает более высокую пропускную способность и надежность, чем параллельное соединение по SCSI.

Архив, соответствующий современным IT стандартам.

Отличительной особенностью цифровых видео архивов под управлением ПО XenData является то, что они имеют ясную архитектурную составляющую и соответствуют современным стандартам IT-индустрии. Архивное ПО XenData имеет стандартный интерфейс файловой системы, а также обеспечивает:

Поддержку лидирующих в индустрии ленточных форматов

Ленточный формат обмена – для записи на ленту система использует формат открытого стандарта TAR. Таким образом файлы могут быть прочитаны широким спектром сторонних приложений и операционных систем.
Сетевые протоколы – архивное решение оптимизировано под стандартные сетевые протоколы Windows (SMB/CIFS), а также передачу файлов через FTP.
Стандартную модель безопасности. Архив под управлением ПО XenData полностью интегрирован в действующую модель безопасности Microsoft Windows, базирующуюся в Active Directory. Это дает уверенность в том, что доступ к видео файлам возможен только для авторизованных пользователей.

Легкая интеграция с Windows и Mac OS X- клиентами

Растущая популярность продуктовой линейки для создания и редактирования видео от компании Apple «Apple’s Final Cut» привела к тому, что все больше гетерогенных сетей на практике используется для взаимодействия клиентов как Windows, так и Mac OS X. OS X обеспечивает быстрое соединение с архивами XenData с использованием SMB-протокола, что означает одновременную работу архивов XenData как с Mac, так и с Windows- клиентами.

Простота администрирования

Физическое местонахождение файлов определяется политиками, заданными администратором. Опции включают:

Задание времени сохранения файлов в кэш-памяти RAID-массива
Группировку файлов на определенных наборах лент

Администрирование архива осуществляется с использованием консоли управления XenData Management Console. Данная консоль аналогична Microsoft Management Console и обеспечивает администратора знакомым и легким средством управления системой.

Легкое перемещение файлов между архивами

Архивное ПО XenData MX64 Edition для использования под множеством серверов, а также решения на базе X32 или X64 Edition полностью поддерживают взаимный обмен картриджами. После заполнения картриджа происходит автоматическая каталогизация его содержания в конце ленты. Содержание картриджа может быть импортировано в новый архив посредством чтения каталога, что занимает всего несколько минут.

MX64, X64 и X32 используют один и тот же принцип каталогизации. Это позволяет осуществлять быстрый обмен информацией между системами, работающими с версиями MX64, X64 и X32 ПО XenData. Это также означает, что любая организация может начать создание цифрового видео архива с версий X32 или X64, а затем достаточно легко перейти к MX64 Edition.

Способность быстро и легко переносить ленточные картриджи между архивными системами под управлением ПО XenData вне зависимости от того, какая версия (MX 64 или Х32 и Х64) является рабочей для данной системы, может быть использована следующим образом:

Передача видео файлов между группой телевизионных станций

MX64 Edition: особенности и преимущества
Высокие возможности масштабирования. Данная версия ПО обеспечивает высокую пропускную способность и возможности наращивания объема существующего архива. ПО MX64 Edition поддерживает множество датамуверов для обеспечения наращивания объемов передаваемых данных, а также множество ленточных библиотек, что позволяет хранить петабайты информации. Преимущество: возможности наращивания в соответствии с требованиями крупных медийных компаний.

Стандартная файловая система. Фактически архив представляет собой стандартную файловую систему Windows с одним логическим диском. Решение использует стандартный атрибут определения положения файла вне жесткого диска. Преимущество: легкая интеграция в стандартные приложения и существующую сетевую инфраструктуру без необходимости модификации.

Стандартное аппаратное обеспечение. ПО XenData работает на стандартном аппаратном обеспечении. Преимущество: относительно невысокая общая стоимость владения.

Оптимизация для CIFS/SMB и FTP. Архив оптимизирован для CIFS/SMB сетевого протокола, что делает его идеальным для передачи по сети под Windows, а также обеспечивает превосходной способностью к взаимодействию с клиентами Mac, работающими под OS X. Архив также оптимизирован для передачи через FTP. Преимущество: обеспечивается высокая производительность при работе со средствами передачи, принятыми при обеспечении передачи видео файлов.

Совместимость с OS X-клиентами. Архив имеет специальные политики файлового менеджмента, приспособленные под нужды клиентов MAC, работающих с OS X. Таким образом достигается оптимальное управление файлами DS_Store и файлами системного ресурса. Преимущество: совместимость как с Mac, так и с Windows-клиентами.

Автоматическая репликация картриджа. Репликация картриджей производится автоматически в соответствии с политиками, заданными администратором. Преимущество: легко создавать копии для хранения off-site и в целях защиты информации.

Перепаковка ленты. На новую ленту осуществляется копирование только текущих файлов, без файлов удаленных и старых версий. Преимущество: восстанавливается полезный объем ленты и обеспечивается возможность легкой миграции при появлении следующих поколений LTO.

Off-line управление ленточными картриджами. Система сохраняет метаданные файловой системы для картриджей, находящихся в off-line. Преимущество: система поддерживает неограниченное количество лент «на полке».

Частичное чтение больших файлов. При работе с очень большими файлами часто возникает необходимость прочтения только части файла. Например, это необходимо для много-гигабайтных видео файлов при создании короткого клипа. Преимущество: хорошая производительность при работе с большими файлами

Поддержка множества наборов лент. ПО позволяет размещать группы файлов на определенных наборах лент. Преимущество: администратор может группировать родственные файлы на одном и том же наборе лент.

Открытый стандарт на ленточные технологии. Открытый стандартный формат TAR, используемый для хранения файлов на ленте, позволяет считывать информацию с ленточных картриджей, применяя различные утилиты. Преимущество: использование открытых стандартов совместно с существующими стандартами аппаратного обеспечения гарантирует доступность информации, хранимой на ленте, в течение длительного времени.

Стандарт безопасности Microsoft. ПО XenData Archive Series полностью интегрировано в модель безопасности Microsoft Windows, базирующейся в Active Directory. Преимущество: ПО легко интегрируется в существующую систему безопасности, минимизируя процесс администрирования.

Динамическое расширение набора лент. Система динамически расширяет набор лент при необходимости увеличения объема. Преимущество: минимизация системного администрирования.

Уведомления по e-mail. Уведомление о возможных ошибках в работе аппаратного комплекса или проблемах с архивом отправляется по e-mail и\или сообщениями непосредственно на экране дисплея.

Доступность API. API доступен. Преимущество: может использоваться разработчиками для обеспечения легкой интеграции ПО с различными приложениями.

Успешное внедрение MX64 Edition: Channel 4, Соединенное Королевство

Одна из известных независимых телевещательных компаний Соединенного Королевства использовала при реализации проекта создания медийного архива ПО MX64 Edition от XenData Software.

Заказчик

Channel 4 ведет трансляции своих передач на большей части территории Соединенного Королевства и доступен к приему на базе различных цифровых платформ (через наземную сеть, спутниковую и кабельную).

Channel 4 также предлагает своим клиентам и партнерам ряд других сервисов, включая бесплатные цифровые телевизионные каналы E4, More4 и Film4, а также постоянно расширяющийся ассортимент различных видов услуг на сайте www.channel4.com, включая возможность использования сервиса широкополосной видеослужбы FourDocs и специального сервиса видео по запросу 4оD для Channel 4. Производственное подразделение компании Film4 производит самостоятельно и в содружестве с другими компаниями художественные фильмы для трансляции на территории Великобритании, а также на территории других государств.

Офис компании Channel 4, Лондон

Поставленная задача.

Channel 4 осуществляет планомерное и динамичное развитие с момента своего основания, в связи с чем в определенный момент возникла необходимость перевода имеющихся материалов с видео кассет в формат отдельных файлов. Таким образом, большой медийной компании понадобилось решение, позволяющее быстро и эффективно реагировать на стремительный процесс развития и усовершенствования рынка телерадиовещания.

Поставщик решения: Pharos

Pharos – разработчик программного обеспечения, в течение 10-ти лет проектирует, разрабатывает, и внедряет решения автоматизации и медиа менеджмента для высокотехнологичных вещательных сред в различных точках земного шара.
Более подробную информацию можно получить на сайте: www.pharos.tv

Ключевые составляющие решения

Omneon ingest -сервера
Дисковая система хранения Isilon iQ 42 TБ
Ленточная библиотека Sony PetaSite на 3,000 LTO-3 ленточных картриджей
ПО XenData Archive Series, MX64 Edition, на 4-х серверах с процессорами, поддерживающими 64-х битные вычисления

Подробное описание поставленного решения

Pharos Mediator - масштабируемая система медиа менеджмента, которая может быть сконфигурирована для координации одного или множества рабочих потоков в любом вещательном пространстве. Данные могут быть каталогизированы, обработаны, заимствованы и распределены между пользователями. Система производит перевод файлов в любой выбранный формат, как например, законченная программа, компиляция музыки для использования в пост-продакшн, создание DVD для местного распространения. Множество клиентских разделов могут быть сконфигурированы с учетом требований по обеспечению безопасности и ограничения доступа без необходимости приобретения дополнительного оборудования для каждого клиента.

Входяшие программы и вставки поступают для оперативного хранения в формате 50 Мбит\сек I-frame MPEG2 в центральную систему хранения Isilon через сервера видеозахвата Omneon. Одновременно создается прокси копия низкого разрешения. Полученный контент размещается в хранилище оперативного хранения Isilon, перед тем как автоматически будет перекодирован в формат 15 Mбит/сек Long GOP MPEG2 для воспроизведения через существующую серверную систему Pinnacle TX. Используя Mediator, Channel 4 имеет возможность производить полный цикл операций для организация процесса вещания выбирая материалы непосредственно из цифрового оперативного хранилища.

MXF 50i был избран в качестве файлового формата в связи с тем, что он поддерживает оптимальное качество файла и относительно легко экспортируется и декодируется.

Media Access Project использует иерархические системы хранения под контролем Mediator Transfer Manager. Входящие программы и клипы оцифровываются на Omneon ingest сервера. Файлы высокого разрешения затем переносятся на центральный сервер хранения данных - 42 TБ Isilon iQ, на котором также находятся все прокси копии в низком разрешении. Isilon iQ состоит из 8-ми нод для обеспечения немедленного доступа к хранимым материалам.

Следующий уровень хранения - управляемый Mediator Transfer Manager near-line архив очень большого объема, состоящий из 4-х 64-х битных серверов под управлением ПО XenData и ленточная библиотека Sony PetaSite LTO. На данный момент это самая крупная инсталляция LTO PetaSite в Европе с 3,000 LTO-3 ленточными картриджами. Решение обеспечивает 1.2 ПБ (петабайт) хранения с возможностью внесения в архив более 50,000 часов материала высокого разрешения, записанного в формате 50 Mбит/сек. Sony PetaSite управляется ПО XenData MX64 Edition, установленном на мастер-сервере и трех серверах перемещения данных. Такая конфигурация обеспечивает высокую скорость передачи при архивировании данных и при операции восстановления данных.

ПО компании XenData представляет все архивированные видео файлы как стандартную файловую систему Windows с одним логическим диском, что означает, что Mediator может записывать в архив и считывать из него, как если бы это был стандартный сетевой диск.

Библиотека Sony PetaSite с 3000 LTO-картриджами

Отдел захвата Channel4 оборудован стендами визуального контроля качества и средствами быстрого захвата без необходимости просмотра в реальном времени. Обе эти части управляются через Mediator. Весь оцифрованный материал экспортируется в систему предпросмотра и одновременно передаётся на узлы вещания. Система предпросмотра используется для хранения неэфирного протокола, для всех контрольных просмотров и для проверки порядка прохождения коммерческих и рекламных материалов. Функция формирования плей-листа уже включена в систему Mediator. Для обеспечения гибкости используется стандартный прикладной интерфейс.

Весь проект доступа к материалам – оцифровка, хранение материала, управление архивом, ленточная библиотека Petasite, и процесс перемещение файлов управляется системой Pharos Mediator. Информация хранится в базе данных. Большая часть системы расположена в том же помещении, где и ленточная библиотека. Она включает в себя 2 выделенных места оцифровки материала с VTR и контролем качества, сервера Omneon для оnline вещания и архив под управлением Xendata MX 64, а также все служебные сервера.

Mediator также управляет экспортом видеоматериалов, файлов и метаданных в любое выбранное приложение, используя формат XML для передачи метаданных. Например, первичное устройство вывода - это DigiBeta, а резервное устройство вывода - это Digital Rapids Version X. Вывод для наложения графики осуществляется аналогично: клипы экспортируются на Pixel Power Clarity для создания графического оформления.

Материал, предназначенный для записи на DVD и распространения через пресс-службу канала Channel 4, перекодируется из оригинального формата 50i, xранимого в архиве или на первичной системе хранения Isilon. Оглавление DVD-диска формируется из базы данных Pharos Mediator. Конверторы используются для создания файлов 15 Mbits/s long-GOP и передачи их через сервера Pinnacle. Все расписание программ формируется на неделю вперёд или больше и передается в Pharos Mediator, который запускает процесс перекодирования материалов для эфира.

Проект организации хранения данных Media Access Project был реализован в 2007 году в соответствии с требованиями заказчика по созданию и обслуживанию файлового архива всех программ таким образом, чтобы они могли быть доступны в любом требуемом формате.