расположение страницы : bookresearch.ru / IT-менеджеру / Обзор и сравнительный анализ форматов передачи информации в книжной отрасли /

Обзор и сравнительный анализ форматов передачи информации в книжной отрасли

[ Вадим Беркович Вадим Беркович ]

Введение

На современном этапе развития книжной отрасли возникла актуальная проблема эффективного обмена информацией между всеми ее субъектами, такими как издательства, поставщики, книготорговцы и библиотеки. На текущий момент в отрасли существует большое количество форматов передачи данных между субъектами рынка, в большинстве своем не совместимых между собой. Данные обстоятельства существенно замедляют автоматизацию процессов обмена как коммерческой, так и библиографической информацией. Это, например, связано с тем, что издательствам приходится работать с огромным количеством программ сторонних разработчиков (начиная от документов, разработанных в Microsoft Office и заканчивая собственными разработками книготорговых компаний), имеющих не только различные протоколы передачи данных, но и функциональность. Это вносит хаос в процесс формирования как информационных, так и платежных документов в электронном виде. С существенными проблемами сталкиваются и книготорговые компании - им приходится разрабатывать невероятное количество всевозможных конверторов данных в свои внутренние форматы, что повышает издержки предприятия, связанные с дополнительными затратами времени на программирование и с большим количеством ошибок при ручном вводе. Одним из эффективных методов решения вышеперечисленных проблем является разработка и утверждение единого стандарта передачи данных в интересах всех участников книжного рынка. Однако, прежде чем начинать разработку нового стандарта передачи данных, целесообразно произвести сравнительный анализ имеющихся на текущий момент форматов для выявления их основных достоинств и недостатков.

Данный аналитический обзор представляет собой результаты сравнительного анализа существующих форматов передачи информации, проведенного специалистами группы стандартизации электронного обмена данными, работающей в рамках заказа Министерства по делам печати на разработку единой информационной платформы для книжного рынка. При сравнительном анализе применялись формальные процедуры экспертного оценивания, основанные на подходах, принятых в теории принятия решений. Необходимость применения формальных процедур обусловлена как уникальностью задачи, так и относительно большой степенью субъективности, которая неизбежно вносит искажения в общую картину анализа. Для повышения обоснованности сравнительного анализа была разработана методика сравнительного анализа форматов передачи информации в книжной отрасли

Постановка задачи исследования

Целевая установка и исходные данные: Произвести сравнительный анализ форматов передачи информации, использующихся на данный момент в книжной отрасли.

Основные рассмотренные вопросы:

  1. Разработка методики сравнительного анализа форматов передачи информации в книжной отрасли
  2. Сравнительный анализ форматов передачи информации в книжной отрасли
  3. Рекомендации по использованию форматов передачи данных

Методика сравнительного анализа форматов передачи информации в книжной отрасли

1. Основные понятия и определения

Под эффективностью формата обмена информацией будем понимать степень соответствия реального формата обмена информацией требуемому.

Под показателем будем понимать меру степени соответствия реального формата обмена информацией требуемому.

Критерием оценки эффективности формата является правило, позволяющее сопоставить форматы, характеризующиеся различной степенью соответствия требуемому. На практике это позволяет осуществить выбор из них наиболее предпочтительного.

Для сравнительного анализа форматов обмена информацией необходимо провести следующие мероприятия:

  1. Выбрать критерии и показатели эффективности.
  2. Выбрать шкалы измерения показателей и критериев эффективности (качественные или количественные).
  3. Оценить относительную важность показателей эффективности.
  4. Выявить альтернативы (множество стандартов обмена информацией).
  5. Оценить альтернативы (например, посредством экспертных оценок) по выбранным показателям в выбранных шкалах.
  6. Решить задачу выбора.
  7. Интерпретировать полученные результаты.

2. Выбор шкалы измерения показателей эффективности

Для измерения показателей эффективности в силу относительной недостаточности информации по имеющимся стандартам выберем порядковую шкалу.

Порядковые шкалы используются для измерения упорядочения элементов по одному или нескольким признакам (показателям). Они позволяют установить, что один элемент лучше, важнее, предпочтительнее другого, или равноценен ему. Порядковая шкала отражает лишь порядок следования элементов и не дает возможности сказать, насколько или во сколько один элемент предпочтительнее другого. Иными словами, в этой шкале нельзя определить меру степени предпочтительности.

3. Определение важности частных показателей методом попарных сравнений с градациями.

Обычно с помощью коэффициентов важности изменяется степень влияния показателя на результат операции. Часто при этом на коэффициенты важности накладывается требование неотрицательности, не равенства нулю и нормировки (чаще всего требуют, чтобы в сумме коэффициенты важности равнялись единице или ста). Чем больше значение коэффициентов важности, тем более существенен показатель относительно целевого эффекта.

В основе метода попарных сравнений с градациями лежит обработка результатов попарного сравнения элементов в заданной бальной шкале. Для нашего случая достаточно будет шкалы, представленной в таблице 1.
Градация шкалыОпределение
1сравниваемые показатели одинаковы по предпочтительности
3имеются достаточные основания считать первый показатель в представленной паре предпочтительнее второго
5первый показатель в представленной паре безусловно предпочтительнее второго

С использованием заданной бальной шкалы матрица Z попарных сравнений формируется следующим образом:

Последовательно просматривая пары показателей, номер первого из которых совпадает с номером строки, а номер второго с номером столбца матрицы Z, эксперт выделяет и оценивает степень предпочтительности только в тех парах, в которых первый элемент предпочтительнее второго. значения остальных элементов вычисляются по правилу: zji=1/zij

Для вычисления коэффициентов относительной важности показателей используется следующий итерационный алгоритм

  1. Задать критерий остановки и требуемое количество итераций вычисления аj, j=1..m, где m - число показателей
  2. Положить t = 0 и все аj = 1/m
  3. Положить t = t+1
  4. Вычислить аj = sumim(zijaj(t-1))/ sumim (sumjm (zijaj(t-1)))
  5. Проверить условие t >= tтр да - окончить вычисление; нет - перейти к п.3.

Полученные аj и будут искомыми коэффициентами важности (в сумме равными единице) показателей.

Практика показывает, что tтр = 3-5.

4. Оценка альтернатив по выбранным показателям в выбранных шкалах

При оценке альтернатив применим метод бального оценивания, причем каждому элементу будем приписывать не точную оценку, а диапазон значений, т. к. практикой установлено, что это более надежная и психологически удобная для эксперта форма выражения суждения.

При бальном оценивании эксперт должен каждому показателю стандарта из множества предъявления приписать соответствующее число баллов (или диапазон значений). Указанные числа (диапазоны чисел) выбираются из шкалы от 1 до 100, где число 100 приписывается самому предпочтительному элементу. Сравнительный анализ форматов передачи данных рассмотрим как измерение в порядковой шкале, так как в оценивании была относительно большая доля субъективизма.

При диапазонном бальном оценивании эксперт должен указать минимальное Xmin и максимальное Xmax значения, между которыми, по его мнению, находится истинное значение оцениваемой характеристики.

Так как нет никакой дополнительной информации относительно оцениваемой величины, то в силу принципа недостаточного основания Бернулли-Лапласа положим распределение оценки X внутри [Xmin; Xmax] равномерным и вычислим среднее значение следующим образом:

Xср = 0,5(Xmin + Xmax)

Эти оценки примем как исходные данные к решению задачи выбора. Допущением при данном методе оценивания считается то, что все показатели независимы по предпочтительности

5. Решение задачи выбора

Так как предпочтительной характеристике (показателю) элемента приписывается больший диапазон значений, то направление предпочтения для всех показателей положительное. То есть будем считать, что "идеальный" стандарт имеет 100 баллов по всем показателям. В силу неполноты исходной информации и по принципу вложенных отношений (сначала используется самая надежная информация, а затем производится ее уточнение) примем предположение о том, что допустима компенсация уменьшения абсолютных значений одних показателей за счет увеличения других. Тогда в качестве функции агрегирования может быть принята аддитивная функция Fj(W)=sumim(aiXсрi),
то есть для каждого j-ого формата значение обобщенного показателя Wобj эффективности равно сумме произведений среднего бала каждого i-ого частного показателя формата на его важность ai.

Для подготовки к интерпретации результатов производится преобразование полученных данных в шкалу [0;1] по выражению
Wобin = Wобi - Wобmin / Wоби - Wобmin, где
Wобin - нормированный обобщенный показатель;
Wоби - значение обобщенного показателя для идеального варианта;
Wобi - значение нормируемого обобщенного показателя
Wобmin - минимальное значение обобщенного показателя сравниваемых альтернатив;
Затем производится упорядочивание альтернатив по предпочтительности.

6. Интерпретация полученных результатов

В случае производства экспертизы малым числом экспертов (1-2) данная методика дает достаточно надежные результаты только по предпочтительности альтернатив (стандарт "А" наиболее предпочтителен стандарту "Б"). А количественная оценка носит сильно субъективный характер и может быть интерпретирована только как единоличное мнение эксперта. Поэтому относительное и абсолютное упорядочивание альтернатив должно быть представлено только в качестве дополнительной информации.

Относительное упорядочивание альтернатив

Альтернативы упорядочиваются относительно наиболее предпочтительной. То есть значение наиболее предпочтительной альтернативы принимается за 100%, а значение всех остальных вычисляется по выражению Wотнi = Wобi/Wmax*100%;

Абсолютное упорядочивание альтернатив

Альтернативы упорядочиваются относительно "идеальной". То есть значение идеальной принимается за 100%, а значение всех остальных вычисляется по выражению Wотнi = Wобi/Wи*100%;

При большем числе экспертов (больше двух) бальное оценивание можно рассматривать как измерение в шкале интервалов и, следовательно, достоверность относительного и абсолютного оценивания существенно повышается. Однако не следует забывать о том, что анализ большого числа экспертных оценок требует дополнительных расчетов и их согласования, а также усложняется процедура проведения самого оценивания.

2. Показатели и критерии

В ходе предварительной работы были выявлены следующие показатели для сравнения форматов передачи данных, отражающие, на наш взгляд, их существенные стороны:

1. Содержание передаваемой информации

  • полнота коммерческой информации;
  • полнота библиографической информации;

Под полнотой коммерческой информации будем понимать наличие поддержки основных коммерческих операций (предложение, заказ, поставка, возврат, остатки/реализация), а под полнотой библиографической информации - насколько адекватно может составить клиент мнение о книге, увидев используемые форматом поля описания.

2. Сложность реализации

  • наличие и существенность готовых решений (имеются ли в наличие готовые программные решения на базе данного стандарта и каков их масштаб - в отдельном приложении, в приложении масштаба предприятия и т.д. );
  • возможность организационно-методической поддержки;
  • техническая поддержка (оказывает ли компания техническую поддержку, тем, кто пользуется ее стандартами и в каком объеме);
  • поддержка популярными средами разработки (поддерживают ли средства разработки доступ к данным в представленном формате и насколько он просто реализуем);

3. Степень распространения

  • степень распространенности стандарта в организациях книжной отрасли; (совокупность организаций, работающих в данном стандарте, а также степень использования данного стандарта на этих предприятиях)
  • время жизни стандарта (как долго он используется в книжной отрасли);
  • состояние на текущий момент (что со стандартом: не используется, мало используется или получил свое дальнейшее развитие)

4. Кросс-платформенность

  • возможность реализации стандарта на различных платформах и в различных ОС (возможен ли перенос данного стандарта на другую ОС, платформу).
  • необходимость преобразования информации при межплатформенном взаимодействии (на сколько трудоемок процесс преобразования данных при кросс-платформенном взаимодействии)

5. Масштабируемость

  • возможность добавления новых атрибутов (полей) в описания;
  • реакция на увеличение количества передаваемой информации (что произойдет, если количество передаваемой информации возрастет в десятки или сотни раз)

Все альтернативы сравниваются относительно "идеального стандарта", всем показателям которого приписывается по 100 баллов. Также альтернативы сравниваются между собой - лучшей приписывается значение 100, а остальным - значение процента от лучшей альтернативы

3. Рассмотренные альтернативы

СтандартФормат документовГод появленияУровень поддержки библиографического описания
"Топ-Книга", НовосибирскMS Excelн/д7 библиографических полей описания
"Дом Книги", Санкт-ПетербургСпециальный текстовый форматн/д15 библиографических полей описания
1С, Москва. Разработка при поддержке представительства Microsoft в МосквеXML2000Произвольное число библиографических полей описания
Стандарт OBE (Open Book exchange) от Сергея Кнорского, МоскваСпециальный текстовый форматн/д3 библиографических поля описания
Группа магазинов в составе ТД "Библио-Глобус", ТД "Москва", ТД "Молодая Гвардия", ГУП "Московский Дом Книги"Формат Dbase199919 библиографических полей описания
Форматы MARC, Российские библиотекиСпециальный текстовый форматИсчерпывающие возможности библиографического описания

4. Сравнительный анализ

Оценивание производилось в два этапа
  1. Оценивалась относительная важность выбранных показателей
  2. Оценивались сами стандарты.
При рассмотрении вариантов стандартов были отмечены следующие моменты:

Формат 1С

1. Содержание передаваемой информации

В данном формате поддерживаются все основные торговые операции, такие как заказ товара, счет на оплату, отпуск товара, счет-фактура, возврат товара, передача товара на реализацию, возврат товара с реализации, отчет о продажах комиссионного товара, выплата наличных денег, возврат наличных денег, выплата безналичных денег, возврат безналичных денег. С библиографической информацией сложнее. Так как данный формат описывает различные товары, то описание книжных изданий, в принципе, возможно, однако требует разработки классификаторов и названий атрибутов.

2. Сложность реализации

Данный формат имеет полную методическую, информационную и техническую поддержку фирмой-производителем 1С. На момент написания отчета данный формат был внедрен в 17-й релиз программы "1С Предприятие" версии 7.7.

3. Степень распространения

Данный стандарт был разработан с использованием языкаXML при поддержке российского представительства Microsoft в 2000 году. Для его продвижения проводилась активная маркетинговая кампания, однако в настоящее время активность значительно снижена. Информацию по новым вариантам стандарта найти не удалось.

4. Кросс-платформенность

Так как формат реализован в виде XML схемы (текстовый формат), то возможный перенос формата на другие платформы не должен привести к значительным затруднениям, так как большинство ОС и платформ без труда "понимают" текстовые данные (ASCII).

5. Масштабируемость

В формате предусмотрена возможность добавления дополнительных атрибутов, однако, при увеличении количества передаваемой информации в десятки или сотни раз объем документов растет в гораздо больших размерах. Это связано с большой избыточностью передаваемой информации. Как следствие, скорее всего потребуется существенная модернизация серверных и рабочих станций.

Форматы MARC

1. Содержание передаваемой информации

Форматы MARC не предназначены для поддержки коммерческих операций с товаром, поэтому содержат в себе поля только для библиографического описания книг. Количество полей биб. описания превышает 900.

2. Сложность реализации

Форматы MARC имеют сложную внутреннюю структуру, однако методическую и техническую поддержку этих форматов осуществляет множество международных и российских организаций, в том числе наиболее продвинутые пользователи форматов из числа крупнейших библиотек мира и России.

3. Степень распространения

Данные форматы активно используются библиотеками всего мира уже более 20 лет и получили широчайшее распространение в этом секторе.

4. Кросс-платформенность

Форматы не зависят от аппаратных средств и операционных систем, так как реализованы в текстовом виде с использованием кодировки ASCII (либо UNICODE).

5. Масштабируемость

Внесение дополнительных полей описания в формат влечет за собой сложную процедуру оценивания и принятия решения с участием множества контролирующих и следящих организаций. Таким образом, оперативное решение таких вопросов невозможно. Количество записей может существенно повлиять на производительность обрабатывающих систем из-за избытка информации

Форматы Группы московских магазинов (ТД Библио-Глобус и др.)

1. Содержание передаваемой информации

Формат представляет собой лишь структуру и названия полей файла формата (*.dbf), являющегося электронной копией накладной и счета-фактуры без реквизитов поставщика и покупателя. Есть расширение этого формата, используемое в работе ТД "Библио-Глобус", которое представляет собой структуру и названия полей еще двух файлов того же формата, предназначенных для передачи прайс-листов (предложений товара) и заказов. В обзоре формат рассматривается с учетом этих двух дополнительных файлов.

2. Сложность реализации

Файлы формата (*.dbf) поддерживаются практически всеми известными сегодня средами разработки. Методическую поддержку осуществляют технические специалисты организаций, использующих данные форматы в своей хозяйственной деятельности. Существуют свободно распространяемые версии небольших программ для издателей, поддерживающие данный формат.

3. Степень распространения

Формат получил широкое распространение в Москве после заключения соглашения о его поддержке рядом крупнейших московских магазинов в январе 2000 года.

4. Кросс-платформенность

Формат dbf может быть реализован только на платформе Intel в операционной системе MS Windows или DOS.

5. Масштабируемость

Добавление в данный формат новых полей затруднено необходимостью дополнительных переговоров между пользователями формата, так как ведет к серьезным доработкам систем, призванных с этими форматами работать

Формат Санкт-Петербургского Дома Книги

1. Содержание передаваемой информации

Текстовый формат со специальными разделителями был придуман для передачи на электронных носителях только накладных, т.е. охвачена только одна торговая операция - поставка товара. Количество и набор полей позволяют передать как часть коммерческой информации (сведения о поставщике), так и достаточно большой объем библиографической информации (15 полей).

2. Сложность реализации

Магазин осуществляет методическую поддержку формата. Техническое воплощение целиком зависит от навыков и умения прикладных программистов, которые будут встраивать конвертор в информационные системы партнеров по хоз. деятельности

3. Степень распространения

Нет информации о том, насколько широко распространен данный формат в Санкт-Петербурге.

4. Кросс-платформенность

Тестовый формат файла одинаково легко реализуется как на платформах Intel, так и на платформах от других производителей. Кодировка Unicode не зависит и от операционной системы.

5. Масштабируемость

В формате не предусмотрены дополнительные секции для новых атрибутов. При необходимости их придется встраивать в сам формат. Увеличение объемов записей также приведет к существенному увеличению размера файла и, как следствие, к увеличению времени его обработки в любой системе.

Формат "Топ-Книги"

1. Содержание передаваемой информации

Поддерживается возможность передачи прайс-листов, накладных и заказов. В прайс-листе предусмотрены 7 полей для библиографического описания книги.

2. Сложность реализации

Формат электронных таблиц Microsoft поддерживается в основном средами разработки от Microsoft. Учитывая распространенность продуктов данной фирмы в России проблем с реализацией нет. Однако специализированных средств для поддержки этого формата в средах разработки ПО от сторонних производителей нет. Методическая поддержка осуществляется специалистами "Топ-Книги".

3. Степень распространения

Формат получил широкое распространение в регионах за Уралом благодаря активной политике "Топ-Книги" и ее партнеров.

4. Кросс-платформенность

Данный формат может быть реализован только в системах, использующих операционную систему Windows. Любая другая ОС не годится.

5. Масштабируемость

Свободной секции для добавления полей нет, поэтому изменение набора полей для передачи автоматически влечет за собой пересмотр стандарта (а также всех конверторов для его поддержания). Увеличение количества передаваемых записей влияет на производительность систем в арифметической прогрессии.

Формат OBE

1. Содержание передаваемой информации

Формат предназначен для торговой операции "поставка товара". Внутри формата для библиографического описания книги используются три поля.

2. Сложность реализации

Формат может поддерживаться только его разработчиком, Сергеем Кнорским. Реализация не вызовет особых сложностей у программистов.

3. Степень распространения

Формат распространялся издательским домом "Кнорус" и получил распространение среди его партнеров. Имеющаяся информация дает возможность сделать вывод о том, что последняя версия формата была разработана не позднее 1998 года, и с тех пор формат не пересматривался.

4. Кросс-платформенность

Текстовые форматы в кодировке UNICODE (или ASCII) одинаково реализуются на различных платформах и ОС.

5. Масштабируемость

Добавление новых полей ведет к пересмотру всего формата. Увеличение количества передаваемых записей существенно увеличивает объем файла с данными.

Выводы

По результатам экспертного оценивания лучшим оказался стандарт фирмы 1С, Москва, разработанный при поддержке представительства Microsoft в Москве. Хотя он оказался лучшим в списке, однако, как видно из таблицы 3, до "требуемого" ему далеко. Основным недостатком данного формата является, как ни парадоксально, его универсальность. Т.е. он настолько "перегружен" возможностями, что его внедрение займет значительное количество времени.

Стандарты MARC, хотя и дают возможность описывать книги в полном объеме, но затруднены в использовании книготорговцами, потому что в них почти не присутствует возможность передачи коммерческой информации.

Остальные форматы менее приемлемы как с точки зрения реализации на различных платформах, так и с точки зрения передаваемой информации - она не отвечает современным требованиям книжного рынка.

На основе полученных результатов можно сделать вывод, что ни один из рассмотренных форматов в полной мере не удовлетворяет требованиям, предъявляемым к стандарту обмена информацией и, на наш взгляд, целесообразно приступить к дополнительным исследованиям по разработке нового единого стандарта обмена информацией.

Следует отметить, что данные оценки носят достаточно субъективный характер и отражают мнение специалистов группы по стандартизации электронного обмена данными в книжной отрасли (руководитель Пашинцев И.В.), работающей в рамках темы "Разработка единой информационной платформы развития издательского, книготоргового и библиотечного дела". Заказчиком данного проекта выступает Министерство Российской Федерации по делам печати, телерадиовещания и средств массовых коммуникаций.

Также при принятии решения на разработку нового единого стандарта обмена информацией, на наш взгляд, целесообразно принять во внимание и зарубежный опыт. Однако сравнительный анализ иностранных стандартов выходит за рамки выполненного исследования.


ПРИЛОЖЕНИЕ

Таблица 1. Матрица попарных сравнений

СтандартАбсолютное упорядочиваниеОтносительное упорядочивание
Требуемый формат100---
Форматы 1С~64~100
Форматы MARC~53~82
Форматы Группы московских магазинов~49~76
Форматы "Дом Книги"~49~76
Форматы "Топ-Книги"~43~66
Форматы OBE~38~60

Таблица 2. Матрица попарных сравнений

12345678910111213
1.полнота коммерческойинформации1,001,003,003,003,005,003,003,005,001,003,001,001,00
2.полнота библиографической информации1,001,003,003,003,005,003,003,005,001,003,001,001,00
3.наличие и существенность готовых решений0,330,331,000,331,000,331,001,000,330,330,330,200,20
4.возможностьорганизационно-методической поддержки0,330,333,001,003,003,003,003,001,000,331,000,331,00
5. техническая поддержка0,330,331,000,331,001,003,001,001,000,331,000,200,33
6. поддержка популярнымисредами разработки0,200,203,000,331,001,001,001,000,330,330,330,200,33
7. организаций работающих в данном стандарте0,330,331,000,330,331,001,001,000,330,330,330,200,20
8. срок жизни стандарта0,330,331,000,331,001,001,001,000,330,330,330,200,20
9. текущее состояние0,200,203,001,001,003,003,003,001,000,200,330,200,20
10. кросс-платформенность1,001,003,003,003,003,003,003,005,001,003,001,001,00
11. необходимость конвертации0,330,333,001,001,003,003,003,003,000,331,000,331,00
12. возможность добавление новых атрибутов в описания1,001,005,003,005,005,005,005,005,001,003,001,003,00
13. увеличение количества передаваемой информации1,001,005,001,003,003,005,005,005,001,001,000,331,00

Таблица 3. Относительная важность частных показателей

ПоказательОтносительная важность показателя
полнота коммерческойинформации0,122
полнота библиографической информации0,122
наличие и существенность готовых решений0,024
возможность организационно-методической поддержки0,075
техническая поддержка0,04
поддержка популярнымисредами разработки0,034
организаций работающих в данном стандарте0,024
живучесть стандарта0,027
текущий текущее состояние0,06
кросс-платформенность0,114
необходимость конвертации0,075
возможность добавление новых атрибутов в описания0,159
увеличение количества передаваемой информации0,119

Таблица 4. Бальные оценки альтернатив

Форматы "Топ-Книги"Форматы "Дом Книги"Форматы 1СФорматы OBEФорматы Группы московских магазиновФорматы MARC
полнота коммерческойинформации607095506020
полнота библиографической информации3040403070100
наличие и существенность готовых решений806030108090
возможность организационно-методической поддержки706090208095
техническая поддержка505070306030
поддержка популярнымисредами разработки502060204020
организаций работающих в данном стандарте503020105080
живучесть стандарта404030404060
текущий текущее состояние704075207090
кросс-платформенность206060602560
необходимость конвертации105050501050
возможность добавление новых атрибутов в описания204085402010
увеличение количества передаваемой информации705050507050
Весь материал, размещенный на сайте www.bookresearch.ru, является собственностью авторов соответствующих материалов. Любая перепечатка и перенос материалов на другие сайты возможны только с разрешения авторов и администратора сайта. Любой может предложить свой материал для публикации у нас. Пишите администратору сайта.

www.bookresearch.ru
Home  : Издателю и книготорговцу : Библиографу : Разработчику : IT-менеджеру : О проекте : Форум : Software - программное обеспечение для книжной отрасли :

  дизайн —
  SiteBuilder.ru


Этот сайт создан при помощи программы Globus SiteBuilder
Этот сайт создан при помощи программы Globus SiteBuilder