В зависимости от используемых компонентов ИПЯ бывают разных видов.

К числу первоначально использовавшихся видов ИПЯ Ч. Мидоу относит виды, представленные на рис. 6.6:

Рис. 6.6.

Иерархические классификации. Например, получившая широкое применение Десятичная классификация Дьюи , классификация библиотеки Конгресса США, Универсальная Десятичная классификация (УДК) , которая представляет собой модификацию системы Дьюи.

Иерархические классификации обеспечивают возможность расширения "вниз", т.е. уточнения описания документа, но они отличаются жесткостью, их достаточно трудно изменять.

Язык предметных заголовков.

Подобно иерархической классификации использует фиксированное число предметных классов (часто располагаемых по алфавиту), но для его терминов обычно не используется определенный код. Язык позволяет любому документу приписывать более чем один термин, почти не имеет структуры и средств для выражения взаимоотношений между терминами. Предметные заголовки используются, например, в журналах (рубрики), классификаторах специальностей вузов и Высшей аттестационной комиссии (ВАК) при Минобрнауки России. Этот язык можно считать языком иерархической классификации, но с ослабленной структурой, что облегчает его разработку, но затрудняет изучение и применение.

Рассмотренные языки иногда называют предкоордииированнъши (pre-coordinate ) системами, поскольку семантические комбинации терминов не определены в словарном составе ИПЯ, а составляются его разработчиками. Такие языки неизбежно имеют пробелы, в них трудно отражать новые предметные области (что легко видеть на примере системы УДК).

Поэтому для более совершенного описания содержания документа стало применяться индексирование ключевыми словами – координатное индексирование.

Система ключевых слов с фиксированным словарем.

Такие языки могут применяться для узкоспециализированных ИПС с достаточно формализованной (унифицированной) терминологией (например, система "Унитерм", разработанная М. Таубе ). Эта система подобна системе предметных заголовков, но в отличие от нее, во-первых, ключевые слова короче предметных заголовков (обычно это единичные слова, иногда – короткие словосочетания) и, во-вторых, объем полного словарного состава существенно больше. Словарный состав здесь, как правило, фиксирован, и отсутствуют средства установления связей между словами (синтаксис), но включение набора слов в ПОД или ПОЗ позволяет пользователю как бы угадывать эти связи, что помогает более полно описать исходный документ или запрос.

Система ключевых слов со свободным словарем.

Такие языки позволяют пользователю выбирать для описания документа любые слова (за исключением союзов и предлогов), руководствуясь их ролью в отображении содержания документа. Это позволяет точнее отобразить содержание документа, но может снизить релевантность поиска, поскольку составители ПОЗ не могут предусмотреть точки зрения составителей ПОД.

Языки с синтаксисом (грамматикой).

В качестве простейшего из ИПЯ этого вида Ч. Мидоу выделяет язык помеченных дескрипторов (tagged descriptors), с помощью которого отображение смысла в ПОД и ПОЗ осуществляется путем присоединения к основному дескриптору (или ключевому слову) уточняющих дескрипторов (ключевых слов), роль которых состоит в том, чтобы либо классифицировать основной дескриптор как имя собственное, характерный признак или действие, либо объединить в одну группу дескрипторы, относящиеся к одному и тому же предмету документа. В современных поисковых системах Интернет применяются операции AND, OR, отображающие логические операции дизъюнкции и конъюнкции, в простейшем варианте – слова заключают в кавычки.

В дальнейшем были разработаны ИПЯ с грамматикой, содержащей более сложные правила.

Язык фасетного индексирования.

В более развитых в синтаксическом отношении вариантах такого языка различные дескрипторы могут изменять значения друг друга. Простейшим примером такого синтаксиса является запись команды ЭВМ, состоящей из собственно оператора и адреса хранения информации. В качестве примера можно также привести уточненное описание товара, включая фасон, цвет, цену и тому подобные характеристики товара. Такой синтаксис основан на известном в теории множеств положении: в результате помещения рядом элементов разных множеств возникает эффект появления нового смысла. Языки такого вида позволяют частично устранять омонимию с учетом контекста.

Различные роли, которые играют дескрипторы в таких языках, называют фасетами . Для фасет могут быть использованы дескрипторы из одного и того же словаря. Располагаются фасеты в порядке значимости дескрипторов для отображения содержания индексируемого документа. В отличие от иерархических классификаций фасеты можно располагать в произвольном порядке.

Язык фраз.

В качестве ПОД используются индексирующие фразы. В этом случае контекст ключевых слов позволяет частично снять проблемы семантической неоднозначности.

Трудность здесь состоит в выборе фраз, включаемых в язык. Кроме того, отсутствует возможность расширения ПОД.

Язык пермутационного индексирования.

Пермутационный указатель включает контекст каждого слова, содержащегося в фразе и называется указателем ключевых слов, взятых в контексте, или указателем типа KWIC .

Идею такого указателя легче пояснить примером:

Системы индексирования документов

Системы индексирования документов

Системы индексирования документов

При этом ПОД образует колонка ключевых слов в центре, расположенных в порядке алфавита. Можно считать этот ПОД фразой, но он эффективнее предыдущего с точки зрения смысловыражающих возможностей. Однако пермутационное индексирование трудоемко и неэффективно экономически.

Естественный язык.

Наиболее точно может отразить семантику текста, однако помимо трудоемкости и экономической неэффективности возникают проблемы синонимии, омонимии и другой неоднозначности естественного языка, затрудняющие алгоритмизацию поиска.

Уменьшить неоднозначности языка помогает словарь.

В истории развития информационного поиска разрабатывались и применялись разнообразные словари: словарь синонимичных пар; словарь с многократными связями (например, двуязычный словарь); классификационная таблица; словарь с определениями на естественном языке; отрицательный словарь (содержащий запрещенные словосочетания); словарь-тезаурус ("Тезаурус ASTIA" и др.).

Таким образом, существуют ИПЯ, использующие ключевые слова; дескрипторные ИПЯ без грамматики и с грамматикой, ИПЯ с отрицательным словарем, ИПЯ с тезаурусом и т.д.

Существуют и иные классификации ИПЯ.

Так, в предлагается следующее разделение ИПЯ (рис. 6.7):

• 1. Предкоординированные ИПЯ.
• 1.1. Перечислительные классификации: иерархические, алфавитно-предметные (по Мидоу – язык предметных заголовков).
• 1.2. Фасетные классификации.
• 2. Посткоординированные (координатные по Мидоу) ИПЯ.
• 2.1. Дескрипторные языки (с координацией посредством использования операции логического умножения или пересечения Ç).

Рис. 6.7.

• 2.2. Семантические коды, задающие парадигматические отношения структурами лексических единиц (код Перри – Кента , RX-коды языка "Бит" ).
• 2.3. Синтагматические языки с развитой системой средств отображения синтагматических отношений (см., например, язык СИНТОЛ ).
• 3. Языки библиографических ссылок.

Предлагались классификации ИПЯ по типу их словарного состава (см. ссылки в ), типам языковых единиц, степени их сложности, характеру отношений между этими единицами (виду грамматики), системам индексирования и т.п.

При этом следует иметь в виду, что на практике конкретный ИПЯ нельзя строго отнести к тому или иному классу, поскольку: во-первых, некоторые ИПС могут работать и в режиме без грамматики, и в режиме с грамматикой (например, системы СИНТОЛ , СМАРТ ); а во-вторых, ИПС развиваются, и основой является развитие ИПЯ. Поэтому обычно ИПС и ИПЯ описывают рядом характеристик с тем, чтобы пользователь мог выбрать желаемые.

При выборе ИПЯ необходимо оценивать их эффективность. При опенке эффективности ИПЯ используют различные критерии. Проблема оценки ИПЯ, в свою очередь, является составной частью более общей проблемы – оценки качества информационного поиска (см. 6.9).

-- [ Страница 1 ] --

Н.И. ГЕНДИНА

ЛИНГВИСТИЧЕСКОЕ ОБЕСПЕЧЕНИЕ

АВТОМАТИЗИРОВАННЫХ БИБЛИОТЕЧНЫХ

В настоящее

время стало очевидным, что традиционная технология обработки

документального потока, поступающего в библиотеки и службы информации, ручной

поиск, ручные процедуры производства библиотечно-библиографических продуктов и

выполнения услуг делают слишком долгим путь информации к читателю, не обеспечивают

необходимых условий для плодотворной работы ученых и специалистов, обращающихся в библиотеки. Потенциал ручной технологии практически исчерпан и не позволяет выйти на качественно иной уровень информационно-библиографического и библиотечного обслуживания потребителей информации.

Оптимальным способом решения проблемы является внедрение принципиально новых технологических процессов, базирующихся на применении ЭВМ. Внедрение вычислительной техники связано как с разработкой программного обеспечения, так и с созданием, ведением и эксплуатацией баз данных, содержащих различные виды информации, записанной на машиночитаемом носителе. Для того чтобы пополнять и корректировать такие базы данных, необходимо использование информационно поисковых языков (ИПЯ), существующих в виде многочисленных классификационных схем, рубрикаторов, классификаторов, дескрипторных словарей, списков предметных рубрик и других лингвистических средств. Эта необходимость и послужила одной из причин подготовки данной книги, цель которой - оказать реальную помощь библиотечным и информационным работникам в овладении основами лингвистического обеспечения автоматизированных библиотечных систем.

В отличие от традиционной постановки вопроса, в рамках которой функционирование ИПЯ в библиотеках принято связывать лишь с систематизацией, предметизацией произведений печати и организацией библиотечных каталогов при ограниченности состава используемых языков (УДК, ББК, алфавитно-предметная классификация), здесь сделана попытка реализовать иной подход. Его особенность заключается в том, что ИПЯ рассматриваются с точки зрения их применения во всех сферах библиотечно информационной технологии, поскольку эффективность функционирования библиотечно информационных систем всецело зависит от качества, лингвистического обеспечения, т. е.

от комплекса используемых в системе ИПЯ.

Книга явилась результатом не только теоретического обобщения представленных в литературе сведений, но и экспериментальной проверки данных, реализованной в ходе многолетних научных исследований, проводимых на кафедре автоматизированных биб лиотечных систем и вычислительной техники Кемеровского государственного института культуры.

Материал книги рассчитан не столько на специалистов, получивших профессиональную подготовку в области информатики, средств автоматизации и программирования, сколько на лиц, имеющих гуманитарное образование и занятых в сфере библиотечно-информационной деятельности. Основываясь на результатах научных разработок и более чем десятилетнем опыте преподавания курса «Лингвистическое обеспечение автоматизированных библиотечных систем», автор адресует свою книгу библиотечным и информационным работникам - тем, от кого в первую очередь зависит качество комплектования документальных фондов, научной обработки литературы, эффективность справочно-библиографического и информационного обслуживания, обоснованность управленческих решений по оптимальной организации библиотечно информационной технологии.

Г л а в а 1. СТРУКТУРА И НАЗНАЧЕНИЕ ИНФОРМАЦИОННО-ПОИСКОВОГО ЯЗЫКА (ИПЯ) 1.1. ИПЯ КАК РАЗНОВИДНОСТЬ ИСКУССТВЕННЫХ ЯЗЫКОВ Языки, которые когда-либо использовались как средство общения в повседневной жизни человеческого общества, называются «естественными языками». Естественные - в том смысле, что они являются объективной реальностью, подобно биологическим видам или физическим компонентам материи. Можно изучать, описывать, анализировать естественные языки, но нельзя изменить их по своему произволу: естественные языки изменяются так же, как меняются биологические виды - путем эволюции.

Естественный язык - это звуковой язык, созданный тем или иным народом в ходе многовековой общественной практики, являющийся средством общения, обмена мыслями и взаимного понимания в человеческом обществе. Важнейшими функциями естественного языка, таким образом, являются: 1) средство человеческого мышления;

2) средство коммуникации.

Помимо естественных языков существуют искусственные языки, сконструированные, специально изобретенные людьми для специфических видов коммуникации, для решения определенных задач в области науки, техники, культуры. Например, музыкальная партитура - это искусственный язык, с помощью которого композитор или аранжировщик доводит свое сочинение до музыкантов;

исчисление предикатов - один из многих искусственных языков, изобретенных для использования в специальных разделах математики.

От обычного, естественного языка, возникшего стихийно и представляющего собой систему звуков и букв, такие искусственные языки отличаются тем, что они представляют собой систему знаков, все операции с которыми совершаются по формальным правилам.

Среди искусственных языков различают универсальные и специализированные Универсальные языки - это суррогаты (заменители) естественных языков, созданные для международного общения. К таким языкам относятся эсперанто, волапюк, идо, интерлингва, новиаль и некоторые другие. Наибольшую известность из них получил язык эсперанто, разработанный польским гуманистом доктором Л. Заменгофом, предложившим в 1887 г. свой проект международного языка. Сейчас на эсперанто выходит художественная и научная литература, издается свыше ста журналов, вещает восемнадцать радиостанций, в том числе и радио Москвы.

Специализированные искусственные языки - это особые знаковые системы для записи необходимой информации из определенных областей науки, техники, культуры. Среди них можно выделить такие языки, как азбука Морзе, язык музыкальной партитуры, средства стенографического письма, машинные языки, или языки программирования.

Последние представляют собой формальные языки, предназначенные для описания данных (информации) и алгоритмов (программ) их обработки на ЭВМ. Наибольшую известность из языков программирования получили ФОРТРАН, АЛГОЛ, КОБОЛ, БЭИСИК и целый ряд других.

К числу искусственных специализированных языков относятся информационно поисковые языки, созданные для поиска информации.

Информационно-поисковый язык (ИПЯ)-это искусственный язык, предназначенный для выражения содержания документов или запросов или описания фактов с целью последующего поиска. Таким образом, основное назначение любого ИПЯ - обеспечить поиск информации, документальной или фактографической.

ИПЯ является важнейшим элементом информационно-поисковых систем (ИПС) и зачастую используются в качестве главной характеристики системы, так как именно от качества ИПЯ зависит достижение наилучших показателей поиска, таких, как полнота и точность. Однако и документы, и факты, и запросы, поступающие в информационно поисковую систему, представлены с помощью естественного языка. Возникает вопрос:

какова необходимость использования в ИПС искусственного языка - ИПЯ? Почему нельзя воспользоваться для поиска информации естественным языком? Оказывается, что с точки зрения информационного поиска естественный язык обладает рядом недостатков, препятствующих отбору релевантных запросу сообщений (документов или фактов). К их числу относятся следующие:

1. Наличие в естественном языке слов, которые имеют небольшую смысловую нагрузку (союзы, предлоги, междометия), а также слов, которыми можно пренебречь при передаче содержания текста документа или запроса. Иными словами, речь идет об избыточности естественного языка, позволяющей сокращать объем какого-либо текста без значительного ущерба для его содержания.

Например, в сообщении Проблема повышения качества библиотечно-библиографического обслуживания является весьма актуальной, и решить ее можно только при широком использовании современных технических средств наиболее информативными, значимыми будут слова библиотечно-библиографическое обслуживание, качество, технические средства. Все мы учитываем это свойство естественного языка (избыточность), когда составляем текст телеграммы.

2. Наличие в естественном языке синонимов. С их помощью человек как бы расцвечивает свою речь, делает ее более выразительной, гибкой, достигает точности выражения мыслей, ее тончайших нюансов. Однако при проведении информационного поиска наличие синонимов снижает полноту выдачи информации по запросу. Так, вряд ли может быть достигнута приемлемая полнота выдачи, если человек, осуществляющий разыскание (библиотекарь-библиограф, информационный работник), не знает, что лазер и оптический квантовый генератор, шафран и крокус, авадекс и диаллат - это слова синонимы. Точно так же при неустраненной синонимии будет страдать качество выданной информации и в автоматизированной информационно-поисковой системе.

При обеспечении качественного информационного поиска особое значение имеет устранение лексической, логической и синтаксической синонимии.

Лексические синонимы - это, как правило, слова и словосочетания, выступающие в роли взаимозаменяемых элементов высказывания: динамо машины - электрогенераторы постоянного тока, перегной - гумус, токсины - яды. К. лексическим синонимам относятся также полное наименование предмета, процесса, свойства и его аббревиатура (сокращенное наименование): избирательное распространение информации - ИРИ, ракеты средней дальности - PCД.

Логические синонимы возникают при логическом определении понятий: Мнемозина - богиня памяти в греческой мифологии, мать девяти муз;

Ассюре - типографическая линейка, дающая оттиск в виде нескольких параллельных линий;

Семиотика - наука о знаках и знаковых системах.

Синтаксические синонимы представляют собой синонимичные синтаксические конструкции, отражающие возможность естественного языка выразить одну и ту же мысль различными речевыми оборотами, т. е. перефразировать: плавание под водой - подводное плавание, план на квартал - квартальный план, бумага для письма - писчая бумага С точки зрения создания ИПЯ, обеспечивающего высокое качество информационного поиска, важное значение имеет объединение слов-синонимов или синонимичных конструкций в синонимические ряды (классы условной эквивалентности).

3. Наличие в естественном языке полисемичных (многозначных) слов. Так, слово адрес может означать: а) местожительство определенного лица или местонахождение учреждения, предприятия и т. п.;

б) обозначение местожительства или местонахождения получателя на почтовом отправлении;

в) письменное приветствие, поздравление какому-либо лицу, учреждению по случаю юбилея;

г) код, определяющий местоположение информации в ЭВМ.

4. Наличие в естественном языке слов-омонимов, т. е. слов, которые звучат и пишутся одинаково, но по смыслу не имеют ничего общего, например: линь (вид рыбы) и линь (вид каната), бум (шумиха, искусственное оживление вокруг чего-либо) и бум (спортивный снаряд), рысь (млекопитающее рода кошек) и рысь (вид поступательного движения лошади).

Полисемичные слова отличаются от омонимов тем, что сохраняют некоторую общность значений у разных по смыслу слов, омонимы же такой общности значений не имеют. И если в естественном языке полисемия и омонимия - суть проявления его богатства и выразительной мощи, то при проведении информационного поиска они являются существенным тормозом. Неустраненные омонимия и полисемия не только затрудняют поиск информации, но и приводят к снижению качества выдаваемой информации, к так называемому «информационному шуму». Например, лишенные контекста слова гусеница, сыворотка, соединение, операция, заговор и т. п. трудно отнести к какой-либо тематической области поиска и, значит, гарантировать точность выдаваемой информации.

Таким образом, для проведения качественного отбора релевантных документов (фактов) в ответ на запрос были созданы специальные искусственные языки - ИПЯ, отвечающие специфическим требованиям, предъявляемым к ним информационно-поисковыми системами.

Перечислим их.

1. Однозначность: каждая запись на ИПЯ должна иметь только один смысл;

и, наоборот, любой смысл должен получать единообразное представление на ИПЯ.

Следовательно, ИПЯ должен устранять такие явления естественного языка, как полисемия, омонимия, синонимия.

2. Эксплицитное (явное) выражение полезных для поиска смысловых отношений между словами (логических отношений и психологических ассоциаций). Реализация этого требования делает ИПЯ своего рода справочником, схемой-путеводителем, позволяющим библиотекарю легко ориентироваться в конкретной отрасли знаний, устанавливать виды связей и взаимодействия между отдельными (отраслях) понятиями.

3. Возможность корректировки и пополнения ИПЯ, его «гостеприимство». Иначе говоря, ИПЯ должен быть гибким, обладать способностью включать новые понятия без коренной ломки принятой структуры.

4. Удобство пользования, предполагающее мнемоничность - удобство для запоминания записей на ИПЯ, а также компактность.

5. Семантическая сила ИПЯ (выразительность, селективная мощность), т. е. способность языка идентифицировать предмет, различать его мелкие особенности, а также описывать его с разной степенью детализации. Семантическая сила ИПЯ тем больше, чем богаче его словарный состав и шире его словообразовательные возможности, чем более четко дифференцированы смысловые отношения между его словами, чем более развита система синтаксических отношений между словами этого языка.

1.2. АЛФАВИТ И ЛЕКСИКА ИПЯ Основными структурными составляющими любого ИПЯ являются алфавит, лексика, грамматика, парадигматические и синтагматические отношения.

Алфавит ИПЯ может включать в свой состав буквы алфавита какого-либо естественного языка (латинского, кириллического и др.), арабские и римские цифры, знаки пунктуации (точка, запятая, двоеточие, кавычки, дефис, круглые и квадратные скобки, апостроф), знаки арифметических операций (плюс, минус, косая черта, знак процента), знаки отношений (больше, меньше, равно), операторы булевой алгебры (знаки конъюнкции, дизъюнкции, отрицания), специальные знаки и символы, например: стрелки, двойное двоеточие, квадрат, знак конгруэнтности и т. д.

Алфавит ИПЯ может быть представлен только цифрами, например УДК, Рубрикатор ГАСНТИ, или только буквами, базируясь на алфавите какого-либо естественного языка, например, язык предметных рубрик, дескрипторный язык, язык библиографических описаний и некоторые другие ИПЯ. Кроме того, алфавит ИПЯ может быть смешанным, буквенно-цифровым. На буквенно-цифровом алфавите основаны фасетная классификация, язык RX-кодов, СИНТОЛ, семантический код Перри - Кента и др.

Лексика, или словарный состав, ИПЯ - это совокупность всех лексических единиц, которыми он оперирует. Лексическая единица - это последовательность букв, цифр, специальных символов, принятая для обозначения какого-либо понятия. Таким образом, лексическая единица ИПЯ представляет собой единство плана содержания и плана выражения. В ней органически слиты две стороны - форма и значение.

Лексические единицы в каждом ИПЯ имеют разные названия: в дескрипторном языке - дескрипторы, в языке предметных рубрик (алфавитно-предметной классификации)- предметные рубрики, в фасетной классификации - изолаты, в УДК, ББК, рубрикаторах - индексы и соответствующие им словесные формулировки.

В таких ИПЯ, как язык унитерм, язык ключевых слов, язык предметных рубрик, дескрипторный ИПЯ, план выражения и план содержания лексической единицы будут совпадать, так как эти ИПЯ базируются на алфавите и лексике естественных языков. В ИПЯ классификационного типа, например УДК, ББК, Международной классификации изобретений и т. п., план выражения и план содержания не будут совпадать. Например, в УДК:

План выражения План содержания Земляника лесная 634. Анализ лексики любого ИПЯ можно осуществлять, используя три параметра: способ задания лексики, уровень интеграции лексики и способ построения лексических единиц.

В зависимости от способа задания различают ИПЯ с контролируемой и неконтролируемой лексикой. В ИПЯ с контролируемой лексикой все лексические единицы учитываются в специальном словаре. В качестве таких словарей выступают, например, таблицы классификации УДК и ББК, рубрикаторы, дескрипторные словари и тезаурусы, словари предметных рубрик и тому подобные пособия. В ИПЯ с неконтролируемой лексикой таких пособий нет. В них используется естественный язык, применение которого ограничено (формализовано) введением специальных правил.

Примером использования ИПЯ с неконтролируемой лексикой служат информационно поисковые системы, основанные на так называемом «бестезаурусном» вводе информации, например ИПЯ системы «Кристалл».

В отличие от естественного языка, в качестве лексической единицы ИПЯ может выступать не только отдельное слово, но и устойчивое словосочетание, а также фраза, предложение. В соответствии с этим различают уровни интеграции.

К первому уровню интеграции относятся ИПЯ, лексическими единицами которых являются преимущественно единичные слова и устойчивые словосочетания, например:

бетон, индикаторы, квантовая механика, каменный уголь. К числу ИПЯ, характеризующихся лексикой первого уровня интеграции, относятся языки типа «Унитерм», дескрипторные ИПЯ, фасетные классификации.

Вторым уровнем интеграции лексики характеризуются те ИПЯ, лексическими единицами в которых выступают не только отдельные слова и словосочетания, но и фразы, имеющие сложную синтаксическую структуру. На этом уровне находится лексика ИПЯ иерархических классификаций, таких, как УДК, ББК, Рубрикатор ГАСНТИ, Международная классификация изобретений (МКИ), и некоторых других. Например:

641.4 Консервирование продуктов в домашних условиях (УДК);

А 44 С 27/00 Изготовление ювелирных изделий (МК.И).

Появление лексических единиц второго уровня интеграции в иерархических классификациях обусловлено тем, что выражение «узких» понятий, стоящих на нижних ступенях иерархии, требует сложных синтаксических конструкций естественного языка. К аналогичным случаям приводит практика использования «узкой рубрики» при предметизации.

Построение лексических единиц ИПЯ может осуществляться двумя способами:

1) использованием в качестве лексических единиц специальных кодов, например в УДК, ББК, Рубрикаторе ГАСНТИ и др.;

2) использованием в качестве лексических единиц слов и словосочетаний естественного языка, например: язык типа «Унитерм», дескрипторные ИПЯ, язык библиографического описания, язык предметных рубрик.

В соответствии с этим различают словарные и кодированные ИПЯ. Словарные ИПЯ - это языки, в которых план содержания совпадает с планом выражения естественного языка. Поэтому для лексических единиц этого типа ИПЯ не требуется перевод на естественный язык. Таковы язык предметных рубрик и дескрипторный язык.

Кодированные ИПЯ - это языки, в которых план выражения не совпадает с планом содержания. В этих случаях создаются специальные двуязычные словари, позволяющие коды ИПЯ переводить на естественный язык и обратно. Примером таких языков служат ББК, УДК и другие классификации, рубрикаторы.

Термины - основа лексики ИПЯ. Независимо от способа контроля лексики, уровня ее интеграции и способа построения лексических единиц в основе лексики любого ИПЯ лежат термины, так как они являются основными носителями научно-технической информации в текстах документов и запросов. Термины представляют собой наиболее существенный «строительный материал», при помощи которого создается ИПЯ. Поэтому без знания закономерностей образования терминологии, источников ее формирования, структурных особенностей терминов невозможно разработать ни словарь предметных рубрик, ни классификатор, ни информационно-поисковый тезаурус, ни любой другой ИПЯ.

Знание механизмов появления и функционирования терминов в научно-технических текстах позволяет качественно улучшить подготовку поисковых образов документов и поисковых предписаний, совершенствуя тем самым процедуру индексирования.

Поскольку единой системы классификации терминов в настоящее время нет, воспользуемся различными основаниями деления, для того чтобы дать многоаспектную характеристику терминологии как основы лексики любого ИПЯ. Основными признаками, позволяющими охарактеризовать термины, являются: структурные типы терминов, грамматическая структура терминов, деление терминов в зависимости от семантических процессов, сферы употребления, источников формирования.

С т р у к т у р н ы е т и п ы т е р м и н о в. Все термины в зависимости от языковых средств выражения можно разделить на две группы: языковые и неязыковые.

Языковые термины включают в свой состав термины-слова, термины-словосочетания и термины-предложения.

Термины-слова подразделяются на непроизводные: газ, лак, информация;

производные:

газовый, лаковый, информационный;

сложные: газоносный, лако-красочный, информационно поисковый;

аббревиатуры: ДНК, МБА, ЭВМ.

Термины-словосочетания включают свободные словосочетания, в которых каждый из компонентов - термин и может вступать в двустороннюю связь: квантовая химия, физическая химия, квантовая биология, библиотечная система, библиотечная статистика;

несвободные словосочетания, в которых компоненты, взятые изолированно, могут быть и не терминами, и лишь в сочетании друг с другом они образуют термин: библиотечный почерк, авторский лист, белый стих, читальный зал, черный ящик;

термины фразеологизмы, т. е. устойчивые, неделимые словосочетания: роза ветров, роза волнений, кошачьи лапки (морские термины);

кошачье золото, кошачье серебро (геологические термины);

кармашек книги, ключ к систематическому каталогу, источник информации, информационный шум (библиотечно-информационные термины).

Термины-предложения чаще всего представляют собой военные, морские, спортивные команды, например: Весла за борт!;

Вперед смотреть!;

На плечо! и т. п.

Неязыковые термины представлены специальными знаками, графическими символами.

Главная особенность неязыковых средств выражения терминов заключается в их абсолютной условности, искусственности, сознательной закрепленности за понятием.

Широкое применение в этих целях нашли символы, используемые в составе сложных, специальных наименований - комбинированные символослова: V-образные соединения, Х образные соединения. В качестве неязыковых средств часто используются буквы греческого алфавита, например в терминологии физики элементарных частиц: a-частица, a-распад, b радиоактивность и т. п.

Грамматическая с т р ук т ур а терминов. Экспериментальные исследования терминологии показывают, что наиболее типичными моделями образования терминов являются следующие: прилагательное+существительное (библиотечные каталоги, 1) жаропрочные сплавы);

2) существительное+существительное (комплектование фондов, катушки индуктивности);

прилага-тельное+прилагательное-1-существительное 3) (интегральные информационные системы, дуговые пламенные лампы). Активное исполь зование в качестве терминов таких частей речи, как существительное и прилагательное, "объясняется тем, что именно они способны назвать, выразить понятие, в отличие от лексических единиц, которые лишь указывают на предмет, но не дают ему индивидуального имени: над, он, тот, эта и т. п.

Д е л е н и е т е р м и н о в в з а в и с и мо с т и от сем ан т и ч е с к и х п ро ц е с со в. Анализ показывает, что терминологии присущи те же семантические явления, что и общелитературной лексике: полисемия, омонимия, синонимия, антонимия.

О полисемии (многозначности) мы говорим тогда, когда один термин имеет два и более значений. Например, термин давление применяется как для обозначения процесса, так и силы, действующей на поверхность. Существует несколько причин появления полисемии терминов: а) ограниченность словарного состава по сравнению с количеством понятий;

б) сосуществование понятий, относящихся к одному явлению, но отражающему различные взгляды, гипотезы;

в) неправильное заимствование терминов из иностранных языков и др.

Омонимия в терминологии представлена одной своей разновидностью - межнаучной терминологической омонимией, когда за одинаковыми терминами закреплены разные дефиниции (определения). Эти термины функционируют в разных терминологических системах. Например, употребление термина реакция свойственно таким отраслям, как химия, физика, политика, термин операция используется в медицине и военном деле.

Разграничить полисемию и омонимию бывает сложно, особенно в тех случаях, когда в качестве слов-терминов используются слова общелитературного языка в переносном значении. Например, сухарь в технике - это «простая вспомогательная промежуточная деталь в механизмах и узлах машин», мода (в математике) - «наиболее часто встречающееся значение в варьирующем ряду» и т. д.

Синонимия. В терминологии синонимы соотносятся с одним и тем же понятием и объектом, поэтому их иногда называют терминологическими дублетами. Причинами и источниками возникновения синонимов в терминологии являются: а) параллельное упо требление отечественных и международных или заимствованных наименований:

экслибрискнижный знак, = избирательность - се-лективность;

б) параллельное употребление полного и краткого наименования объекта: многотомное издание=многотомник, коэффициент полезного действия = кпд;

в) параллельное употребление так называемых фамильных терминов и их вариантов, созданных на основе классификационного признака понятия: Джонсон-эффект= тепловой эффект, булева алгебра = алгебра логики;

г) двойное обозначение понятия в физике, химии и некоторых других науках, словесное и символическое: Н2SО4= серная кислота, 1=температура;

д) использование разных наименований объекта в зависимости от рассматриваемой точки зрения, сферы его функционирования. Например, в зависимости от сферы употребления один и тот же объект может иметь торговое, техническое и химическое название:

лавсан= терепласт= полиэтилентерефталат.

Характерно, что синонимия особенно присуща ранним этапам формирования терминологической системы, когда еще не произошел отбор лучшего термина из нескольких предложенных.

Антонимия в терминологии проявляется в наличии противоположных научных понятий. Для их выражения широко используются словообразовательные средства:

чередование приставок (релевантный - нерелевантный, обратимый - необратимый), использование приставок полярного значения (макродокумент - микродокумент, предкоординатный - посткоординатный).

В зависимости от с ф е р ы у п о т р е б л е н и я термины могут подразделяться на научные, технические, военные, юридические и пр. При этом в пределах каждой предметной области могут быть выделены специальные (базисные) термины, характерные только для данной сферы;

общенаучные термины, отражающие методы, процедуры, средства познания любой предметной области;

«привлеченные» термины смежных областей знания, обозначающие необходимые для данной предметной области понятия из смежных отраслей науки и техники. Все эти совокупности терминов находятся во взаимосвязи и не имеют четких границ.

И с т о ч н и к и ф о р м и р о в а н и я т е р м и н о л о г и ч е с к о й л е к с и к и представляют собой разные виды заимствований.

1. Заимствование элементов классических языков (корней или морфем греческого или латинского языков). Принятые в качестве международных, эти термины наиболее целесообразны. Их легче оградить от полисемии, так как большинство таких терминов однозначно выражают определенные значения: микро-, макро-, -граф-, поли-, -логия, анти-, супер-, -трон, -дром и т. п. Они не вызывают ложных ассоциаций, так как не мотивируют терминологические наименования, а расшифровывают именуемые понятия посредством значений составляющих их терминоэлементов, например: микрофильм, экслибрис, монография, этнография, лимнология и т. п.

2. Заимствования из других языков. Они являются неизбежными не только для терминологии, но и для языков вообще, так как ни один естественный язык не может развиваться изолированно. Например, для музыкальной терминологии характерны заимствования из итальянского языка (кантата, дуэт, тенор);

военной - из французского (батальон, атака, десант);

в терминологии техники и спорта немало английских слов (экскаватор, рельс, туннель, блюминг, финиш, рекорд, ринг, нокаут) и т.

п. Значительное количество терминов информатики также заимствовано из английского языка (компьютер, файл, дескриптор, релевантность).

3. Заимствование из литературного языка. Например: усталость - состояние металла, находящегося под многократным воздействием нагрузок;

общение с ЭВМ;

информационный шум и т. п.

1.3. ПАРАДИГМАТИЧЕСКИЕ И СИНТАГМАТИЧЕСКИЕ ОТНОШЕНИЯ В ИПЯ Между лексическими единицами любого ИПЯ, как и между словами естественного языка, существуют определенные отношения, которые обусловлены наличием логических связей между предметами и явлениями, обозначенными этими словами. Такие отношения отражают смысловую связь между понятиями, показывают объективные предметно логические зависимости между явлениями внешнего мира. Они носят внетекстовой характер и поэтому не зависят от ситуаций, для описания которых используются слова.

Например, слова акварель, фреска, темпера связаны друг с другом отношением соподчинения или координации, так как они обозначают понятия, входящие в более широкий класс - живопись. Между словами живопись и акварель, азот, аммиак, водород и газы существует отношение «род-вид», слова платье и рукав, здание и крыша связывает отношение «целое-часть», а между словами загрязнение окружающей среды и нарушение экологического равновесия существуют отношения причинно-следственного характера. Все эти примеры иллюстрируют парадигматические (аналитические, базисные, имманентные) отношения, обусловленные наличием не языковых, а логических связей между предметами и явлениями. Парадигматические отношения отражают, таким образом, логические отношения и психологические ассоциации между значениями лексических единиц ИПЯ.

Важнейшими свойствами парадигматических отношений являются:

внетекстовой характер обусловленность), независимость от 1) (внетекстовая контекста, т. е. независимость от ситуации, в которой лексические единицы употребляются. Так, слово карась неизменно вызывает представление о рыбе, а лексические единицы яблоки, апельсины всегда ассоциируются с понятием «фрукты»;

2) многоступенчатость, нелинейность парадигматических отношений: одна и та же лексическая единица может входить в состав различных парадигм, т. е. в различные смысловые ряды, в которых она противопоставляется по различным смысловым признакам. Например:

Река - ручей - речка (размеры водоема) Река - пролив - озеро - море (форма водоема) Река - канал - пруд - водохранилище (характер происхождения водоема).

Свойство многоступенчатости, нелинейности парадигматических отношений особенно заметно проявляется при разработке ИПЯ на этапе систематизации, упорядочения лексики, при построении классификационных схем понятий, когда возникает необходимость отнесения той или иной лексической единицы к различным смысловым рядам (парадигмам).

Принято различать сильные и слабые парадигматические отношения, связывая эти понятия с той ролью, которую эти отношения выполняют для реализации информацион ного поиска.

Сильные парадигматические отношения включают в свой состав отношения тождества и отношения иерархии.

Отношения тождества (совпадения, адекватности) как разновидность сильных парадигматических отношений выражаются в использовании синонимов. Учет отношений тождества, синонимии при проведении информационного поиска имеет принципиально важное значение: неустраненная синонимия, как уже отмечалось, ведет к ощутимым потерям при поиске, снижает полноту выдачи информации по запросу. Например, вряд ли будет обеспечена полнота ответа на запрос, если человек, ведущий поиск, не знает, что альтернаторы - это то же самое, что и генераторы электрические, а карболиты и фенопласты, метаболизм и обмен веществ - есть равнозначные понятия.

Отношения иерархии как разновидность сильных парадигматических отношений соответствуют отношениям подчинения или отношениям типа «выше-ниже». В пределах иерархических отношений различают отношения типа «род-вид» и «целое- часть».

Отношение «род-вид» является одним из важнейших видов связей между понятиями.

При этом родовым (подчиняющим) называется понятие, выражающее существенные признаки класса предметов, являющихся видами этого рода. Соответственно видовым (подчиненным) называется понятие, которое отображает существенные признаки класса предметов, являющегося видом какого-либо рода.

Связь видового и родового понятия отображает ту реальную связь, которая существует между родом и видом в природе и обществе. Например, понятия лошадь, корова, овца - видовые понятия, в которых выражены существенные признаки отдельных, качественно особенных, но взаимосвязанных форм животных, входящих в одно родовое понятие домашние животные.

Одно и то же понятие может быть (за исключением единичных понятий и предельно общих категорий типа материя, движение, пространство и т. п.) как видовым, так и родовым одновременно в зависимости от того, по отношению к какому понятию оно рассматривается. Например, понятие аннотация является видовым по отношению к понятию вторичные документы и родовым по отношению к понятию справочная аннотация.

Основным условием для установления иерархических отношений типа «род-вид»

является соблюдение требования: «Все, что можно сказать о роде, можно сказать о виде».

Родовое понятие при этом нельзя рассматривать как сумму более узких видовых понятий.

Нельзя сказать, например, что стали - это сумма таких понятий, как сталь высокопрочная, сталь легированная, сталь углеродистая и т. д. Несоблюдение этого условия часто приводит к смешению двух типов сильных парадигматических отношений:

«род-вид» и «целое-часть»1.

Отношение «целое-часть» отражает реальный факт вхождения одного объекта (понятия) в состав другого. При этом подчиняющее понятие соотносится с подчиненными в результате разложения целого на части.

В отличие от родо-видовых отношений при установлении связей типа «целое-часть»

не действует закономерность: «Все, что можно сказать о подчиняющем понятии, можно сказать о подчиненном понятии». Кроме того, понятия, выражающие части целого, не находятся между собой в отношении соподчинения, что является характерным признаком видовых понятий.

Значение для информационного поиска сильных парадигматических отношений иерархического характера («род - вид» и «целое -часть») вполне очевидно. Родо видовые 1 По поводу отнесения связи типа «целое - часть» к сильным парадигматическим отношениям в специальной литературе не существует единства. Зачастую этот вид связи рассматривается в рамках слабых, ассоциативных парадигматических отношений.

отношения, эксплицитно представленные в ИПЯ, позволяют существенно корректировать стратегию поиска по запросам в зависимости от результатов выдачи. В случае «нулевой»

или недостаточной выдачи информации по запросу привлечение родовых, вышестоящих терминов позволит расширить область поиска, повысив при этом полноту выдачи. Если же по результатам поиска выдана избыточная информация, корректировку поискового предписания можно осуществить на основе введения видовых, нижестоящих понятий, что дает возможность значительно сузить область поиска и повысить точность выдаваемой информации.

Точно так же может происходить корректировка стратегии поиска и с учетом парадигматических отношений типа «целое - часть», так как вполне вероятно, что для потребителя информации, интересующегося системой, механизмом, аппаратом, процессом в целом, может оказаться полезной информация и об их составных частях, элементах, деталях, операциях.

Слабые (ассоциативные) парадигматические отношения учитывают логические отношения пересечения понятий и различные психологические ассоциации.

Психологические ассоциации возникают в сознании человека, когда представление об одном предмете (процессе или явлении) вызывает у него представление о предметах (процессах, явлениях), связанных с первым по какому-либо существенному признаку.

Ассоциативные отношения в лексике связаны с понятием мотивированности. Они всегда характеризуют совместное участие соответствующих объектов в типичной для данной области ситуации или участие объектов в аналогичных ситуациях.

К разряду слабых парадигматических отношений принято (ассоциативных) причислять отношения причины - следствия, смежности, контраста, кратности.

Отношения типа «причина-следствие» характеризует такую ситуацию, при которой одно явление, действие (причина) вызывает, определяет, изменяет или влечет за собой другое явление - следствие. Это отношение связывает лексические единицы, обозна чающие соответственно причину и следствие: авария-травма, нарушение технологии - брак, шум - звукоизоляция.

Отношение контраста является результатом (противоположности) противопоставления предметов, процессов не по критерию их общности, а по критерию различия. Оно выражается в лексике ИПЯ с помощью антонимов, противоположных по значению слов: экспорт-импорт, полнота-потери, блокирование-деблокирование, контактное реле - бесконтактное реле.

Помимо антонимов отношения противоположности, контраста в лексике могут быть реализованы с помощью омонимов: ассоциация (психологическая) и ассоциация (объединение), заговор (политика) и заговор (фольклор).

Отношение смежности является отражением в сознании ассоциативной связи между предметами или явлениями, которые воспринимаются в непосредственной близости друг другу в пространстве и во времени: болото-торф, ток электрический - напряжение, пастбища - травы многолетние.

Отношение кратности - особый вид связи, существующей в категориях единиц измерения величин. Так, нельзя сказать, что километр есть понятие более широкое, чем метр, а сантиметр - более узкое, чем метр. Одно из них является основным, а другое - производным, т. е. кратным.

Рассмотренные нами как сильные, так и слабые парадигматические отношения имеют принципиально важное значение для правильного выбора и точного употребления всех лексических единиц, которые требуются для передачи какого-либо сообщения, в том числе и для подготовки поискового образа документа и поискового предписания. Без учета парадигматических отношений: невозможно правильно провести информационный поиск по запросу, осуществить качественное индексирование, аннотирование или: реферирование документа, подготовить обзор литературы. Решаю щее значение установление парадигматических отношений между лексическими единицами имеет при разработке ИПЯ. Для этого необходимо знание основных способов выявления парадигматических отношений.

Существующие способы установления парадигматических отношений можно условно разделить на две группы: логико-интуитивные и формализованные.

Логико - интуитивный способ установления парадигматических отношений направлен на выявление существенных смысловых связей между понятиями.

Достижению этой цели обычно служат следующие пути.

1. Анализ реальных научно-технических текстов как первичных, так и вторичных документов. Он позволяет вскрыть реальные типы смысловых отношений, характерных для данных текстов, заранее устранить искусственное и надуманное их конструирование в отрыве от самих текстов. При таком подходе парадигматические отношения, введенные в ИПЯ, будут соответствовать смысловым отношениям, существующим в текстах документов соответствующей отрасли знания.

2. Установление парадигматических отношений через обращение к энциклопедиям, терминологическим словарям, обобщающим справочникам в данной области. Этот путь основывается на анализе логического описания и определения терминов. В словарных статьях справочных изданий обычно четко указываются все подвиды объекта, его назначение, сфера применения, местонахождение, основные количественные характеристики и параметры.

3. Обращение к специалистам в данной отрасли знания, предполагающее корректировку намеченных ранее парадигматических отношений.

На практике обычно используются одновременно все три способа выявления парадигматических отношений.

Формализованный способ базируется на следующих средствах «опознания»

(различения) парадигматических отношений в тексте: лексических (использование глаголов, причастий, вводных слов, предлогов и т. п.);

пунктуационных (использование двоеточия, тире, скобок и т. п.);

использование схем, чертежей;

использование различий в шрифтах (курсив, разрядка).

Так, целям распознавания сильных (родо-видовых) парадигматических отношений служат такие лексические единицы, как разновидность, подразделяются на, различают, делят на, в виде, относится к классу и т. п. Например: «В комплексе лингвистического обеспечения ИПС принято различать классификационные и дескрипторные ИПЯ»;

«Натуральный каучук относится к классу природных полимеров»;

«Разновидностью вторичных документов являются рефераты».

Распознаванию сильных парадигматических отношений способствуют предлоги из, среди, с и вводные слова типа в частности, как правило, в первую очередь: «Среди информационно-поисковых систем можно выделить документальные и фактографические»;

«Из числа изделий платьевых можно назвать платье-костюм, платье пальто, платье-сарафан»;

«В первую очередь из однолетних бобовых трав надо указать на вику, донник, люпин».

Немаловажное значение для установления сильных парадигматических отношений имеют знаки пунктуации - двоеточие, тире: «Непрерывные носители информации:

магнитные ленты, магнитные диски, магнитные барабаны»;

«Основные лесоматериалы - бревна, доски, фанера».

Установлению парадигматических отношений типа «целое- часть» способствуют схемы и чертежи, наглядно представляющие составные части предмета, объекта.

Лексическими распознавателями для этого вида отношений могут служить словосочетания типа: состоящий из, изготовленный из, в состав входят, являются частью. Например: «Рубрикатор ГАСНТИ является частью лингвистического обеспечения системы»;

«В состав препарата «Каметон» входят хлоробутанолгидрат, камфара, ментол».

Распознаванию слабых парадигматических отношений типа «предмет - назначение»

служат следующие лексические средства: используется для, предназначен для, служит для, в целях. Например: «ИПЯ служит для индексирования документов и запросов»;

«Термокопировальный аппарат предназначен для тиражирования листового материала».

Использование формализованного способа позволяет снизить субъективизм при установлении смысловых связей между лексическими единицами сложных, насыщенных отраслевой терминологией научно-технических текстов. Его использование целесообразно сочетать с логико-интуитивным методом.

Помимо парадигматических отношений, связывающих слова любого языка по смыслу, в нем имеются также и линейные отношения, устанавливаемые непосредственно при объединении слов и словосочетаний во фразы (предложения). Такие отношения получили название синтагматических. В специальной литературе их называют также синтаксическими, грамматическими, ситуативными, контекстуальными.

Для понимания природы и назначения синтагматических отношений в ИПЯ принципиально важно то, что они устанавливаются при использовании лексических единиц. В отличие от парадигматических, синтагматические отношения проявляются лишь при употреблении лексических единиц и целиком зависят от контекста.

Следовательно, они всегда характеризуют момент реального взаимодействия лексических единиц. Применительно к ИПЯ употребление лексических единиц происходит при индексировании - построении ПОД или ПП. Именно на этом этапе приводятся в движение лексические единицы ИПЯ и используется его словарный состав.

Синтагматические отношения - это всегда отношения между лексическими единицами в линейно-упорядоченных цепочках. Как только мы приводим в действие механизм синтагматических отношений, всегда образуется лексическая единица более высокого уровня интеграции: от слова - к словосочетанию, от простой предметной рубрики - к сложной, от простого индекса классификации - к составному и т. п.

Известно, что парадигматические отношения, характеризуя смысловые, семантические связи между понятиями, носят постоянный характер, например: Сосна - это разновидность хвойных деревьев;

Кроссовки - вид обуви и т. д. В то же время одни и те же лексические единицы могут образовывать различные выражения и передавать совершенно различные (а то и прямо противоположные) значения, например:

производство нефти и очистка бензина и производство бензина и очистка нефти;

политика силы и сила политики, перестройка пропаганды и пропаганда перестройки.

Таким образом, не имеющее ограничений словоупотребление, «вышедшая из под контроля» лексика может привести к появлению ложных словосочетаний и выражений с искаженным смыслом. В результате лексические единицы в ПОДе могут вступать в ложные словосочетания. При выдаче информации в ответ на запрос это оборачивается «информационным шумом», нерелевантными документами.

Для того чтобы избежать подобных негативных явлений и повысить точность информационного поиска, в ИПЯ предусмотрено использование специальных грамматических средств являющихся способом выражения (грамматики), синтагматических отношений.

Грамматика ИПЯ - это конкретный набор средств и правил построения поисковых образов на данном ИПЯ. В пределах грамматики одного ИПЯ могут быть использованы различные грамматические средства.

1. Мешочная грамматика. Это простое перечисление лексических единиц, входящих в один ПОД или ПП. В этом случае сам факт присутствия данного набора лексических единиц свидетельствует о существовании текстуальной связи между ними, и эта «связь может быть более или менее однозначно выявлена, исходя из значения перечисленных лексических единиц. Мешочная грамматика часто используется в отраслевых или узкотематических ИПС дескрипторного типа технической тематики. Языки, применяющие мешочную грамматику, иногда называют также «ИПЯ без грамматики», понимая под этим минимальность используемых грамматических средств. В иерархических библиотечно-библиографических классификациях используется знак «плюс» для соединения понятий, сошедшихся в одном тексте (документа или запроса).

Характер отношений при этом не фиксируется. Знак «плюс» фактически выполняет роль оператора мешочной грамматики, поскольку показывает совместное вхождение лексических единиц в один поисковый образ без указания их смысловых отношений друг к другу.

Примером ИПЯ, реализующих мешочную грамматику, являются языки типа «Унитерм», разрабатываемые для узкоотраслевых и тематических ИПС, обслуживающих небольшие специализированные массивы объемом до 30 тыс. документов.

Приведем пример реализации мешочной грамматики, когда простое перечисление слов, извлеченных из текста документа, дает представление о нем и образует его поисковый образ:

техника безопасности, травматизм, литейное производство.

Важно подчеркнуть, что порядок следования лексических единиц в ПОДе или ПП при использовании мешочной грамматики не имеет никакого значения и носит произвольный характер.

2. Позиционная грамматика. Это установление жесткого порядка следования лексических единиц, входящих в один поисковый образ. В ИПЯ классификационного типа (УДК, ББК) позиционная грамматика проявляется в правилах построения сложного индекса, согласно которому на первое место всегда ставится индекс, взятый из основных таблиц классификации, а затем индекс, содержащийся во вспомогательных таблицах.

К разновидностям позиционной грамматики следует отнести анкетный (аспектный, формулярный, матричный) способ составления поисковых образов и метод «стандартных фраз». Смысл первого способа можно охарактеризовать следующим образом. При создании ПОД или ПП вводится единая фиксированная схема (анкета, формуляр, матрица) упорядочения лексических единиц, определяющая порядок их записи. В этом случае перевод слов на ИПЯ, т. е. индексирование сводится к размещению в необходимые зоны соответствующих лексических единиц. Если какие-либо сведения в документе или запросе отсутствуют, то в соответствующей позиции ставится прочерк. Иными словами, индексирование на основе этого способа сводится к заполнению позиций анкеты, матрицы, формуляра и т. п.

Такой способ составления поисковых образов определяется однотипной структурой текстов, подлежащих индексированию. Например, для унификации и индексирования научно-технических текстов наиболее часто используется следующая схема анализа:

1. Предмет или тема исследования.

2. Область применения или использования предмета.

3. Метод исследования.

4. Условия, в которых протекало исследование.

5. Технические средства или оборудование, применявшиеся в ходе исследования.

6. Результаты исследования.

Преимуществами рассмотренного способа являются компактность записи, удобство сопоставления выражений на ИПЯ при Поиске, снижение субъективизма индексатора.

Однако при большом разнообразии информации, заключенной в текстах, данный способ теряет свои преимущества, так как многие позиции анкеты остаются незаполненными (они либо не имеют смысла для данного объекта, либо вообще отсутствуют). Данный способ может оказаться неудобным, если анкета будет слишком громоздкой.

Метод «стандартных фраз». «Стандартная фраза»- это многоместный предикат2, характеризующий определенную ситуацию. Обычно «стандартная фраза» представляет собой простое предложение с типовой структурой. Например, язык «стандартных фраз»

для поиска информации в области синтетической органической химии включает в свой состав фразу: Химическое вещество со структурой X находится в состоянии Y.

Схема или анкета (матрица, формуляр), «стандартная фраза», используемые при индексировании, позволяют унифицировать форму описания документа или запроса, обеспечивая единообразный подход различных.исполнителей к процессу составления поисковых образов, способствуют повышению качества и воспроизводимости 2 Предикат - это логическое сказуемое, то, что высказывается, утверждается или отрицается в суждении об объекте. Предикат отображает наличие или отсутствие того или иного признака у предмета (постоянства) индексирования.

3. Указатели связи. Это - символы, буквы или цифры, которые присоединяются к двум или более лексическим единицам ИПЯ с целью наглядного выражения существующей между ними логической связи.

Применение указателей связи наиболее характерно для дескрипторных ИПЯ, имеющих, как известно, лексику первого уровня интеграции, т. е. состоящую из отдельных слов и словосочетаний. Применение указателей связи вызвано тем обстоятельством, что отдельные слова и словосочетания (дескрипторы, унитермы, ключевые слова) могут образовывать не одно, а два или несколько осмысленных понятий, но при этом лишь одно из них будет соответствовать целям информационного поиска.

Например, в ИПС-70 на запрос Товарные знаки был выдан документ Внедрение прогрессивной технологии в производство мебели. Выдача нерелевантной информации произошла потому, что в тексте реферата документа содержалась фраза: «...улучшает их качество и товарный вид. Продукции присвоен знак качества». Совпадение лексических единиц запроса товарный и знак с аналогичными словами текста документа в условиях автоматизированной ИПС привело к «шумовой» выдаче. Для устранения таких ситуаций как раз и используются указатели связи. Возьмем в качестве указателей связи буквенные обозначения: а - для одной пары текстуально связанных лексических единиц и б - для другой пары. В этом случае можно получить в соответствии со смыслом и задачами информационного поиска попарно объединенные лексические единицы:

1) знак (а), товарный (а) 2) знак (б), качество (б) Указатели связи обычно применяют в ИПЯ, обладающем лексикой первого уровня интеграции, в двух случаях:

когда ложное логическое произведение образуют лексические единицы, 1) описывающие две разные темы или предметы одного документа;

когда ложное логическое произведение образуют лексические единицы, 2) описывающие одну тему или предмет документа.

4. Указатели роли. Это - символы, буквы или цифры, которые присоединяются к двум или более лексическим единицам и служат для обозначения логической роли (функции), выполняемой этой лексической единицей в поисковом образе.

Если указатели связи лишь фиксируют наличие связи между лексическими единицами ИПЯ, то указатели роли характеризуют эту связь. Указатели роли поясняют смысловую функцию лексической единицы в поисковом образе и задаются списком. Чаще всего эти списки представляют собой перечни логических категорий, которыми оперирует та или иная область знаний. Например, в дескрипторном ИПЯ отраслевой АСНТИ «Союзсельхозтехника» используются следующие указатели роли:

Р1 Основной объект рассмотрения Р2 Область, сфера, место применения РЗ Метод, способ, средство решения Р4 Отличительная часть, элемент, составляющая машины, сооружения, вещества и т. п.

Указатели роли используются для описания ситуаций, характерных для определенных тематических областей с ярко выраженной логической структурой. Следовательно, и число, и содержание их будут различными, определяясь особенностями отрасли знания, для которой создается данный ИПЯ.

Указатели роли уменьшают объем понятия, обозначаемого лексической единицей, что равносильно увеличению мощности массива смысловыражающих единиц ИПЯ, повышению избирательности языка и точности поиска. Хотя основной сферой применения указателей роли являются дескрипторные ИПЯ, тем не менее и в ИПЯ классификационного типа имеются аналогичные грамматические средства. Так, функцию указателей роли выполняют в УДК общие и специальные определители, в таблицах ББК - индексы территориальных типовых делений, общих типовых делений, специальных типовых делений. В алфавитно-предметной классификации целям уменьшения объема понятия, выражаемого предметной рубрикой, служат тематические (общие, типовые и специфические), географические, хронологические подзаголовки, а также подзаголовки назначения и формы.

В отношении указателей роли и связи следует подчеркнуть, что несмотря на то, что они предназначены для повышения точности информационного поиска, их применение может сопровождаться снижением полноты результатов поиска. Так, использование указателей связи позволяет повысить точность поиска информации до 10 %, а совместное использование указателей роли и указателей связи - на 15-17%, но при этом уменьшается полнота поиска. Это происходит из-за того, что индексаторы по-разному определяют функции лексических единиц в одном и том же тексте и соответственно могут присоединять к одинаковым лексическим единицам различные указатели роли.

ИПЯ, использующие указатели роли и связи, позволяют описывать тексты документов и запросов с большой точностью. Однако языки, обладающие этими грамматическими средствами, чрезвычайно сложны в эксплуатации, требуют утонченных процессов перевода и поиска, уступая по удобству и простоте использования более простым ИПЯ.

5. Грамматика логических операторов основана на использовании трех логических связок И, ИЛИ, НЕ, позволяющих осуществлять логическое умножение, сложение и вычитание лексических единиц, т. е. осуществлять операции алгебры логики (булевой алгебры). Оператор И означает операцию логического умножения - конъюнкцию;

оператор ИЛИ служит для обозначения логической суммы - дизъюнкции;

оператор НЕ позволяет осуществлять логическое вычитание (отрицание). Операторы имеют свои обозначения: И - /\, ИЛИ - \/, НЕ -. Они отражают логические связи между лексическими единицами в запросе, например: Антикоррозийная защита /\ Подземный газопровод. Наземный.

Логические операторы И, ИЛИ, НЕ служат для уточнения объемов понятий, выражаемых лексическими единицами. Они используются, как правило, только при составлении поисковых предписаний и определяют стратегию поиска. С формальной точки зрения логические операции И, ИЛИ, НЕ являются грамматическим средством, но фактически их функция близка функции, выполняемой критерием смыслового соответствия. Кроме того, логические связки И, ИЛИ, НЕ часто служат для образования новых понятий, выраженных сочетанием лексических единиц, что сближает их функционально с указателями роли и указателями связи.

1.4. СОЗДАНИЕ ЛЕКСИКО-СЕМАНТИЧЕСКОИ ОСНОВЫ ИПЯ Разработка любого ИПЯ, создание его лексико-семантической основы включает следующие основные этапы:

1. Отбор лексических единиц.

2. Нормализация лексики.

3. Систематизация и группировка лексических единиц.

4. Построение классификационных схем понятий.

5. Организационное оформление лексики ИПЯ.

Отбор лексических единиц - важнейший этап в создании любого ИПЯ, поскольку именно лексические единицы являются теми тем «атомами», «кирпичиками», «строительным материалом», из которого строится любой язык. Именно от качества выполнения этого этапа во многом зависят смыслоразличительные возможности ИПЯ, его семантическая сила. Этому этапу обязательно предшествует изучение структуры той отрасли науки или техники, искусства, по которой создается ИПЯ. Вот почему в состав разработчиков ИПЯ обычно входят не только информационные работники, библиотекари, библиографы, лингвисты, но и специалисты-отраслевики.

Занимаясь разработкой того или иного ИПЯ, его создатели отбирают в состав лексики не любые слова вообще, а «ключевые слова», т. е. слова, несущие в тексте наибольшую смысловую нагрузку. Поэтому при дальнейшей характеристике этого этапа работы будем считать условно синонимичными понятия «лексическая единица» и «ключевое слово».

Это допущение необходимо для уяснения сути технологических операций, выполняемых на данном этапе.

Ключевое слово - это полнозначное слово или словосочетание, являющееся носителем существенной в данном тексте (документе или запросе) информации с точки зрения информационного поиска.

К разряду ключевых слов следует отнести в первую очередь термины, важнейшими свойствами которых, как известно, является номинативность (способность называть предмет), однозначность, точность, отсутствие экспрессии.

Для каждой предметной области можно выделить три группы терминов:

1. Специальные термины, употребляемые только в данной отрасли знания, являющиеся как бы ее опознавательными знаками, символами. Например, по употреблению в речи или тексте такой группы терминов, как диагноз, гастрит, анестезия, переливание крови или залегание пласта, антрацит, угольный карьер, проходка, метаноопасность, мы всегда безошибочно укажем соответствующую отрасль знания.

2. Термины смежных отраслей знания, «привлеченные» термины, обозначающие необходимые для данной предметной области понятия из смежных отраслей науки и техники. Они отражают важнейшую закономерность развития современной науки: инте грацию, взаимопроникновение научных идей. Так, в медицинской терминологии обязательно используются биологические, химические термины;

терминология горного дела активно привлекает лексику геологии, кристаллографии.

5. Общенаучные термины, бытующие в любой отрасли знания, например: метод, анализ, оборудование, дефект, исследование, объект и т. п.

Разработчикам ИПЯ приходится всякий раз решать, к какой группе терминов относится то или иное слово, насколько целесообразно его включение в состав лексики ИПЯ, так как пропуск лексических единиц влечет за собой неизбежные потери информа ции при поиске, а излишнее расширение словарного состава делает его громоздким, неудобным, затрудняет поиск.

Очевидно, что в первую очередь в состав лексики разрабатываемого ИПЯ должны включаться термины первой группы. Именно они являются ключевыми. Отсутствие же формальных критериев значимости или незначимости терминов второй и третьей групп для конкретного ИПЯ существенно осложняет этап их отбора.

Связав понятие «лексическая единица» с понятиями «ключевое слово» и «термин», целесообразно указать категории неключевых слов, т. е. слов, которыми можно пренебречь в условиях создания лексико-семантической основы ИПЯ. К ним относятся служебные слова (частицы, предлоги, союзы, междометия);

часто употребляемые общенаучные термины типа проблема, актуальность, значение и т. п.;

термины, не относящиеся к понятийному аппарату того раздела науки или техники, для которого создается конкретный ИПЯ. Например, для ИПЯ по библиотековедению вряд ли имеет смысл включать в состав лексики термины электродвигатель, плазма и т. п.

Итак, отнесение конкретного термина к разряду ключевых слов зависит от прагматических соображений, определяемых тематическим охватом создаваемого ИПЯ, а также возможностями возникновения запроса, содержащего данное слово или словосочетание.

В качестве основных источников отбора лексических единиц можно назвать следующие: 1) уже существующие, т. е. ранее разработанные ИПЯ, располагающие фиксированным словарем: таблицы УДК, ББК, списки предметных рубрик, классификаторы, тезаурусы и т. п.;

2) терминологические словари, справочники, ГОСТы, словари толковые, энциклопедические и аналогичные нормативно-справочные издания;

3) массив документов по тематике создаваемого ИПЯ с хронологическим охватом в 5-б лет (именно за этот период происходит обновление терминологии), объемом 3-4 тыс. документов. Такой объем позволяет получить представительный массив лексики, достаточно полно характеризующий ту отрасль знания, по которой создается ИПЯ;

4) массив запросов, полученных от потребителей информации, содержащий, как правило, наиболее новые термины. Обычно при разработке ИПЯ все эти источники отбора лексики используются одновременно, в комплексе.

Отобранные в результате анализа лексические единицы образуют словник ключевых слов - исходный терминологический массив. Важнейшее требование к полученному словнику - полнота охвата лексических единиц, так как основное назначение лексиче ских единиц ИПЯ - служить средством образования ПОД или ПП и, в конечном итоге, средством поиска информации.

Нормализация лексики. После того, как лексические единицы (ключевые слова, термины) отобраны, возникает задача их единообразной записи, нормализации. Строго говоря, проблема нормализации решается одновременно с отбором лексических единиц, однако для удобства рассмотрения целесообразно нормализацию лексики охарактеризовать как самостоятельный этап создания лексико-семантической основы ИПЯ.

Нормализация лексики реализуется посредством двух операций: 1) представлением ключевых слов в единообразной грамматической форме (морфологический уровень нормализации лексики);

2) устранением синонимии и полисемии (семантический уровень).

Представление ключевых слов в единообразной грамматической форме, в свою очередь, складывается из следующих основных процедур:

Установление унифицированной формы записи лексических единиц (род, число, падеж). Как правило, исчисляемые существительные рекомендуется записывать в именительном падеже множественного числа, неисчисляемые - в именительном падеже единственного числа: датчики, радиодетали, документы, но информация, реле, резонанс.

Прилагательные и причастия записываются в именительном падеже множественного числа: лабораторные, информационные, предшествующие. Следует отметить, что эти правила вариативны и для различных ИПС могут быть изменены;

Решения вопроса о формулировке ключевого слова: запись в виде отдельного слова (унитерм) или словосочетания? В первом случае это будут отдельные слова:

автоматизированные, информационные, поисковые системы. Во втором - развернутые словосочетания: автоматизированные информационно-поисковые системы, травы однолетние злаковые.

Ориентация на отдельные слова (унитермы) позволяет достигать значительной глубины и детальности индексирования, дает возможность свободно манипулировать элементами поисковых образов. Однако при этом требуется разработка сложной системы грамматических средств для предотвращения информационного шума. Кроме того, механическое разделение многословных терминов, соответствующих определенным научно-техническим понятиям, неизбежно приводит к потерям при поиске информации, снижению точности выдачи.

На практике в качестве единой лексической единицы обычно используются устойчивые словосочетания, выражающие целостные (неделимые) понятия. Однако критериев, позволяющих четко и однозначно отделять устойчивые словосочетания от неустойчивых, в настоящее время не существует, а имеющиеся рекомендации носят неформализованный характер. Чаще всего решение о сохранении словосочетания как отдельной лексической единицы принимается на основании статистических данных (наблюдений о частоте встречаемости словосочетания в анализируемом массиве текстов) либо при условии, что в данном ИПЯ очень мала вероятность использования компонентов словосочетания по отдельности.

В том случае, если в разрабатываемом ИПЯ решено использовать в качестве лексических единиц не только отдельные слова, но и словосочетания, возникает необходимость определения порядка записи слов в словосочетании. Применительно к словосочетаниям, состоящим из прилагательного(ных) и существительного(ных) возникает дилемма: прямой (библиотечные фонды, оптические фильтры) или инвертированный (фонды библиотечные, фильтры оптические) порядок записи следует использовать. На этот счет также отсутствуют убедительные и достаточно формализованные критерии, носящие универсальный характер. Решение по этому вопросу принимается индивидуально в каждом конкретном случае разработчиками ИПЯ.

Для обеспечения экономичности и единообразия формулировок лексических единиц существуют рекомендации о целесообразности инвертированной формы записи, обеспечивающей выдвижение на первое место в словосочетании существительного (каталоги алфавитные, реакции химические). Однако абсолютизировать принцип инверсии нельзя, так как зачастую его использование влечет за собой образование лексических единиц, первое слово которых не выполняет эвристической функции, либо разрушает общепринятый термин.

Устранение полисемии и омонимии на этапе нормализации лексики достигается двумя способами. Первый, наиболее простой способ заключается в развертывании многозначного слова до словосочетания. Например, сети: сети рыбацкие, сети библиотечные;

лист: лист бумажный, лист растения.

Второй способ, именуемый лексикографическим, связан с использованием специальных ограничительных или пояснительных помет. Для устранения полисемии и омонимии могут использоваться следующие типы пояснений, помещаемых в скобках рядом с многозначным словом:

пояснение с помощью синонима: прямой ветвь - (непосредственный), (ответвление);

Отнесение слова к соответствующей отрасли знания: ребро (геометрия), ребро (авиация), ребро (анатомия);

Отнесение слова к соответствующей категории: емкость (предмет), емкость (характеристика), смазка (процесс), смазка (материал);

Указание на соответствующее слову родовое понятие: танк (резервуар), танк (вооружение);

Указание на соответствующие объекты действия: обработка (пищевых продуктов), обработка (информации).

Систематизация лексики. На этом этапе необходимо все отобранные и записанные в стандартной форме лексические единицы систематизировать, упорядочить, установить между ними смысловые связи, образовать классы близких по значению слов. В силу избыточности естественного языка в составе полученного словника ключевых слов неизбежно будут иметь место слова, находящиеся в отношениях эквивалентности, смысловой близости. Поэтому важнейшей задачей этапа систематизации лексики является установление парадигматических отношений между отобранными лексическими единицами и построение классов условной эквивалентности.

Класс условной эквивалентности - это совокупность лексических единиц, которые считаются условно синонимичными в данной области знания и используются в данном ИПЯ как равнозначные с точки зрения поиска информации. Между лексическими едини цами, входящими в один класс условной эквивалентности, могут существовать следующие отношения: 1) равнозначности, тождества, выражаемые синонимами;

2) пересечения - частичного совпадения объемов понятий, т. е. отношения, связывающего слова, между которыми существует ассоциативная связь, семантическое родство;

3) подчинения, т. е. отношения типа «род-вид», «целое- часть», «выше-ниже».

Построение классификационных схем понятий. Классификационная схема понятия - это графическое средство фиксирования парадигматических связей между понятиями. Ее основное назначение - обозначение границы того или иного понятия, определение объема, содержания и структуры понятия, установление его связей с другими понятиями. Разработка классификационной схемы включает: выделение наиболее существенных признаков понятия в качестве основания деления;

построение частных схем, отражающих взаимосвязь понятий и использующих выделенные признаки. В соответствии с правилами формальной логики деление объема понятий, осуществляемое при построении классификационной схемы, должно быть обоснованным, взаимоисключающим, адекватным по объему, непрерывным.

Классификационные схемы понятий позволяют учитывать действительные связи, существующие между понятиями, получать строго упорядоченную систему понятий, наглядно представлять смысловые отношения, объединяющие лексические единицы ИПЯ.

Организационное оформление лексики ИПЯ. Организационное оформление лексики - это ее графическое, знаковое воплощение, которое целиком зависит от типа разрабатываемого ИПЯ. В зависимости от типа создаваемого ИПЯ, его функционального назначения, нормализованные и систематизированные лексические единицы будут преобразованы либо в предметные рубрики, либо в дескрипторы, либо в индексы классификации и т. д. Например, лексико-семантическая основа ИПЯ может быть организационно представлена в виде таблиц классификации (УДК, ББК, МКИ, Единая схема классификации литературы для книгоиздания в СССР и др.), рубрикаторов (Рубрикатор ГАСНТИ, Рубрикатор МСНТИ), классификаторов (Общесоюзный классификатор профессий рабочих и должностей служащих, Общесоюзный классификатор отраслей народного хозяйства), словарей предметных рубрик, информационно-поисковых тезаурусов и ряда других пособий, образующих комплекс лингвистических средств ИПС.

Итак, в составе любого ИПЯ можно выделить логико-лингвистические универсалии, к которым относятся алфавит, лексика, парадигматические и синтагматические отношения. В совокупности все эти элементы составляют своего рода универсальную модель ИПЯ, с помощью которой можно проводить анализ как уже существующих языков, так и языков, специально конструируемых для той или иной библиотечно информационной системы.

Знание структуры ИПЯ позволяет рационально организовать технологию разработки новых языков, проводить сопоставительный анализ семантической силы уже существующих ИПЯ, осуществлять обоснованный выбор ИПЯ для решения определенного круга задач в соответствии с выполняемыми ИПЯ функциями.

Глава 2. ОСНОВНЫЕ ТИПЫ ИПЯ Принадлежность ИПЯ к той или иной группе или типу языков составляет одну из его важнейших характеристик. Типология - это научный метод, основа которого - расчленение системы объектов и их группировка с помощью обобщенной модели или типа. Она используется в целях сравнительного изучения существенных признаков, связей, функций, отношений, уровней организации объектов. Следовательно, отнесение того или иного ИПЯ к определенному типу позволит определить его наиболее существенные свойства, вскрыть преимущества и ограничения в сфере употребления.

Наряду с систематикой и таксономией к числу основных логических форм типологии относится классификация.

В настоящее время в специальной литературе нет единой классификации ИПЯ.

Представление о сложившихся подходах к выделению различных типов ИПЯ можно получить, обратившись к публикациям , содержащим попытки их упорядочения, типизации по различным признакам. Именно множество признаков, которыми обладает ИПЯ, породило многообразие классификаций.

Для того чтобы дать характеристику основных типов ИПЯ, примем в качестве обязательного утверждение, что требование отнесения какого-либо языка к тому или иному типу не должно выполняться целиком для всех без исключения явлений данного языка, т. е. «нет правил без исключения». Таким образом, в дальнейшем рассмотрении будем ориентироваться не на то, каков язык весь, а на то, что для него наиболее характерно.

Известным способом типизации ИПЯ является разделение их на посткоординированные и предкоординированные, причем сразу следует подчеркнуть, что в чистом виде эти два типа языков практически не существуют, и речь может идти лишь о преобладании характерных черт в том или ином информационно-поисковом языке.

В том случае, если словарный состав ИПЯ состоит преимущественно из изолированных слов и словосочетаний, которые объединяются между собой (координируются) только в процессе индексирования, то такой ИПЯ следует отнести к типу посткоординатных, или координатных, языков. Для уяснения сути этого типа языков принципиально важным является понимание метода координатного индексирования как способа описания смысла документа с помощью выявленных в его тексте наиболее значимых, или ключевых, слов. Типичным примером языков посткоординатного типа являются язык системы «Унитерм», дескрипторный ИПЯ.

Отличительная особенность языков предкоординатного типа заключается в том, что в их словарь входят не только отдельные слова и словосочетания, но и, преимущественно, развернутые словосочетания и целые фразы. В таких словосочетаниях и фразах слова оказываются связанными (координированными) между собой еще до индексирования, т.

е. координированными предварительно Такими ИПЯ (предкоординированными).

являются, например, УДК, ББК. В основе предкоординатного индексирования лежит принцип выявления тематики всего документа (запроса, факта) в целом и сравнения этой выявленной тематики с заранее заготовленным (предкоординированным) списком лексических единиц ИПЯ, из которых надо выбрать наиболее подходящие по смыслу.

Предкоординированные ИПЯ обслуживают целый комплекс поисковых задач. При любой поисковой задаче, когда из данной совокупности объектов нужно выбрать объекты с определенными свойствами, возникает вопрос: как ускорить процедуру поиска, как сократить перебор? Одно из самых простых решений, которым человечество пользуется с незапамятных времен,- разбить все объекты из данной совокупности на группы таким образом, чтобы в одной группе оказались объекты с одинаковыми свойствами. Иными словами, речь идет о классификации.

Классификация - это распределение предметов какого-либо рода на взаимосвязанные классы согласно наиболее существенным признакам, присущим предметам данного рода и отличающим их от предметов других родов, при этом каждый класс занимает в получившейся системе определенное постоянное место и, в свою очередь, делится на подклассы. Класс - это совокупность объектов, имеющих один или несколько общих характеристических признаков. Отличительный, характерный признак, по которому.производится деление предметов на классы, называется основанием деления.

Одним из древнейших предкоординированных ИПЯ, используемых в библиотечно библиографической практике, являются классификационные языки, или библиотечно библиографические классификации. Наиболее широкое применение среди них получили иерархические классификации.

2.1. ИЕРАРХИЧЕСКИЕ КЛАССИФИКАЦИИ КАК ИПЯ: ПРИНЦИПЫ ПОСТРОЕНИЯ, СТРУКТУРА Иерархические классификации - это классификации, между подразделениями которых существуют только два отношения: иерархии и соподчинения. Иерархия - это отношение, при котором один класс является подклассом другого, более широкого класса. Соподчинение - это отношение, которое связывает классы, являющиеся подклассами одного более широкого класса, т. е. отношения между подклассами одного и того же класса.

Иерархическая классификационная система строится по следующему принципу:

исходное множество объектов классификации делится в соответствии с выбранным основанием деления на крупные группировки - классы. Затем каждый класс разбивается на ряд последующих группировок - подклассов, которые, в свою очередь, распадаются на более мелкие, постепенно конкретизируя объект или его свойства.

В результате классификационные группировки образуют многоуровневую ветвящуюся систему, обычно изображаемую в виде древовидного графа, блока-схемы или таблицы. Вершины этого соответствуют классификационным «дерева»

группировкам, а на «ветвях» расположены классификационные деления, находящиеся в иерархическом подчинении - так называемая классификационная ветвь.

Основными характеристиками иерархических классификаций как ИПЯ являются количество ступеней классификации (уровней), глубина и емкость.

Количество ступеней (уровней) определяет глубину системы классификации, которая устанавливается в зависимости от необходимого для решения задач числа признаков, применяемых при классификационном делении и характеризующих свойства классифицируемых объектов, а также от необходимой степени конкретизации группировок.

В различных ИПЯ глубина иерархии измеряется по-разному. В УДК она равна десяти, в Рубрикаторе ГАСНТИ - трем уровням классификационного деления. Емкость иерархической классификации - это также один из важнейших показателей семантической силы ИПЯ, характеризующий мощность его словарного состава: в УДК, например, общее число индексов, т. е. лексических единиц, достигает 250 тыс., не считая определителей, а в Рубрикаторе ГАСНТИ тот же параметр измеряется 6118 индексами, т.

е. емкость этого ИПЯ весьма незначительна.

Алфавит иерархических классификаций по своему составу может быть либо цифровым, либо смешанным, включающим как цифры, так и буквы. В обоих случаях в состав алфавита могут входить знаки пунктуации (точка, дефис, апостроф, двоеточие, запятая, косая черта, скобки), специальные знаки и символы (знак стрелки, квадрата). В группу ИПЯ с цифровым алфавитом входят УДК, рубрикаторы, классификаторы.

К ИПЯ со смешанным алфавитом, включающим буквы и цифры, относятся ББК (за исключением варианта таблиц для массовых, а также детских и школьных библиотек) и Международная классификация изобретений (МКИ). В таблицах ББК для научных библиотек используются заглавные и строчные буквы кириллического (русского) алфавита, арабские цифры, знаки пунктуации, специальные символы. Кроме того, для обозначения специальных индексов лингвистических, хронологических, - территориальных и других - используются буквы латинского алфавита и римские цифры.

Информационно-поисковые языки: Искусственная знаковая система, предназначенная для описания (путем индексирования) основного смыслового содержания текстов документов или их частей, а также для выражения смыслового содержания информационных запросов с целью реализации.

Фонетический уровень Это алфавит языка. Список используемых элементарных символов (символы естественного языка): кириллица, латинский алфавит арабские и римские цифры знаки пунктуации спец. символы # & * и т.п.)

Лексический уровень Словарный запас – совокупность всех употребляемых в ИПЯ лексических единиц. Лексическая единица – наименьшая осмысленная последовательность элементарных символов (знаков), задаваемая при конструировании отдельных слов языка. Лексические единицы образуют лексику языка. Систематизируют лексические единицы парадигматические отношения.

Парадигматические отношения (аналитические) Это внетекстовые, объективно существующие смысловые отношения между лексическими единицами, которые устанавливаются и фиксируются в словаре языка, исходя из потребностей информационного поиска. Учитывают сходство и различие в объеме и содержании лексических единиц (понятий).

Объем– множество предметов, отображаемых в данном понятии. Количество предметов, входящих в объем может быть: Фиксированным (конечным) Бесконечным Единичным Содержание – отраженная в сознании совокупность свойств, присущих каждому предмету, входящему в объем понятия.

Сильные парадигматические отношения: Эквивалентности (равнозначности) – отношения между понятиями, объемы которых совпадают, но в содержании имеются различия. Подчинения – отношения между понятиями, когда объем одного или нескольких понятий входит в объем другого. Род Вид Соподчинения – отношения между видовыми понятиями, в равной степени подчиненными одному родовому.

Сильные парадигматические отношения: Перекрещивания – отношения между понятиями, содержание которых различно, но объемы часто совпадают. Противоположности – отношения между соподчиненными понятиями, которые в своем содержании имеют несовместимые признаки, обуславливающие несовпадение объемов. Противоречия (контрадикторности) – отношения между соподчиненными понятиями, видовые признаки которых несовместимы, что обуславливает несовпадение объемов этих понятий. Исключают друг друга.

Слабые парадигматические отношения: Выражают связи не между понятиями, а между самими предметами (технологические, причинно-следственные, системно-элементные и т.д.). Целое – часть Система – элемент Причина – следствие (отношения детерминации) Процесс – оборудование Процесс – материал

Синтаксический уровень Синтагматические отношения (синтаксические, грамматические, текстуальные) – отношения устанавливающие правила образования и правила интерпретации ИПЯ. Правила образования устанавливают какие комбинации элементарных символов допускаются при построении слов и выражений. Правила интерпретации – как надлежит понимать эти слова и выражения.

Характеристики ИПЯ Семантическая сила – возможность передавать полно и точно содержание сообщений. Простота лексики и грамматики. При разработке ИПЯ учитываются: Специфика отрасли или предмета Особенности текстов, образующих поисковый массив Характер информационных запросов

Типы и виды ИПЯ В основу классификации положены три видообразующих признака, учитывающих структурные элементы языка: лексику, парадигматику и синтагматику. К этим признакам относится: Способ задания лексических единиц. Способ координации (сочетания) лексических единиц. Способ учета парадигматических отношений.

По способу задания лексических единиц Контролируемые Неконтролируемые Контролируемые ИПЯ – лексика задается заранее с помощью словарей и таблиц. ББК – библиотечно-библиографическая классификация. УДК – унифицированная десятичная классификация. Неконтролируемые ИПЯ – лексика задается на основе выбора неограниченного множества терминов естественного языка из индексируемых сообщений.

По способу координации лексических единиц Некоординируемые Координируемые Некоординируемые ИПЯ – языки, не допускающие координации лексических единиц ни в процессе индексирования, ни в процессе поиска. Координируемые ИПЯ – языки, лексические единицы которых координируются либо в процессе индексирования, либо в процессе поиска. Предкоординируемые – устанавливают порядок записи лексических единиц в процессе индексирования по заранее оговоренным правилам и предусматривается их жесткая последовательность. Посткоординируемые – лексические единицы задаются в процессе индексирования и сочетаются между собой только в процессе поиска. Языки иерархической структуры Представляют систему классов, по которым распределяются понятия на основании наиболее существенных признаков, присущих этим понятиям и отличающих их друг от друга. Класс – совокупность объектов, имеющих один или несколько общих содержательных признаков. Недостаток: невозможность организации вне иерархических связей.

Языки иерархической структуры 1. Документы 1.1 Иконические 1.2 Идеографические 1.3 Текстовые Первичные Неопубликованные Опубликованные Вторичные

Семное варьирование значения представляет собой приспособление значения-компетенции к коммуникативным условиям конкретного речевого акта, выражающееся в образовании тех или иных актуальных смыслов. Коммуникативная задача конкретного речевого акта определяет набор сем, подлежащих актуализации, т.е. «избирательную актуализацию семантических признаков значения» (Шмелев, 1983, с. 34; см. также: Бергельсон, Кибрик, 1981, с. 343; Брудный, 1972, с. 214; Солганик, 1981, с. 72; Языковая номинация. Виды наименований, 1977, с. 136 и др.).

Семное варьирование осуществляется на уровне отдельного значения (семемы), связано с выбором семантических компонентов, подлежащих актуализации в связи с определенной коммуникативной задачей и осуществляется посредством ряда семантических процессов, действующих в семеме на уровне отдельных сем. Рассмотрим эти процессы.

Актуализация семы есть коммуникативно обусловленное выделение семы в структуре значения, приводящее к восприятию ее участниками акта общения как коммуникативно релевантной, входящей в актуальный смысл слова. Актуализироваться может любая сема из структуры значения, как ядерная, так и периферийная. Те семы, которые не вошли в актуальный смысл слава, остаются неактуализован-ными. Иногда в таком случае говорят о погашении семы. Представляется, однако, что с точки зрения коммуникативного анализа значения особого процесса (Погашения сем выделить нельзя – коммуникативно нерелевантная сема лрос-то «игнорируется» в речевом акте, т.е. не актуализируется. В значении-компетенции (вне речевого акта) все семы не актуализованы, т.е. все они в равной мере погашены, и поэтому при актуализации одних семантических компонентов другие, коммуникативно нерелевантные, не нуждаются в каком-либо особом механизме погашения сем. Психофизиологической основой актуализации семы является возбуждение тех нейронных ансамблей коры головного мозга, которые кодируют информацию, отражаемую данной семой. Соответствующая сема не актуализируется, если не возбужден соответствующий нейронный участок. Проиллюстрируем, актуализацию разных сем в составе значения на примере употребления слова иголка.

Дай мне иголку, мне надо пришить пуговицу. Актуализируются семы «заостренный металлический стержень с ушком для вдевания нити, употребляемый для шитья».

Черный металл – это иголка и сковородка, плуг и локомотив (В. Чивилихин. Память). Актуализированы семы «предмет быта, первой необходимости».

Ночная молния вспыхнет, и все как на ладони. Иголку, и ту видно (Г. Марков. Моя военная нора). Актуализованы семы «небольшой предмет».

Смотрите, ваш ребенок схватил иголку! Актуальный смысл – «предмет, представляющий опасность, способный причинить боль».

В этот зазор даже иголка не пройдет. Актуализованы семы «тонкий, заостренный предмет».

Актуализация семы может быть осложнена одновременной актуализацией одноименной переносной семемы. Это явление мы обозначаем как процесс двойной актуализации семы, заключающийся в том, что сема, которая в языке одновременно выступает и как самостоятельная семема, может при своей актуализации вовлечь за собой актуализацию переносной семемы, сохраняющей с ней живую связь. Например, в значении слова бритва содержится яркая сильнове-роятностная сема «острая». В предложении «Не девка, а форменная бритва» (Ю. Семенов. ТАСС уполномочен заявить) – об острой на язык, язвительной девушке – актуализируется сема «острая», которая в свою очередь актуализирует переносное значение прилагательного «острый» – «остроумная, язвительная», что и составляет актуальный смысл слова бритва в данном коммуникативном акте. Таким образом, актуализованная сема одновременно осознается и как компонент значения коммуникативно реализуемого слова, и как переносное значение другой, не присутствующей в коммуникативном акте единицы.

Приведем еще примеры двойной актуализации сем: кремень-человек – актуализируется сема «твердый» и переносная семема «сильный, решительный»; аналогично – гранит, а не человек; воск, а не хорунжий – актуализована сема «мягкий» и переносная семема «кроткий, уступчивый, поддающийся воздействию»; скала-вратарь – актуализована сема «твердый» и переносное значение «надежный, устойчивый»; облачко грусти – актуализована сема «легкий» и переносная семема «слабый, незначительный, небольшой»; ты льдина, сосулька – актуализована сема «холодный» и переносная семема «равнодушный, бесстрастный» и т.д.

Иногда наблюдается двойная актуализация семы и содержания устойчивого словосочетания или фразеологизма. Например, Ну, ты снайпер! (о быстро догадавшемся человеке): актуализируется сема «точность попадания», которая актуализирует значение фразеологизма «попасть в точку». Слова некоторых тематических групп имеют тенденцию к двойной актуализации определенных сем. Так, наименования сладостей (пирожное, бисквит, конфета, персик и др.) часто используются в актуальном смысле «сладкий», актуализирующем переносную семему «приятный; доставляющий удовольствие» или семему «приторно-нежный, умильный»; наименования твердых предметов (камень, кремень, скала, металл и др.) часто актуализируют сему «твердый» и переносные семемы «надежный» или «решительный» и др.

Усиление семы представляет собой изменение яркости семы в сторону ее повышения. Оно приводит к тому, что та или иная сема в структуре актуализованного значения оказывается ярче по сравнению с другими семами, чем по отношению к ним же в структуре значения-компетенции. Ослабление семы представляет собой изменение яркости семы в сторону ее уменьшения. При формировании актуального смысла в коммуникативном акте усиление яркости одних сем автоматически ведет к ослаблению других, тоже актуализованных, так как на фоне более ярких сем они проигрывают, становятся менее заметными. На возможность подобного явления указывал W. Schmidt (1965, с. 54): «актуализованное значение слова не является монолитным, оно разложимо на элементы, одни из которых в условиях конкретного контекста усиливаются, доминируют, другие – отступают на задний план, могут исчезать и заменяться новыми».

На возможность различной по яркости актуализации отдельных семантических компонентов обращает внимание и Э.В. Кузнецова. Она приводит конкретные примеры изменения яркости сем в различных контекстах употребления слова: «в разных контекстах одно и то же слово с одним и тем же, судя по словарю, значением, может быть содержательно не вполне адекватным. Возьмем для иллюстрации этого положения глагол вытащить, значение которого определяется в словаре следующим образом: «Таща, извлечь, удалить откуда-либо; таща, вывести, вынести»... Во фразах, приведенных в качестве словарных иллюстраций, глагол вытащить осмысляется неоднозначно. Ср.: «Его [Дубенко] сонного вытащили из кузова и уложили на землю» (А. Попов). В этой фразе акцентируется признак «перемещение», смысл глагола вытащить ближе всего к значению глагола вынести. Так же осмысляется этот глагол и во фразе: «Были такие силачи, что могли вытащить на берег затонувшую лодку с водой» (Скиталец). В других фразах, например, «Иван Ильич вытащил из автомобиля кожаные плащи и погребец с провизией» (А. Толстой), в глаголе вытащить сильнее проявляются признаки «доетавания», «взятия», нежели признак «перемещения» (Кузнецова, 1980, с. 11).

Приведем еще пример коммуникативного изменения яркости сем. Значение слова штукатур – «рабочий, специалист по штукатурке».

Штукатуры приступили к отделке помещения. В актуальном смысле слова штукатур сема «специалист по штукатурке» выступает как наиболее яркая, а сема «рабочий» – как более слабая.

Придет, поработает, допустим, штукатуром, короткое время пройдет, смотришь, а он уже сидит в кабинете с вывеской (В. Кожевников. Там, где нет ни пыли, ни мух). В данном предложении сема «рабочий» усилена, сема «специалист по штукатурке» ослаблена; актуализована также периферийная сема «рядовая должность».

Могут быть ослаблены все яркие семы значения, как ядерные, так и периферийные, что приводит к образованию нечеткого актуального смысла. В этих случаях все актуали-зованные семы выступают одинаково неяркими, что и создает нечеткость актуального смысла, например слово инженер в конструкции типа «Инженер – не чиновник». Отметим, что само явление актуализации предполагает, что актуализованная сема обладает известной яркостью, в этом – сущность явления актуализации. Однако яркость актуализованных сем, как травило, различна, и в рамках актуального смысла слова всегда можно выделить более и менее яркие семантические компоненты.

Еще одним семным процессом при коммуникатизации значения является расщепление сем, под которым понимается неполная актуализация семы, т.е. актуализация в коммуникативном акте лишь части семы. Расщепляются эксплицитные семы; при этом часть эксплицитной семы, актуализирующаяся в коммуникативном акте, оказывается одной из скрытых сем данной эксплицитной семы. Это означает, что расщепление эксплицитной семы фактически представляет собой актуализацию одной из скрытых в ней сем. Но так как при коммуникативном описании значения мы всегда имеем дело с уровнем рассмотрения семемы, на котором семантические компоненты представлены как эксплицитные, мы и говорим о расщеплении сем.

Расщепление сем – семантический процесс, характерный для переносного употребления слова и не встречающийся при прямом употреблении. Наиболее часто расщепляются семы, содержащие в качестве скрытых компоненты, выражающие количественную и качественную оценку какого-либо объекта, при этом редуцируется компонент, указывающий на объект. Например (в скобках приводятся редуцированные, т.е. не актуализованные компоненты расщепленной эксплицитной семы): лавина мероприятий – обилие (снега), с бороной ребятишек – многочисленность (зубьев), муравейник эфира – многочисленность (муравьев), половодье зелени – обилие (воды), табун, стая, стадо – многочисленность (животных), дрожжи – вызывают увеличение, рост (теста), спринтер – быстрота (бега) и др. Нередко расщепляются семы, содержащие скрытую сему «часть», «элемент», «компонент» и др.: кирпичики памяти – элемент (здания), головной мозг корабля – основная часть управления (человеком), тылы книгохранилища – участок (расположения войск), гарнир – дополнительная часть (обеда) и др. Расщепляются семы, содержащие скрытый фазисный компонент: обрыв знаний – конец (ровной поверхности), финиш жизни – этап (соревнований) и др. При расщеплении эксплицитной семы всегда актуализируется та ее часть, которая имеет более обобщенный характер, семантический же объект чаще всего подвергается редукции.

Следующим семантическим процессом является модификация сем, которая заключается в контекстуальном переосмыслении содержания семного конкретизатора в рамках того или иного семантического признака. Как отмечал В. Скаличка, «любую или почти любую сему можно употребить в различном смысле» (1967, с. 143). Модификация семы бывает двух видов – смысловая, представляющая собой изменение содержания семы в коммуникативном акте, и модальная – придание семе модальной окраски. Рассмотрим сначала смысловую модификацию.

Семный конкретизатор, уточняющий тот или иной семантический признак в определенной семе, парадигматически противостоит другим семным конкретизаторам с этим же семантическим признаком. Например, семные конкретизаторы «большой», «маленький», «огромный» противостоят друг другу в рампах семантического признака «размер», семные конкретизаторы «юный», «взрослый», «молодой», «старый» противопоставлены друг другу по семантическому признаку «возраст» и т.д. Разумеется, противопоставленность сем осуществляется через противопоставленность слов, содержащих эти семы в системе языка. Каждый семный конкретизатор в подобной парадигме несет свой собственный семантический груз, очерчивает свою денотативную область. В определенных коммуникативных условиях та или иная сема, а точнее, тот или иной семный конкретизатор, может подвергнуться речевой модификации, т.е. переосмыслению. Сравним два примера:

А колхозное дело такое молодое, и страшно необходимое. Все должны быть за нас. И старушки, и женщины (М. Шолохов. Поднятая целина); Из темноты проступали лица девушек и женщин (Там же).

Семантический признак «возраст» в значении слова женщина представлен семой «взрослая», однако в первом примере эта сема осмысляется как «не старая», а во втором – как «не очень молодая». Следовательно, сема «взрослая» модифицируется в данных контекстах. Подчеркнем, что сама сема «взрослая» в значении слова женщина ни в первом, ни во втором случае не исчезает, а лишь выступает в модифицированном виде, приспособленном к условиям коммуникативного акта.

Как указывалось выше, семные конкретизаторы нечетких сем обладают абсолютным содержанием и значимостью. Необходимо разграничивать модификацию значимости семы в акте речи и актуализацию системных значимостеи таких сем.

Семные конкретизаторы нечетких сем могут иметь как абсолютное содержание, так и значимость, или обладать только значимостью и не иметь абсолютного содержания. Значимость семното конкретизатора, как отмечалось, возникает как следствие системной парадигматической ранжировки семных конкретизаторов по тому или иному семантическому признаку. К примеру, семантический признак «возраст» в значении слова женщина представлен семой «взрослая», содержащей полный семный коикретизатор: абсолютное содержание – «взрослая», значимость – «старше девочки, девушки, ребенка, младше старика, старухи и т.д.». А вот семантический признак «вес» в значении слова мальчик представлен семой с неполным семным конкретизатором: кроме самого семантического признака «вес», эта сема содержит только значимость по данному признаку – «больше младенца, портфеля, рыбы, книги, меньше мужчины, машины и т.д.»; абсолютного содержания семный коикретизатор в данном значении не имеет, нет компонента типа «тяжелый» или «легкий». При отсутствии как абсолютного содержания, так и значимости мы имеем дело с автономным семантическим признаком, например признак «возраст» в значении слова человек.

Абсолютное содержание конкретизатора нечеткой семы определяется только в рамках его собственной тематической группы, к примеру, размер или вес животного определяется только относительно других животных, возраст людей – относительно других людей, эффективность инструментов – относительно инструментов и т.д. Относительная же значимость семных конкретизаторов определяется в пределах всей парадигмы слова по данному семантическому признаку, включающей слова всех тематических групп, для единиц которых характерен данный семантический признак. Например, относительная значимость семного конкретизатора «дорогостоящий» в значении слова «Жигули» будет включать характеристику дороговизны «Жигулей» как но отношению к другим личным транспортным средствам («дешевле «Волги», дороже "мотоцикла, «Запорожца» и др.»), так и относительно других.предметов потребления («дороже пальто, книг, обуви, радиоприемника, дешевле бриллиантов, дома и др.»). Пр,и наличии в семе полного семного конкретизатора возможна актуализация его абсолютного содержания и значимости по отдельности. В следующем примере актуализова-но абсолютное содержание семы «дорогостоящий»:

Материально живем неплохо. Купили «Запорожец». Дочкой в школе довольны (Известия, 1981, 7 июля); Мать с отцом, всю жизнь проработавшие в поле, на ферме, в состоянии не только прокормить дитё, но и купить ему «Жигули» (Коммуна, 1981, 26 дек.).

Если же в коммуникативном акте возникает необходимость противопоставить значения по значимостям в рамках одного и того же семантического признака, то возможна актуализация только значимости:

Тут ни одной не было «Волги», но и ни одного «Москвича» или «Запорожца», тут царили только «Жигули». ...Деньги были, да, деньги у них были, но положение обязывало их не прыгать выше «Жигулей». Это все были торговые боссы из небольших магазинов, умный все народ, не вылезавший и не бахвалившийся тем, что имел (Л. Карелин. Змеелов). В данном примере в наименованиях автомобилей актуализованы значимости семы «дорогостоящий», а абсолютное содержание семного конкретизатора не актуализовано.

При актуализации сем с неполным семным конкретизатором обязательно необходим дифференцирующий контекст, как правило – вербальное противопоставление слов, обеспечивающих актуализацию конкретной значимости семы. Например: Тут не то что технике – бойцу не укрыться. В значении слова боец семный конкретизатор семантического признака «габариты» является неполным: абсолютная значимость отсутствует (боец – и не крупный, и не маленький, но значимость есть: «больше автомата, вещмешка и т.д., меньше пушки, танка, дзота и т.д.»). Конкретный дифференцирующий контекст обеспечил актуализацию именно данного компонента значимости – «меньше военной техники».

Наличие в семных ко.нкретизаторах сем относительной значимости ка.к реального семантического явления и возможность актуализации этой значимости в коммуникативном акте позволяют адекватно понимать многочисленные выражения типа Карась величиной с лопату (т.е. большой), Карась величиной с полтинник (т.е. маленький): в этих случаях актуализируется значимость семы с семантическим признаком «размер»; аналогично: кулаки с пудовые гири, кулаки как чайники, снежинка с ладонь, собака размером с кошку и др.

Значимости сем отражают реальные отношения предметом внешнего мира по определенным признакам и входят в языковую компетенцию носителей языка, отражаясь в семантике слов. Значимость несет дифференциальную информацию, но она содержательна, представляет собой реальный семантический компонент, хотя и выделяющийся в структуре значения только в пределах той или иной семы.

Дифференцирующий контекст, где эксплицитно выражены единицы, оппозиция которых создает ту или иную значимость, является обязательным условием актуализации данной значимости в коммуникативном акте и может служить формальным показателем актуализации значимости в том или ином контексте. При этом дифференцирующий контекст является необходимым независимо от того, актуализируется значимость неполного или полного семного конкретизатора. Разграничение модификации сем и актуализации значимости семы должно проводиться с учетом того, есть ли в данной семе абсолютное содержание у конкретизатора или только значимость. Модификации могут подвергаться только семы с полным семным конкретизатором, так как модифицируется всегда некоторое конкретное абсолютное содержание; если же абсолютное содержание у семного конкретизатора отсутствует, то о его модификации не может быть и речи – возможна только актуализация значимости. Если же актуализируется сема с полным семным конкретизатором, то абсолютное содержание может быть актуализовано в двух вариантах – с модификацией и без модификации.

При модификации конкретное содержание модифицированной семы описывается или допускает описание при помощи таких единиц метаязыка, как: «слишком, достаточно, недостаточно, очень, не очень, сравнительно, относительно и т.д. ... в данной ситуации» (в других ситуациях будет возможна другая оценка, другое осмысление данного признака).

Выше речь шла о смысловой модификации сем, заключающейся в изменении ее содержания. Второй тип модификации – модальная модификация, которая заключается в том, что в коммуникативном акте определенные семы приобретают модальную окраску, передаваемую в описании такими единицами метаязыка, как: должен, может, обязан, возможно и др. Например:

Как ты можешь так равнодушно относиться к сыну? Ты же отец! Сема «проявление заботы» модифицируется в «должен, обязан заботиться».

Маша заболела. – Ну, это не страшно, она ведь живет с матерью. Сема «забота о детях» модифицируется в «может позаботиться».

Модальной модификации подвергаются преимущественно диспозициональные, вероятностные семы.

Следующий рассматриваемый семантический процесс – конкрети за ц и я семы. Сема всегда представляет собой определенную абстракцию. Семы достаточно высокой степени абстракции представлены в коммуникативных актах в виде семных вариаций. По аналогии с фонетикой семные вариации можно назвать аллосемами. Аллосемы – это конкретные вариации семы, обусловленные коммуникативным намерением говорящего и воплощенные в конкретном лексическом значении. Они представлены в коммуникативном акте в семантике конкретных лексических единиц, и выбор той или иной единицы, содержащей аллосему, относится к сфере конкретизации коммуникативного намерения говорящего. Одна и та же сема может "быть представлена в речевом акте разными аллосемами. Так, сема «препятствие для деятельности людей» в разных коммуникативных ситуациях может выявиться в аллосемах «препятствует жизни, работе» (ремонт), «препятствует полетам самолетов» (туман), «препятствует обработке почвы» (ямы, кусты, овраги), «препятствует перемещению» (болота, джунгли) и т.д.

Сема «способность к перенесению трудностей» реализуется в виде аллосем «перенесение тяжелого физического труда», «способность к длительной изнурительной работе», «приспособленность к тяжелым климатическим условиям», «физическая сила», «способность нести большой груз» и др. Сема «наличие технических знаний» может выступать в виде аллосем «способность починить технику», «умение завести мотор», «умение обращаться с бытовыми приборами» и т.д. Семы низкой степени абстракции выступают, как правило, только в виде одной вариации (ср.: «одноместность», «четы-рехколесность», «наличие спинки» и др.).

Описание сем, имеющих единственную аллосему, не вызывает трудности, так как не содержит альтернативы. При наличии у семы нескольких аллосем встает вопрос о том, описывать ли непосредственно аллосему или ту сему, вариацией которой данная сема выступает. Описание значения как факта языковой компетенции диктует выбор в пользу семы, лотому что этим достигается более высокий уровень обобщения, что необходимо для описания системного значения слова.

Конкретизация семы в коммуникативном акте, таким образом, заключается в обусловленном коммуникативной задачей говорящего переходе от абстрактной семы к конкретной аллосеме в составе значения слова, т.е. в коммуникативном воплощении абстрактной семы в конкретной аллосеме. Конкретизация семы – процесс, сопровождающий ее актуализацию, но происходит он только с теми семами, которые имеют достаточно высокий уровень абстрактности, так как конкретные семы в конкретизации не нуждаются.

Поддержание семы – процесс, выражающийся в вербальной экспликации актуализируемой семы в коммуникативном акте. Эта экспликация выступает как средство контекстуального усиления семы и заключается в использовании в коммуникативном акте слова или словосочетания, эквивалентного отдельной актуализируемой семе или всему актуальному смыслу слова в целом. Экспликация может осуществляться как в микроконтексте (предложении), так и в макроконтексте (тексте в целом). В структурном отношении экспликация может быть как препозитивной, так и постпозитивной, в содержательном отношении – буквально эквивалентной актуальному смыслу слова или требовать перифраза. Например:

Хотелось мне быть храбрым, хладнокровным, одним словом, мужчиной (А. Генатулин. Атака). Поддерживаются семы «храбрый», «хладнокровный», экспликация носит буквальный характер.

– Мама всегда говорила, что ты трудный мальчишка. – Мальчишка! Я мужик теперь! Понимаешь, мужик! Я видел столько за эти месяцы, чего за сто лет не увидишь! (В. Кондратьев. Отпуск по ранению). Поддерживается сема «зрелый», «опытный», экспликация требует перифраза.

Взяли-таки с собой и «дегтярева», и автоматы. У меня и даже у всех ездовых новенькие ППШ и ППС. В случае чего море огня (А. Щербань. Варшавское шоссе). Поддерживается сема «большая огневая мощь», экспликация требует перифраза.

[Начальник охраны заповедника не пропускает с ружьем через территорию заповедника] – Так соболь же, валюта, – тянул начальник охраны. – С нас тоже требуют... (В. Чивилихин. Серебряные рельсы). Поддерживает семы «высокая ценность», экспликация "буквальна («валюта»).

Предлагаемая нами трактовка экспликации отличается от трактовки этого термина М.В. Никитиным, который под экспликацией понимает в широком смысле слова отражение в языке отношений вещи и признака – тигр-хищник, Москва есть Москва, гром гремит, снег белый, дом пустой и др. (1974, с. 209). В нашей интерпретации экспликация представляет собой вербальное дублирование актуализованных сем в акте речи. По мнению Е.И. Шейгал, придерживающейся близкой нам точки зрения, экспликация семантического компонента может осуществляться в целях подчеркивания, уточнения и квалификации компонента в речевой ситуации, а также для обеспечения связности текста (1981, с. 37). Особенно необходима поддержка экспликацией слабым периферийным семам, так как без нее эти семы зачастую требуют очень громоздкого контекста или вообще не могут актуализироваться и не будут понятны в акте речи. Например: Лошади – не коровы. Сена клок бросил, напоил – и все (Ф. Абрамов. Дом). Поддерживается актуализация периферийной семы «нетребовательность к пище». Обязательность экспликации семы при ее актуализации свидетельствует о ее слабости и периферийном характере.

Категоризация значения заключается в коммуникативно обусловленном выборе архисемы для актуализованного значения. В коммуникативном акте осуществляется категоризация предмета, которая отражается в выборе лексической единицы как средства номинации, а также в выборе архисемы в ее значении. Архисема выделяется как результат мыслительной операции категоризации, в результате чего значение относится,к определенному классу. Архисема выбирается из открытого ряда архисем, отложившихся в значении в результате прошлого опыта категоризации. Эти семы отражают различные уровни абстракций, на которых может осуществляться категоризация и выбор уровня (а, соответственно, и архисемы для значения) обусловлен коммуникативной ситуацией. Архисема выбирается в акте речи, но это не значит, что она наводится контекстом: архисема является внутренне присущим семантическим компонентом слова, выводимым из других компонентов в результате мыслительной операции, а не привносимым в значение со стороны.

Наведение семы – процесс коммуникативного внесения семы в значение. Наводятся семы, отсутствующие в системном значении слова. Наведенные семы относятся к разряду окказиональных. На возможность контекстуального наведения семантических компонентов указывал еще Г. Пауль, выделявший два типа окказионального употребления слова (1960, с. 101): когда окказиональное значение представляет собой часть узуального и когда оно содержит в себе и «нечто большее». И.В. Сентенберг (1975) подразделяет наводимые контекстом семы на два типа – «смысловые» и «эмоционально-экапресоивные коннотации». Подобное разделение весьма существенно, хотя во многих случаях отделить наведенные денотативные семы от коннота-тив:ных довольно трудно.

Денотативные семы наводятся в следующих примерах:

Наконец, к ночи определили в поездку по обмену опытом животноводов Кукушкина Л.Д. и Кулешова А.В. При Кукушкине и Кулешове послали непьющего агронома Василькову (В. Орлов. Альтист Данилов). Наводится сема «пьющие».

– Как же так? От воспаления легких [умерла]? – Скрытое было. На рентгене не видно. – Да, я знаю. Как же ее не просветили? Есть же техника! Алена стукнула кулачком по парте (Э. Пашнев. Белая ворона). Наводится сема «совершенная, эффективная».

А у твоего Салтыкова самое красное слово – дело. Он работник (В. Еременко. Слепой дождь). Наводится сема «надежный, ответственный».

Я научу вас мыслить, лентяи! – кричала она. Лицо ее становилось малиновым. – Я сделаю из вас математиков! (О. Астахова. Испанец Иванов). Наводится сема «знающий, квалифицированный».

Примеры наведения коннотативных сем:

– Быстрей, мужики! – Забегали! – обернулся Руцких. – У него кто хошь забегает, – отозвался Родион. – Агитатор! Старшой из него получится (В. Чивилихин. Елки-моталки). Наводится положительно-оценочная сема.

Сильва. ...Сердечно поздравляю, мы опоздали на электричку. Брр! Джентльмены! Провожание устроили! Обормоты! (А. Вампилов. Старший сын). Наведены презрительно-эмоциональная и неодобрительно-оценочная семы.

Наведение коннотативных «сем происходит в тех случаях, когда в структуре значения присутствуют автономные семантические признаки «эмоция» и «оценка»; поскольку данные признаки присутствуют в семантике всех неоценочных полнозначных слов (в оценочных словах есть соответствующие оценочные семы), то коннотативные семы могут быть факультативно наведены в значении любого такого слова – река, стол, дерево, шофер и т.д.

Существует разряд слов, в которых автономный признак «оценка» и «эмоция» предполагает обязательную контекстуальную конкретизацию, т.е. наведение того или иного кон-кретизатора в обязательном порядке. Л.И. Климова выделяет несколько семантических разрядов таких слов: слова, обозначающие степень признака с компонентом «чрезмерность» – гордый, дерзкий, хладнокровный и т.д.; слова с компонентом «действующий в неблагоприятных условиях» – хитрый, хитро, ловкий, ловко, изворотливый и др.; слова с компонентом «рассчитанный на внешний" эффект, показной» – красивый, нарядный, умник; существительные – названия животных или мифологических существ с актуализацией отдельных признаков – бес, черт, дьявол, собака, зубр; слова с суффиксами субъективной оценки – чистенький, глупенький, дурачок, жалконький, слабенький, добренький, улыбочка и др. Л. И. Климова (1975) подчеркивает, что ситуация и контекст полностью определяют ту или иную оце-но"чность таких единиц и эмоциональный заряд их (см. также Смоленская, Давыдов, 1972). В ряде примеров такого типа можно, видимо, говорить о наличии вероятностных коннотативных сем, например у слов с субъективно-оценочными суффиксами: в таких словах коммуникативный акт выявляет ту или иную вероятностную коннотативную сему, в остальных случаях коннотация наводится.

Денотативные и коннотативные семы могут наводиться в значении одновременно. Например:

[Речь идет о мертвом немецком генерале] Чего он приволокся, этот чужеземный генерал, в заснеженную Россию? Почему не принял капитуляцию? Стратег! (В. Астафьев. Где-то гремит война). Наводится денотативная сема «негодный, неумелый» и коннотативные неодобрительные семы.

[Прокурор осматривает место побега уголовников] Прокурор... осмотрел колючую проволоку на заборе, оставшуюся почти не тронутой, произнес в заключение только одно слово: «Специалисты!» – и пошел со двора (П. Нилин. Жестокость). Наведена денотативная сема «квалифицированные, умелые» и неодобрительная оценочная сема.

Наведению тех или иных сем могут способствовать определенные синтаксические конструкции. Так, положительно- оценочные семы наводятся в конструкциях типа она – хозяйка! он – мастер!; неодобрительные – в конструкциях типа тоже мне – муж! тоже мне – жизнь! В конструкциях же типа Вот это арбуз! Вот это специалист! могут наводиться как положительно-оценочные, так и неодобрительные семы. В конструкциях идут и идут, платят и платят, просят и просят наводится сема интенсивности. Синонимы в однородном синтаксическом ряду, если в этот ряд включено тематически инородное слово, часто наводят свою интегральную сему в значении этого слова:

Объявление. Фирма добрых услуг принимает заказы на организацию театрализованных представлений. Вы можете вызвать домой мифические персонажи: Деда Мороза, Снегурочку, Хозяйку Медной горы, мастера по ремонту холодильников (Лит. газ., 1983, 1 янв.). Наводится сема «мифический персонаж», которая поддерживается препозитивной вербальной экспликацией.

Наведение семы может быть неоднозначным: – Капитально! – крякнул Грек, не разобрать одобрительно, или нет (Ю. Мушкетик. Позиция). В таких случаях возможны две интерпретации: неясность актуального смысла может быть обусловлена неадекватностью контекста, либо может входить в коммуникативное намерение говорящего.

Укажем, что иногда нельзя провести четкой грани между наведением семы и актуализацией слабых периферийных сем значения. Возможно, что в области слабых периферийных сем мы имеем дело с пограничными между наведением и актуализацией сем случаями.

Перейти к: навигация , поиск

Информационно-поисковый язык (ИПЯ) - искусственный язык , представляющий совокупность средств для описания формальной и содержательной структуры для поиска (путем индексирования ) по запросу пользователя .

Структура

В ИПЯ можно выделить алфавит , лексику и грамматику .

Алфавит - совокупность определенных символов для записи слов и выражений. Во многих языках для этого используются символы естественного языка .

Лексика - совокупность всех использующихся в языке слов - лексических единиц.

Грамматика - правила составления выражений. Грамматика во многих ИПЯ формальна, а в некоторых вообще отсутствует.

Для упорядочения лексических единиц при построении лексики служат парадигматические отношения, то есть смысловые отношения между лексическими единицами. Эти отношения устанавливаются и фиксируются в словаре языка, исходя из потребностей информационного поиска.

Типы и виды ипя Способ задания лексических единиц

Контролируемые - языки, словарный состав которых задается и контролируется с помощью словарей и таблиц. К ним относят различные классификации. (универсальная десятичная классификация,библиографическая классификация, классификацияДьюи ).

1. Язык предметных рубрик. На основе иерархической классификации строят систематические каталоги. На основе языка предметных рубрик строят предметные каталоги. Алфавитные каталоги - ручной поиск.

   Дескрипторные ИПЯ, а такжеязык ключевых слов- автоматический поиск.

Неконтролируемые - лексика не задается словарем, а строится на основе выбора терминов естественного языка. Такие ИПЯ широко начали применяться в последне время.

Порядок записи лексических единиц

Некоординируемые языки - не допускающие координации своих лексических единиц (нет связи между ними) ни в процессе индексирования, ни в процессе поиска. (система расстановки книг в библиотечном фонде, по инвентарным номерам).

Координируемые ИПЯ - языки, в которых лексические единицы связывается, координируются между собой или в процессе индексирования или в процессе использования.

1. Предкоординируемые - связи между лексическими единицами устанавливаются перед поиском.

   Посткоординируемые - когда связи между лексическими единицами устанавливаются только при поиске.

Лекция 8. Автоматизированные информационно-поисковые системы.

Информационно-поисковая система

Рассмотрим постановку задачи поиска в общем виде. Для этого нам необходимо ответить на три вопроса: что искать, то есть, какие источники информации, где искать (места размещение этих источников) и как искать (какие инструменты для этого использовать).

Каковы основные источники информации, представленные в Интернете?

Это документы WWW, статьи в группах новостей и списках рассылки, файлы в библиотеках файлов, справочники адресной информации организаций и людей (электронная почта, адрес, телефон), статьи в тематических базах данных, энциклопедиях.

Где эти источники информации размещаются?

Это такие популярные ресурсы Интернет, как WWW, группы новостей, списки рассылки и FTP-серверы. Безусловно, можно искать нужные источники информации вручную, узнавать адреса из специализированных журналов по информатике и Интернету, использовать специальные бумажные справочники с классифицированными по категориям адресами. Однако для такого изменчивого пространства как Интернет необходимо научиться пользоваться специальными инструментами, цель которых - собирать данные об информационных ресурсах и предоставлять пользователям услугу быстрого поиска.

ИПС (информационно-поисковая система) - это система, обеспечивающая поиск и отбор необходимых данных в специальной базе с описаниями источников информации (индексе) на основе информационно-поискового языка и соответствующих правил поиска.

Главной задачей любой ИПС является поиск информации релевантной информационным потребностям пользователя. Очень важно в результате проведенного поиска ничего не потерять, то есть найти все документы, относящиеся к запросу, и не найти ничего лишнего. Поэтому вводится качественная характеристика процедуры поиска - релевантность.

Релевантность - это соответствие результатов поиска сформулированному запросу. Далее мы будем, в основном, рассматривать ИПС для всемирной паутины (WWW). Основными показателями ИПС для WWW являются пространственный масштаб и специализация. По пространственному масштабу ИПС можно разделить на локальные, глобальные, региональные и специализированные. Локальные поисковые системы могут быть разработаны для быстрого поиска страниц в масштабе отдельного сервера. Региональные ИПС описывают информационные ресурсы определенного региона, например, русскоязычные страницы в Интернете. Глобальные поисковые системы в отличие от локальных стремятся объять необъятное - по возможности наиболее полно описать ресурсы всего информационного пространства сети Интернет.

В общем случае, можно выделить следующие поисковые инструменты для WWW: каталоги, поисковые системы, метапоисковые системы.

Каталог - поисковая система с классифицированным по темам списком аннотаций со ссылками на web-ресурсы. Классификация, как правило, проводится людьми. Поиск в каталоге очень удобен и проводится посредством последовательного уточнения тем. Тем не менее, каталоги поддерживают возможность быстрого поиска определенной категории или страницы по ключевым словам с помощью локальной поисковой машины. База данных ссылок (индекс) каталога обычно имеет ограниченный объем, заполняется вручную персоналом каталога. Некоторые каталоги используют автоматическое обновление индекса. Результат поиска в каталоге представляется в виде списка, состоящего из краткого описания (аннотации) документов с гипертекстовой ссылкой на первоисточник.

Адреса популярных каталогов:

Зарубежные каталоги:

Yahoo - www.yahoo.com Magellan - www.mckinley.com

Российские каталоги:

@Rus-www.aport.ruWeblist-www.weblist.ruУлитка -www.ulitka.ru

Поисковая машина

Поисковая машина - поисковая система с формируемой роботом базой данных, содержащей информацию об информационных ресурсах. Отличительной чертой поисковых машин является тот факт, что база данных, содержащая информацию об Web-страницах, статьях Usenet и т.д., формируется программой-роботом. Поиск в такой системе проводится по запросу, составляемому пользователем, состоящему из набора ключевых слов или фразы, заключенной в кавычки. Индекс формируется и поддерживается в актуальном состоянии роботами-индексировщиками. В описании документа чаще всего содержится несколько первых предложений или выдержки из текста документа с выделением ключевых слов. Как правило, указана дата обновления (проверки) документа, его размер в килобайтах, некоторые системы определяют язык документа и его кодировку (для русскоязычных документов). Что можно делать с полученными результатами? Если название и описание документа соответствует вашим требованиям, можно немедленно перейти к его первоисточнику по ссылке. Это удобнее делать в новом окне, чтобы иметь возможность далее анализировать результаты выдачи. Многие поисковые системы позволяют проводить поиск в найденных документах, причем вы можете уточнить ваш запрос введением дополнительных терминов. Если интеллектуальность системы высока, вам могут предложить услугу поиска похожих документов. Для этого вы выбираете особо понравившийся документ и указываете его системе в качестве образца для подражания. Однако, автоматизация определение похожести - весьма нетривиальная задача, и зачастую эта функция работает неадекватно вашим надеждам. Некоторые поисковики позволяют провести пересортировку результатов. Для экономии вашего времени можно сохранить результаты поиска в виде файла на локальном диске для последующего изучения в автономном режиме.

Адреса наиболее популярных поисковых машин за рубежом и в России.

Зарубежные поисковые машины:

Google - www.google.comAltavista - www.altavista.comExcite - www.excite.comHotBot - www.hotbot.comNothern Light - www.northernlight.comGo (Infoseek) - www.go.com(infoseek.com) Fast - www.alltheweb.com

Российские поисковые машины:

Яndex - www.yandex.ru(илиwww.ya.ru) Рэмблер -www.rambler.ruАпорт -www.aport.ru

Метапоисковая машина

етапоисковая система. Обратите внимание на то, что различные поисковые системы описывают разное количество источников информации в Интернет. Поэтому нельзя ограничиваться поиском только в одной из указанных поисковых системах. Теперь познакомимся с инструментами поиска, которые не формируют собственный индекс, но умеют использовать возможности других поисковых систем. Это метапоисковые системы (поисковые службы) - системы, способные послать запросы пользователя одновременно нескольким поисковым серверам, затем объединить полученные результаты и представить их пользователю в виде документа со ссылками.

Адреса известных метапоисковых систем:

MetaCrawler-www.metacrawler.comSavvySearch-www . savvysearch . com

Поиск источников информации

Обсудим проблему поиска такого источника информации, как статьи в группах новостей. Инструментами поиска в данном случае могут являться рассмотренные поисковые машины WWW, которые индексируют не только пространство WWW, но и статьи в телеконференциях и имеют специальный режим поиска именно в этом ресурсе. Поиск в группах новостей поддерживает, например, поисковый сервер Altavistа. Следует отметить, что поисковые системы WWW весьма оперативно индексируют группы новостей и содержат информацию о статьях, реально существующих в сети. Для поиска в архивах новостей существую специализированные системы, самой известной из которых является система Deja (www.deja.com). Эта система позволяет проводить как поиск отдельных статей, содержащих введенный термин, так и поиск определенных групп новостей, посвященных обсуждению заданной темы. Можно зарегистрироваться в Deja и подписаться на определенные группы новостей.

Теперь рассмотрим инструменты, позволяющие проводить поиск файлов. Многие поисковые системы WWW стали оказывать услугу поиска мультимедийных файлов (Altavista, Aport). Для этого вовсе нет необходимости знать специальные операторы, а достаточно перейти с домашней страницы по ссылкам Картинки (Images), MP3/Audio или Video к специальному режиму поиска. Поиск проводится по возможному имени файла или по тексту в комментарии к ссылке на мультимедийный файл.

Что касается поиска программного обеспечения, во всемирной паутине существуют поисковые Web-серверы с коллекциями условно-бесплатного ПО, некоторые из них специализируются на поиск программного обеспечения для Интернета или для конкретной операционной системы. Эти системы в конечном итоге приведут вас к конкретному серверу, с которого и можно скачать искомый программный продукт. Следует упомянуть серверы Archie, также оказывающие услугу поиска файлов на FTP-серверах, однако пользоваться Web-серверами гораздо удобнее.

Рассмотрим поисковые инструменты для поиска адресной информации. Введем понятие Белого(White) и Желтого (Yellow) поиска.

White-поиск - поиск адресной информации по заранее известному собственному имени адресата (имя человека или организации)

Yellow-поиск - поиск собственного имени по дополнительным признакам (по роду деятельности, по географическому признаку), а затем поиск его адресной информации.

Обычно Yellow Pages системы фактически сразу включают в себя и White Pages - у найденного адресата сразу видны его телефон и почтовый адрес. Кроме того, некоторые Yellow Pages позволяют искать просто в алфавитном списке своих абонентов (white-поиск). С другой стороны, White pages также содержат элементы yellow-поиска - кроме задания собственного имени они обычно позволяют указать название города, штата и другие, сужающие поиск, данные (что необходимо в случае многих однофамильцев). Возможно, именно поэтому многие on-line телефонные справочники, выполняющие, фактически white-поиск, называют себя Yellow pages.

Здесь приведены адреса Web-систем для поиска адресной информации для людей и организаций.

Поиск людей:

Поиск людей на Yahoo (http://people.yahoo.com).

Система WhoWhere (www.whowhere.com).

Система Bigfoot (www.bigfoot.com).

Поиск организаций: раздел Желтые страницы (Yellow pages) на поисковых системах специализированные сервера www.yellowpages.com- для поиска в США и других странах.

Пользователям Internet уже хорошо известны названия таких сервисов и информационных служб, как Lycos, AltaVista, Yahoo, OpenText, InfoSeek, а без услуг этих систем сегодня практи чески нельзя найти что-либо полезное в море информационных ресурсов Сети. Но что собой представляют эти сервисы изнутри, как они устроены, почему результат поиска в терабайтных массивах информации осуществляется достаточно быстро и как устроено ранжирование документов при выдаче - все это обычно остается за кадром. Тем не менее без правильного планирования стратегии поиска, знакомства с основными положениями теории ИПС (Информационно-Поисковых Систем), насчитывающей уже двадцатилетнюю историю, трудно эффективно использовать даже такие скорострельные сервисы, как AltaVista или Lycos.

Информационно-поисковые системы появились на свет достаточно давно. Теории и практике построения таких систем посвящено множество статей, основная масса которых приходится на конец 70-х - начало 80-х годов. Среди отечественных источников следует выделить научно-технический сборник "Научно-техническая информация. Серия 2", который выходит до сих пор. На русском языке издана так же и "библия" по разработке ИПС - "Динамические библиотечно-информационные системы" Ж. Солтона , в которой рассмотрены основные принципы построения информационно-поисковых систем и моделирования процессов их функционирования. Таким образом, нельзя сказать, что с появлением Internet и бурным вхождением его в практику информационного обеспечения появилось нечто принципиально новое, чего не было раньше. Если быть точным, то ИПС в Internet - это признание того, что ни иерархическая модель Gopher, ни гипертекстовая модель World Wide Web еще не решают проблему поиска информации в больших объемах разнородных документов. И на сегодняшний день нет другого способа быстрого поиска данных, кроме поиска по ключевым словам. При использовании иерархической модели Gopher приходится довольно долго бродить по дереву каталогов, пока не встретишь нужную информацию. Эти каталоги должны кем-то поддерживаться, и при этом их тематическое разбиение должно совпадать с информационными потребностями пользователя. Учитывая анархичность Internet и огромное количество всевозможных интересов у пользователей Сети, понятно, что кому-то может и не повезти и в сети не будет каталога, отражающего конкретную предметную область. Именно по этой причине для множества серверов Gopher, называемого GopherSpace была разработана информационно-поисковая программа Veronica (Very Easy Rodent-Oriented Net-wide Index of Computerized Archives).

Аналогичное развитие событий наблюдается и в World Wide Web. Собственно еще в 1988 году в специальном выпуске журнала "Communication of the ACM" среди прочих проблем разработки гипертекстовых систем и их использования Франк Халаз назвал в качестве первоочередной задачи для следующего поколения систем этого типа назвал проблему организации поиска информации в больших гипертекстовых сетях. До сих пор многие идеи, высказанные в той статье, не нашли еще своей реализации. Естественно, что система, предложенная Бернерсом-Ли и получившая такое широкое распространение в Internet, должна была столкнуться с теми же проблемами, что и ее локальные предшественники. Реальное подтверждение этому было продемонстрировано на второй конференции по World Wide Web осенью 1994 года, на которой были представлены доклады о разработке информационно-поисковых систем для Web, а система World Wide Web Worm, разработанная Оливером МакБрайном из Университета Колорадо, получила приз как лучшее навигационное средство. Следует также отметить, что все-таки долгая жизнь суждена отнюдь не чудесным программам талантливых одиночек, а средствам, являющимся результатом планового и последовательного движения научных и производственных коллективов к поставленной цели. Рано или поздно этап исследований заканчивается, и наступает этап эксплуатации систем, а это уже совсем другой род деятельности. Именно такая судьба ожидала два других проекта, представленных на той же конференции: Lycos, поддерживаемый компанией Microsoft, и WebCrawler, ставший собственностью America On-line.

Разработка новых информационных систем для Web не завершена. Причем как на стадии написания коммерческих систем, так и на стадии исследований. За прошедшие два года снят только верхний слой возможных решений. Однако многие проблемы, которые ставит перед разработчиками ИПС Internet, не решены до сих пор. Именно этим обстоятельством и вызвано появление проектов типа AltaVista компании Digital , главной целью которого является разработка программных средств информационного поиска для Web и подбор архитектуры для информационного сервера Web.

Архитектура современных ИПС для WWW

Прежде чем описать проблемы построения информационно-поисковых систем Web и пути их решения рассмотрим типовую схему такой системы. В различных публикациях, посвященных конкретным системам, например , приводятся схемы, которые отличаются друг от друга только способом применения конкретных программных решений, а не принципом организации различных компонентов системы. Поэтому рассмотрим эту схему на примере, взятом из работы.

Client (клиент) на этой схеме - это программа просмотра конкретного информационного ресурса. Наиболее популярны сегодня мультипротокольные программы типа Netscape Navigator. Такая программа обеспечивает просмотр документов WWW, Gopher, Wais, FTP-архивов, почтовых списков рассылки и групп новостей Usenet. В свою очередь все эти информационные ресурсы являются объектом поиска информационно-поисковой системы.

User interface (пользовательский интерфейс) - это не просто программа просмотра, в случае информационно-поисковой системы под этим словосочетанием понимают также способ общения пользователя с поисковым аппаратом: системой формирования запросов и просмотров результатов поиска.

Search engine (поисковая машина) - служит для трансляции запроса на информационно-поисковом языке (ИПЯ), в формальный запрос системы, поиска ссылок на информационные ресурсы Сети и выдачи результатов этого поиска пользователю.

Index database (индекс базы данных) - индекс, который является основным массивом данных ИПС и служит для поиска адреса информационного ресурса. Архитектура индекса устроена таким образом, чтобы поиск происходил максимально быстро и при этом можно было бы оценить ценность каждого из найденных информационных ресурсов сети.

Queries (запросы пользователя) - сохраняются в его (пользователя) личной базе данных. На отладку каждого запроса уходит достаточно много времени, и поэтому чрезвычайно важно запоминать запросы, на которые система дает хорошие ответы.

Index robot (робот-индексировщик) - служит для сканирования Internet и поддержания базы данных индекса в актуальном состоянии. Эта программа является основным источником информации о состоянии информационных ресурсов сети.

WWW sites - это весь Internet или точнее - информационные ресурсы, просмотр которых обеспечивается программами просмотра.

Рассмотрим теперь назначение и принципу построения каждого из этих компонентов более подробно и определим, в чем отличие данной системы от традиционной ИПС локального типа.

В традиционных системах используется понятие поискового образа документа - ПОД. Обычно, этим термином обозначают нечто, заменяющее собой документ и использующееся при поиске вместо реального документа. Поисковый образ является результатом применения некоторой модели информационного массива документов к реальному массиву. Наиболее популярной моделью является векторная модель , в которой каждому документу приписывается список терминов, наиболее адекватно отражающих его смысл. Если быть более точным, то документу приписывается вектор размерности, равный числу терминов, которыми можно воспользоваться при поиске. При булевой векторной модели элемент вектора равен 1 или 0, в зависимости от наличия или отсутствия термина в ПОД. В более сложных моделях термины взвешиваются - элемент вектора равен не 1 или 0, а некоторому числу (весу), отражающему соответствие данного термина документу. Именно последняя модель стала наиболее популярной в ИПС Internet .

Вообще говоря, существуют и другие модели описания документов: вероятностная модель информационных потоков и поиска и модель поиска в нечетких множествах . Не вдаваясь в подробности, имеет смысл обратить внимание на то, что пока только линейная модель применяется в системах Lycos, WebCrawler, AltaVista, OpenText и AliWeb. Однако ведутся исследования по применению и других моделей, результаты которых отражены в работах . Таким образом, первая задача, которую должна решить ИПС, - это приписывание списка ключевых слов документу или информационному ресурсу. Именно эта процедура и называется индексированием. Часто, однако, индексированием называют составление файла инвертированного списка, в котором каждому термину индексирования ставится в соответствие список документов в которых он встречается. Такая процедура является только частным случаем, а точнее, техническим аспектом создания поискового аппарата ИПС. Проблема, связанная с индексированием, заключается в том, что приписывание поискового образа документу или информационному ресурсу опирается на представление о словаре, из которого эти термины выбираются, как о фиксированной совокупности терминов. В традиционных системах существовало разбиение на системы с контролируемым словарем и системы со свободным словарем. Контролируемый словарь предполагал ведение некоторой лексической базы данных, добавление терминов в которую производилось администратором системы, и все новые документы могли быть заиндексированы только теми терминами, которые были в этой базе данных. Свободный словарь пополнялся автоматически по мере появления новых документов. Однако на момент актуализации словарь также фиксировался. Актуализация предполагала полную перезагрузку базы данных. В момент этого обновления перегружались сами документы, и обновлялся словарь, а после его обновления производилась переиндексация документов. Процедура актуализации занимала достаточно много времени и доступ к системе в момент ее актуализации закрывался.

Теперь представим себе возможность такой процедуры в анархичном Internet, где ресурсы появляются и исчезают ежедневно. При создании программы Veronica для GopherSpace предполагалось, что все серверы должны быть зарегистрированы, и таким образом велся учет наличия или отсутствия ресурса. Veronica раз в месяц проверяла наличие документов Gopher и обновляла свою базу данных ПОД для документов Gopher. В World Wide Web ничего подобного нет. Для решения этой задачи используются программы сканирования сети или роботы-индексировщики . Разработка роботов - это довольно нетривиальная задача; существует опасность зацикливания робота или его попадания на виртуальные страницы. Робот просматривает сеть, находит новые ресурсы, приписывает им термины и помещает в базу данных индекса. Главный вопрос заключается в том, что за термины приписывать документам, откуда их брать, ведь ряд ресурсов вообще не является текстом. Сегодня роботы обычно используют для индексирования следующие источники для пополнения своих виртуальных словарей: гипертекстовые ссылки, заголовки, заглавия (H1,H2), аннотации, списки ключевых слов, полные тексты документов, а также сообщения администраторов о своих Web-страницах . Для индексирования telnet, gopher, ftp, нетекстовой информации используются главным образом URL, для новостей Usenet и почтовых списков поля Subject и Keywords. Наибольший простор для построения ПОД дают HTML документы. Однако не следует думать, что все термины из перечисленных элементов документов попадают в их поисковые образы. Очень активно применяются списки запрещенных слов (stop-words), которые не могут быть употреблены для индексирования, общих слов (предлоги, союзы и т.п.). Таким образом даже то, что в OpenText, например, называется полнотекстовым индексированием реально является выбором слов из текста документа и сравнением с набором различных словарей, после которого термин попадает в ПОД, а потом и в индекс системы. Для того чтобы не раздувать словарей и индексов (индекс системы Lycos уже сегодня равен 4 Тбайт), применяется такое понятие, как вес термина . Документ обычно индексируется через 40 - 100 наиболее "тяжелых" терминов.

После того как ресурсы заиндексированы и система составила массив ПОД, начинается построение поискового аппарата. Совершенно очевидно, что лобовой просмотр файла или файлов ПОД займет много времени, что абсолютно не приемлемо для интерактивной системы WWW. Для ускорения поиска строится индекс, которым в большинстве систем является набор связанных между собой файлов, ориентированных на быстрый поиск данных по запросу. Структура и состав индексов различных систем могут отличаться друг от друга и зависят от многих факторов: размер массива поисковых образов, информационно-поисковый язык, размещения различных компонентов системы и т.п. Рассмотрим структуру индекса на примере системы , для которой можно реализовывать не только примитивный булевый, но и контекстный и взвешенный поиск, а также ряд других возможностей, отсутствующие во многих поисковых системах Internet, например Yahoo. Индекс рассматриваемой системы состоит из таблицы идентификаторов страниц (page-ID), таблицы ключевых слов (Keyword-ID), таблицы модификации страниц, таблицы заголовков, таблицы гипертекстовых связей, инвертированного (IL) и прямого списка (FL).

Page-ID отображает идентификаторы страниц в их URL, Keyword-ID - каждое ключевое слов в уникальный идентификатор этого слова, таблица заголовков - идентификатор страницы в заголовок страницы, таблица гипертекстовых ссылок - идентификатор страниц в гипертекстовую ссылку на эту страницу. Инвертированный список ставит в соответствие каждому ключевому слову документа список пар - идентификатор страницы, позиция слова в странице. Прямой список - это массив поисковых образов страниц. Все эти файлы так или иначе используются при поиске, но главным среди них является файл инвертированного списка. Результат поиска в данном файле - это объединение и/или пересечение списков идентификаторов страниц. Результирующий список, который преобразовывается в список заголовков, снабженных гипертекстовыми ссылками возвращается пользователю в его программу просмотра Web. Для того чтобы быстро искать записи инвертированного списка, над ним надстраивается еще несколько файлов, например, файл буквенных пар с указанием записей инвертированного списка, начинающихся с этих пар. Кроме этого, применяется механизм прямого доступа к данным - хеширование. Для обновления индекса используется комбинация двух подходов. Первый можно назвать коррекцией индекса "на ходу" с помощью таблицы модификации страниц. Суть такого решения довольно проста: старая запись индекса ссылается на новую, которая и используется при поиске. Когда число таких ссылок становится достаточным для того, чтобы ощутить это при поиске, то происходит полное обновление индекса - его перезагрузка. Эффективность поиска в каждой конкретной ИПС определяется исключительно архитектурой индекса. Как правило, способ организации этих массивов является "секретом фирмы" и ее гордостью. Для того чтобы убедиться в этом, достаточно почитать материалы OpenText .

Индекс - это только часть поискового аппарата, скрытая от пользователя. Второй частью этого аппарата является информационно-поисковый язык (ИПЯ), позволяющий сформулировать запрос к системе в простой и наглядной форме. Уже давно осталась позади романтика создания ИПЯ, как естественного языка, - именно этот подход использовался в системе Wais на первых стадиях ее реализации. Если даже пользователю предлагается вводить запросы на естественном языке, то это еще не значит, что система будет осуществлять семантический разбор запроса пользователя. Проза жизни заключается в том, что обычно фраза разбивается на слова, из которых удаляются запрещенные и общие слова, иногда производится нормализация лексики, а затем все слова связываются либо логическим AND, либо OR. Таким образом, запрос типа:

>Software that is used on Unix Platform

будет преобразован в:

>Unix AND Platform AND Software

что будет означать примерно следующее: "Найди все документы, в которых слова Unix, Platform и Software встречаются одновременно".

Возможны и варианты. Так, в большинстве систем фраза "Unix Platform" будет опознана как ключевая фраза и не будет разделяться на отдельные слова. Другой подход заключается в вычислении степени близости между запросом и документом. Именно этот подход используется в Lycos. В этом случае в соответствии с векторной моделью представления документов и запросов вычисляется их мера близости. Сегодня известно около дюжины различных мер близости. Наиболее часто применяется косинус угла между поисковым образом документа и запросом пользователя. Обычно эти проценты соответствия документа запросу и выдаются в качестве справочной информации при списке найденных документов.

Наиболее развитым языком запросов из современных ИПС Internet обладает Alta Vista. Кроме обычного набора AND, OR, NOT эта система позволяет использовать еще и NEAR, позволяющий организовать контекстный поиск. Все документ в системе разбиты на поля, поэтому в запросе можно указать, в какой части документа пользователь надеется увидеть ключевое слово: ссылка, заглавие, аннотация и т.п. Можно также задавать поле ранжирования выдачи и критерий близости документов запросу.

Важным фактором является вид представления информации в программе-интерфейсе. Различают два типа интерфейсных страниц: страницы запросов и страницы результатов поиска.

При составлении запроса к системе используют либо меню - ориентированный подход, либо командную строку. Первый позволяет ввести список терминов, обычно разделяемых пробелом, и выбрать тип логической связи между ними. Логическая связь распространяется на все термины. На приведенной на рис. 1 схеме имеется сохраненные запросы пользователя - в большинстве систем это просто фраза на ИПЯ, которую можно расширить за счет добавления новых терминов и логических операторов. Но это только один способ использования сохраненных запросов, называемый расширением или уточнением запроса. Для выполнения этой операции традиционная ИПС хранит не запрос как таковой, а результат поиска - список идентификаторов документов, который объединяется/пересекается со списком, полученным при поиске документов по новым терминам. К сожалению, сохранение списка идентификаторов найденных документов в WWW не практикуется, что было вызвано особенностью протоколов взаимодействия программы-клиента и сервера, не поддерживающих сеансовый режим работы.

Итак, результат поиска в базе данных ИПС - это список указателей на удовлетворяющие запросу документы. Различные системы представляют этот список по-разному. В некоторых выдается только список ссылок, а в таких, как Lycos, Alta Vista и Yahoo, дается еще и краткое описание, которое заимствуется либо из заголовков, либо из тела самого документа. Кроме этого, система сообщает, на сколько найденный документ соответствует запросу. В Yahoo, например, это количество терминов запроса, содержащихся в ПОД, в соответствии с которым ранжируется результат поиска. Система Lycos выдает меру соответствия документа запросу, по которой производится ранжирование.

Кроме ссылок на документы в списке, полученном пользователем, могут оказаться ссылки на части документов или на их поля. Это происходит при наличии ссылок типа http://host/path#mark или ссылок по схеме WAIS. Возможны ссылки и на скрипты, но обычно такие ссылки роботы пропускают, и система их не индексирует. Если с http-ссылками все более или менее понятно, то ссылки WAIS - это гораздо более сложные объекты. Дело в том, что WAIS реализует архитектуру распределенной информационно-поисковой системы, при которой одна ИПС, например Lycos, строит поисковый аппарат над поисковым аппаратом другой системы - WAIS. При этом серверы WAIS имеют свои собственные локальные базы данных. При загрузке документов в WAIS администратор может описать структуру документов, разбив их на поля, и хранить документы в виде одного файла. Индекс WAIS будет ссылаться на отдельные документы и их поля как на самостоятельные единицы хранения, программа просмотра ресурсов Internet в этом случае должна уметь работать с протоколом WAIS, чтобы получить доступ к этим документам.