skurlatov

Сотни миллионов сайтов, форумов, блогов ныне в Интернете, и каждый день добавляется чуть ли не по миллиону. Как не утонуть в информации? Есть поисковики Google, Яндекс и прочие, которые на каждый запрос предоставляют меню подходящих Интернет-адресов. Но все они основаны на контекстном поиске, и чтобы получить более-менее точный ответ, надо задать более-менее точный вопрос. Например, мне нужно исправить кран в ванной, и я набираю в поисковике слова «жулебино» и «сантехник». Выпадают два десятка адресов – выбирай! Час обзвона – с кем-то договорился. Но что из себя представляет мастер, каков он в деле, какова его «кредитная история», каковы отзывы клиентов – Гугл не подскажет. Тем не менее очень Интернет помогает, замечательно. Однако если хочешь найти коллегу по тому или иному интересу или хотя бы выйти на нужного чиновника в министерстве или управе – утонешь, понадобится полдня потратить на поиск. Ибо поиск по ключевым словам (по контексту) имеет естественные ограничения, как ни увеличивай мощность ПО и харда, - что-то сходное с «соотношением неопределенности» в микрофизике. Как нельзя никаким переводчиком точно перевести обыденный текст с одного языка на другой, так нельзя получить в поисковике точный ответ, не зная его заранее. Корифей математики Стивен Волфрам, создатель более чем конкурентоспособного по сравнению с Гуглом поисковика Wolfram Alpha, вынужден был признать этот факт. По поводу усилий Стивена Волфрама я писал в ЖЖ 30 августа 2009 года в заметке «Стивен Вольфрам, Википедия и Панлог»:

«В своих математических постижениях он во многом реализует задумку моей универсальной информационно-поисковой системы Панлог, но, как он признал 20 августа 2009 года в своём блоге, в реальном режиме работы основанного на его подходе нового поисковика Microsoft Bing выявилась неопределенность человеческого вопрошания. Воспроизводится что-то типа «соотношения неопределенности» Вернера Гейзенберга в квантовой физике и «теоремы о неполноте» Курта Гёделя в основаниях математики (и «ситуации форсинга» Пола Коэна в неканторовской теории множеств). Точный вопрос означает, что точный ответ уже известен, и потому Интернет-поиск бессмысленен. Неточный вопрос означает, что и Интернет-ответ будет неточен, и потребуются наводящие вопросы, на которые опять-таки из-за неизбежной стохастичности-эвристичности человеческого мышления обычно нет точных ответов, и потому поиск становится нудным-долгим.

Панлог в такой ситуации предлагает не контекстный поиск по ключевым словам, как в поисковых системах Гугл, Яху, Рамблер и т.д., а каталожный с системой подсказывающих классификаторов косвенных признаков и в результате - существенного сужения вариантов возможных ответов. Впрочем, о преимуществе всем известного по обычным библиотекам каталожного поиска перед контекстным я уже писал. Думается, нынешние контекстные поисковики, включая основанные на продвинутом движке Вольфрам/Альфа – это такие же динозавры по сравнению с каталожным, как огромные вычислительные машины на заре компьютерной эры по сравнению с современными ноутбуками-лэптопами.( Read more... )

Два слова о принципиальном изъяне подхода Стивена Волфрама, которого некоторые называют «гением нашего времени», «математиком № 1 в мире» и т.п. Малопродуктивно придумывать что-то наподобие системы эпициклов, исправлявших систему Птолемея, или «теорий эфира», пытавшихся согласовать ньютонианство с релятивизмом. Половинчатость проигрышна. Поисковик же Волфрам/Альфа остановился на полпути, попытавшись сочетать контекстное с каталожным. В течение пяти лет сотня научных сотрудников вручную внесли в базу данных абсолютное большинство научных справочников и энциклопедий по всем областям знаний, и теперь при запросе Wolfram Alpha выдает не кучу страниц, в которых встречается ключевые слова, а ответ на поставленный вопрос. Таким образом, в новом поисковике нужно набирать конкретный вопрос и получать конкретный ответ. Стивен Вольфрам называет свой поисковик «машиной ответов» - «Это похоже на то, - поясняет он, - как если бы вы общались с каким-либо экспертом. Программа анализирует то, что вы имели в виду, проводит вычисления и предоставляет вам результат. На первом этапе были выбраны триллионы выборочных данных. Их сортировали и группировали люди. Этот подход позволяет задавать программе вопросы тем же языком, что и другому человеку, и отказаться от специального поискового синтаксиса – приемов составления запросов».

Казалось бы - перспективно, финиш! Wolfram|Alpha не возвращает перечень ссылок, основанный на результатах запроса, а вычисляет ответ, основываясь на собственной базе знаний, которая содержит данные о математике, физике, астрономии, химии, биологии, медицине, истории, географии, политике, музыке, кинематографии, а также информацию об известных людях и интернет-сайтах. Он способен переводить данные между различными единицами измерения, системами счисления, подбирать общую формулу последовательности, находить возможные замкнутые формы для приближенных дробных чисел, вычислять суммы, пределы, интегралы, решать уравнения и системы уравнений, производить операции с матрицами, определять свойства чисел и геометрических фигур. Поисковик способен предоставлять всю информацию о ЛЮБОМ ресурсе, начиная от количества посещений за день и рейтинга и заканчивая картой расположения серверов. Он умеет решать любые математические задачи, физические, химические, финансовые, и т.п. Однако, отмечают юзеры, расчет на основании собственной базы имеет и свои недостатки, в том числе - уязвимость к ошибкам данных. Например, на момент открытия, запрос president of russia 1999 выдавал имя Аслана Масхадова (в настоящее время эта ошибка уже исправлена). Движок Wolfram|Alpha основан на обработке естественного языка (в настоящее время - только английского), большой библиотеке алгоритмов и NKS-подходе для ответов на запросы. Он написан на языке Mathematica и составляет около 5 миллионов строк, в настоящее время выполняется примерно на 10000 процессорах.

Всё это впечатляет, но схожего результата можно, на мой взгляд, достичь точнее, быстрее и на несколько порядков дешевле посредством Панлога, который можно рассматривать как «склад» содержащейся в Интернете информации, как Интернет-логистику (в двух сопряженных версиях – англо- и русско-язычной). Нужная информация находится благодаря удобной навигации, приводящей к соответствующей «полке» информационного мегамаркета. Таких «полок» для информации предусмотрено для начала несколько миллионов. Как работает Панлог, расскажу на слух (программисты пока задерживают демонстрационную версию).

Итак, Открывающая страница Панлога. На ней – минимум разделов, чтобы они смогли без напряга для глаза восприниматься на экране диаметром 18 см, что эргономически вполне удобно и соответствует типовому книжному формату А6 (формат записной книжки и запатентованного мной универсального мультимедийного коммуникационного устройства - раскладного двухэкранного Панбука). Экран заполнен плотно по сути, но в то же время просторно по виду. Среди главных разделов – ПАНМОНИТОРИНГ, ПАНХРОНОЛОГИЯ, ВИЗИТКА, ИНТЕРЕС. Каждый раздел способен легко ветвиться до «элементарного» уровня, причем разных его «ипостасей»: ПАНМОНИТОРИНГ – до квартиры и топонима, ПАНХРОНОЛОГИЯ – до дня, ВИЗИТКА – до человека, юрлица, статьи и всякого сущего, ИНТЕРЕС – до отдельного сайта, сообщества, блога и всякого Интернет-адреса.

Раздел ИНТЕРЕС на экране представлен 12-ью подразделами – ДУХ, СМИ, ХОББИ и т.д. Наводим курсор на название нужного нам подраздела, снабженного всплывающим-подсказывающим меню 8-12 отделов. Далее кликаем по названию нужного нам отдела (всплывает меню 8-12 рубрик), далее по названию интересующей нас рубрики (всплывает меню 8-12 кластеров), выбираем нужное название кластера (всплывает меню 8-12 групп) и наводим курсор на название группы, которая, как нам кажется, удовлетворяет нашему запросу-интересу (всплывает 8-12 названий подгрупп данной группы), а затем выбираем наиболее подходящую подгруппу и выходим на конкретные Интернет-адреса, которых на «полке» данной подгруппы может быть от 0 до сколько душе угодно (классифицируются по рейтингу), причем каждый линкуемый Интернет-адрес снабжен двумя-тремя строчками текстовой аннотации.

Итого в разделе ИНТЕРЕС предусмотрено размещение примерно 12х10х10х10х10х10 = 1 – 1, 5 миллионов «полочек-ячеек», на каждой из которых можно разместить сколько угодно расклассифицированных, аннотированных и линкуемых Интернет-адресов. Кто их будет вбивать вручную – интересный вопрос, на который у меня есть сверхубедительный ответ (пока коммерческая тайна), но Стивен Волфрам ограничился сотней нанятых специалистов, которым хватило пяти лет, чтобы объять все существующие англоязычные энциклопедии, справочники, электронные базы данных и т.п. У дружественных мормонов задействовано побольше народа, и ещё семь лет назад они прислали мне диски с данными на 150 миллионов американцев. Можно найти заинтересованных людей и для Панлога, тем более если им предоставить стимул экономической самодостаточности. Панлог – это «полочки» склада, а заполняют каждую «полочку» пусть те, кто возьмёт её «в аренду».

Теперь – конкретно о всплывающих классифицирующих-подсказывающих меню. Тот же подраздел ДУХ в отделе ИНТЕРЕС. Хочу найти сайты, рассылки, блоги современных русских старообрядцев, о толках которых я имею самое смутное представление, но мне интересно вступить с ними в контакт (а также, возможно, не только мне, но также разным рекламодателях для адресной работы с данной категорией, политтехнологов, соцслужб и т.п.). Пройдемся по Панлог-навигации.

Итак, каждый подраздел раздела ИНТЕРЕС собирает-классифицирует-линкует (с кратким по примерно 20-30 слов комментарием по каждой позиции) наиболее активные Интернет-ресурсы: сети + сообщества; рассылки + подписки, сайты + блоги. Каждый подраздел (например, ДУХ) ветвится-раскрывается по нескольким ниспадающим уровням с разделением глобальных и локальных (страновых и региональных) Интернет-ресурсов.

По каждому подразделу – своя логика классификации (логистики), призванная максимально облегчить навигацию и поиск нужных юзеру Интернет-ресурсов.( Read more... )

На уровне 5 ветвятся группы по подгруппам. Например, группа Старообрядчество ветвится по следующим подгруппам:

- Общее
- Догматические и канонические основы
- Источники
- История старообрядчества
- Поповство (общее)
- Русская Православная Старообрядческая Церковь (Белокриницкое согласие или Белокриницкая иерархия)
- Русская Древлеправославная Церковь (Беглопоповское согласие)
- Беспоповство (общее)
- Древлеправославная Поморская Церковь
- Федосеевцы
- Спасовцы
- Нетовцы
- Духовные христиане (общее)
- Молокане
- Другие ереси и толки
- Центры общестарообрядческие
- Учебные заведения общестарообрядческие
- Периодика общестарообрядческая.

В свою очередь, каждая подгруппа ветвится на глобальные и локальные Интернет-ресурсы по 6 «полочкам» (Сети + сообщества; Рассылки + подписки; Центры, приходы и т.п.; Учебные заведения; Периодика; Индивидуальные сайты + блоги), и каждая активная строка-адрес поясняется кратким (20-30 слов) комментарием.