Участник:Саша Черных/Поиск Кристиниты

Найдётся всё Найдутся знания!

«Поиск Кристиниты» — универсальная поисковая система с широким спектром возможностей и высокой релевантностью выдачи по вручную пополняемому каталогу, — Каталогу Кристиниты, — обеспечивающая быстрый доступ к материалам специалистов, представляющих энциклопедическую ценность. Короче и наглядно — Поиск Кристиниты — это Гугл, который ищет авторитетную энциклопедическую информацию по любой тематике. Постоянный адрес: http://Kristinita.ru (дополнительный адрес — http://alfavika.ru/Kristinita.html) . О преимуществах над уже имеющимися поисковыми системами, несовершенными на взгляд автора Поиска Кристиниты, см. на странице Участник:Саша_Черных/Поиск Кристиниты/Примеры. Поучаствовать в составлении Каталога Кристиниты может каждый желающий.

Предисловие

Кристина Кива, в честь Которой назван Поиск

Главная проблема цитат в интернете в том, что люди сразу верят их подлинности (В.И. Ленин)

В условиях информационного бума школьник из наших дней, комментирующий «мемчики», может получать больше информации нежели образованнейшие люди даже XVIII-XIX столетий, что, впрочем не прибавит ему мудрости. Часто приходится убеждаться в том, как люди без какого бы то ни было критического осмысления воспринимают всю новую информацию кроме той, что не согласуется с их взглядами: обсуждают наскоро свёрстанные, а затем бездумно перепечатанные всеми СМИ новости; репостят непроверенные «интересные факты» из пабликов, на поверку оказывающиеся фейками; цитируют популярных блоггеров, заработавших славу резкими односторонними высказываниями. Поносящие «зомбоящик» всеми правдами и неправдами, из интернета они получают информацию ещё более низкого сорта; с презрением относясь к пропагандистской машине запросто подпадая под влияние пропаганды уже противоположной стороны. Стоит ли удивляться лёгким манипулированием людьми: достаточно одной клеветнической или оскорбительной записи в самой что ни на есть жёлтой газете — народ клюёт, а к кому-то на всю жизнь приклеивается ярлык.

Автор Поиска Кристиниты задался целью облегчить как школьнику, так и профессору доступ к относительно достоверным данным, а не популярным, коммерческим и SEO-раскрученным ресурсам. Пользуйтесь на здоровье ПоКрисом, разумеется, бесплатно; впитывайте знания, не всякую информацию!

Основные сведения

Какова этимология наименования Поиска?

Он наречён в честь Кристины Кивы — добрейшей души Девушки, готовой пожертвовать Собой ради блага других Солнышка со сложной судьбой, столько всего сотворившей для автора Поиска.

Возьмём первое пришедшее на ум слово «Кошка». Ролики с YouTube, новости-однодневки, лурк и игры для девочек не слишком удовлетворяют цели получения энциклопедической информации.

Для чего нужен Поиск Кристиниты?

Вы вводите запрос в универсальный поисковик вроде Яндекса или Гугла, получая на выходе сплошь ссылки на рекламу товаров, приколы, обсуждения из соцсетей и форумов, слухи, демотиваторы, фишинг и т. п., — методы конкуренции, добросовестные ли они или нет, оказываются важнее содержания. Большая часть этого добра для вас лишняя. Чтобы выдавались данные только определённого типа, а ненужное отсекалось, существует великое множество специализированных поисковых систем, которым посвящены книги.

Одной из таких систем является Поиск Кристиниты. Пользуясь им, вы, по сути, попадаете в интерактивную мегаэнциклопедию, в которой можете выбирать, где читать, из сотен проверенных источников. Оказаться их в числе непросто: каждый сайт проходит далеко не пятисекундную процедуру досмотра, составлено ли его содержимое экспертами по тематикам. ПоКрис старается охватить все сферы деятельности, дабы вы могли получить качественную выдачу на запросы по любой из них. Если вам нужно что-то узнать, Поиск Кристиниты зачастую может оказаться лучшим решением. Почему нужно выбирать именно его, на наглядных примерах продемонстрировано в обширном разделе Сравнение.

«Поиск по материалам, представляющим энциклопедическую ценность» подразумевает, что в ПоКрисе выводится не вся информация даже из источников, в чьей авторитетности сомневаться не приходится, а только «энциклопедическая» — та, что может содержаться в энциклопедиях: так в выдаче вы не увидите, к примеру, новостных сводок. Универсальных чётких определений «энциклопедичности» не существует, автором Поиска Кристиниты выведены свои, приближённые к стандартам содержания энциклопедий: что включено в Каталог Кристиниты, а чего нет.

Запросы в поисковик разделяются на навигационные, когда хотят найти конкретное место в сети, к примеру, сайт нужной компании или форума; транзакционные — требуется что-либо купить или скачать; и информационные — нужно узнать какие-то сведения вне зависимости, на каком сайте они расположены. Для последних предназначен Поиск Кристиниты. Одной из разновидностей информационных является «энциклопедический» запрос, когда в поисковик вводится слово или фраза с целью узнать его значение, свойства. Для таковых ПоКрис приходится как нельзя кстати.

На сайте Поиска Кристиниты вы не увидите рекламы, если её не введут на GitHub, где хостится ПоКрис, или же вынужденно придётся прогнуться ради расширения возможностей. В любом случае автору Поиска Кристиниты не перепадёт ни копейки.

Но есть же Википедия?

1. Википедия — лишь один из справочников, пусть и самый популярный. Вводя искомые слова в её строку поиска, вы ищете только на её сайте, тогда как пользуясь Поиском Кристиниты — ещё и на многих других, включая саму Вики. Раскрученный сайт отнюдь не обязательно по всем параметрам превосходит сразу сотни пусть и безвестных для широкого круга потребителей.
2. Ни в коем случае не стоит слепо доверять статьям Википедии по целому ряду причин, описанных разделе № 5 «Википедия» следующей статьи:

а) пишется дилетантами; неточности от незнания или невнимательности;

б) даже если над статьёй работал специалист, почти всегда отсутствует профессиональный редакторский контроль;

в) авторитетные источники к утверждениям в вики проставлять желательно, но необязательно. Информация может быть не подтверждена ничем, кроме мнения автора.

г) идеологические предпочтения, продавливание своей точки зрения. Когда в конфликтной теме обе противоборствующие стороны представлены группами опытных участников, нейтральность и взвешенность статей обычно на высоком уровне. Но если оппонентом матёрых участников выступает новичок либо претензии по содержанию и вовсе никем не предъявляются, порой кажется, что мы читаем низкопробную бульварную прессу, но никак не серьёзную энциклопедию.

д) постоянная изменчивость. Через год страница может выглядеть совсем иначе, или её и вовсе снесут.

е) т. н. «вандализм» в отдельных случаях висит годами;

ё) лояльное отношение к библиографическим источникам, недоступным для проверки другими участниками.

Вики и сама себя не считает надёжным источником: нельзя ссылаться в примечаниях на статьи других языковых разделов. Тем не менее всё большее количество её статей снабжены подтверждающими ссылками, подчиняющимися местному правилу авторитетности, почему Википедия включена в каталог Кристиниты
3. Отдельные сайты Каталога Кристиниты, в частности, обширнейшее собрание справочников на dic.academic.ru, занесены в спам-лист вики якобы из-за нарушения авторских прав. В результате читатели в разделе «Примечания» либо видят недоступные для онлайн-просмотра библиографические ссылки, которые долго или и вовсе затруднительно искать, или же им просто-напросто приходится верить Вики на слово.
4. В Википедии могут существовать статьи далеко не обо всех объектах и явлениях в основном из-за местных правил о «значимости» и их трактовки удаляющими участниками. А если статья и существует, из-за прочих ограничений — чётко ли прописанных или существующих только в головах пары-тройки администраторов — в ней дозволено размещать далеко не всё, что интересно и полезно, тогда как в другой литературе, с отличными от Википедии правилами составления как раз может найтись необходимая для вас информация.
5. Как сами википедисты, считающие свой сайт главным и самым авторитетным; PR-службы, по заказу начальства упорно размещающие информацию о компаниях или их продуктах исключительно в Википедии, не догадываясь о существовании её альтернатив; чиновники, стремящиеся создать с привлечением немалых средств очередную профессиональную альтернативу вики вместо того, чтобы открыть доступ к кладезям уже имеющейся информации, — вы зациклены на Википедии и не видите необъятного разнообразия прочих энциклопедических ресурсов.

В свою очередь, ПоКрис рекомендуется самим википедистам для быстрого поиска авторитетных источников к статьям. Только помните, что прежде всего задача Поиска Кристиниты заключается не в подтверждении «значимости», а предоставлении читателям профессиональной энциклопедической инфрмации. Наличие м. в КатКрисе не гарантирует, что для Википедии они будут считаться «авторитетными источниками» (кстати, а что это?), проверяйте каждый в отдельности, Градация вам в помощь.

Как искать в Поиске Кристиниты?

Точно так же, как вы всегда пользовались любым поисковиком. Для достижения более эффективных результатов изучите язык запросов, секреты Google. Чтобы стать поисковым гуру, штудируйте книгу А. Артемова «Мониторинг информации в Интернете», где приводятся данные постоянно проводимых исследований работы поисковых операторов чемпиона Восьмого Кубка Яндекса, «человека, который нашёл всё» Дениса Фурсова.

В Google не планируется помещать ссылки на кэшированные версии страниц, пригождающиеся, когда сайт недоступен, рядом с результатами поиска, почему порекомендовал бы установить один из аддонов в зависимости от Вашего браузера: Safari — PageHistory, Opera — Webcache, Firefox — Resurrect Pages, Chrome — Web Cache.

18-летняя влоггер, песни, порноактриса, будни поп-звезды, — вы точно возжелали найти в Яндексе именно это :) ?

О Каталоге Кристиниты

Сам Каталог и примеры некоторых не добавленных в него сайтов находится по адресу Участник:Саша_Черных/Поиск Кристиниты/Каталог Кристиниты.

Зачем создавать новый, когда есть готовый Яндекс.Каталог?

Критерии включения в Рамблер ТОП100, Каталог Mail.ru , DMOZ, Яндекс.Каталог и прочие абсолютно иные, нежели у Каталога Кристиниты, для вхождения в который сайту необходимо удовлетворять одной из категорий Градации Кристиниты.

Каковы критерии попадания веб-ресурса или его части в Каталог Кристиниты?

О прочих запретах см. в подразделе Участник:Саша_Черных/Поиск Кристиниты#Где не ищет Поиск Кристиниты. Список неокончательный, возможны изменения.

1. Русский язык. Создать многоязычный поисковик было бы прекрасно, однако:

1.1 Лимит не позволяет включать в Каталог Кристиниты большое число сайтов, приходится ограничиваться просторами Рунета.

1.2 Автор ПоКриса недостаточно разбирается в разнообразии иноязычных источников.

1.3 Даже если получится упросить Google убрать лимит или перейти на Яндекс, потребуется объём временных затрат, обеспечить который автор Поиска Кристиниты не в состоянии. Это будет уже иной проект с совершенно другим размахом.

2. Уничижительный, ругательный контент, задевающий честь и достоинство, и отсутствие противодействия оному со стороны администрации ресурса. Для сайтов категорий ниже не допускается использование материалов, содержащих немалое число как отрицательной, так и положительной оценочной, а не только фактической информации. Примеры не включённых по критерию сайтов: lurkmore.co freakopedia.ru ruxpert.ru

3. Широта обозреваемой тематики; большое количество включённых понятий.

4. Возможность бесплатного, без регистрации и подписок по e-mail просмотра не менее чем трети полных версий материалов.

5. Размещение в виде, позволяющем индексацию краулером Гугла. Крайне желательно выкладывать м. на html-страницах. В справочниках для каждого понятия лучше выделять отдельную веб-страницу. Содержимое .pdf .doc и прочих текстовых или E-book форматов встречается в выдаче ПоКриса даже если они заключены в архивы вроде .zip и .rar , однако гарантий их хорошей индексации меньше. Не включаются в каталог сайты, где м. выложены — неважно, встроены ли, для скачивания или внутри размещённых на с. онлайн-просмотрщиков — в графических форматах, обычно .djvu . Не индексируются вовсе.

6. Соответствие одной из категорий Градации Кристиниты.

7. Размещение на с. информации, представляющую энциклопедическую ценность, по URL, отличным от остального контента. Прекрасно, когда, к примеру, все аналитические статьи располагаются по адресу, начинающемуся с example.com/articles , а новостные с example.com/news . В случае если критерий не выполняется, возможность включения сайта в каталог рассматривается отдельно: учитываются прежде всего процент аналитической и обзорной информации по отношению к новостной и прочей, а также заменяемость с. Если сайт всё же принят, то в Каталоге напротив его адреса ставится пометка URL, означающая смену положительного решения о добавлении в случае сильного засорения выдачи. Для подробностей см. подраздел «Нежелательные форматы URL». В Каталоге Кристиниты не представлены файлообменники, где у академической литературы в соседях порно.

8. C. c м. о направлениях исследований, однозначно признанных современной наукой как квазинаучные (не смешивать с религией и мифологией, не претендующих на научность), включаются только если м. составлены не сторонниками данных направлений. Примеры не включённых по критерию сайтов: ezoezo.ru ufodic.org.ua

9. Веб-ресурсы организаций и личные с. профессионалов должны содержать достаточно большое количество энциклопедического материала, не только информацию о себе и своей деятельности. Хороший пример: novsu.ru/npe/files . Примеры не включённых по критерию сайтов: korzhimanov.ru

10. Написание м. неаффилированными лицами.

11. Запрещены с. нацистской и прочей агрессивной идеологии; специализирующиеся на описании жестокости и способов убийства.

12. В каталог не попадают с., где даются только рецепты блюд, но не рассказывается об их истории и культурном значении. Примеры не включённых по критерию сайтов: kulinaria1955.ru

13. Веб-индексирование. Если с., содержимое которого выложено текстом, не индексируется вовсе, или в выдаче с него всего пару небольших страниц, включение в КатКрис не не несёт под собой особого смысла. Такое может случиться из-за санкций, наложенных поисковыми системами, нерекомендованной структуры.

В Google пользователям предоставляется возможность добавления страниц для индексации вручную. Заходите в Google Search Console → выбираете сайт → «Сканирование» → «Просмотреть как Googlebot» → Добавляете непроиндексированную страницу → «Сканировать» → «Добавить в индекс» → «Сканировать только этот URL» → «Отправить». Правильно оформленные html-страницы появляются в поисковой выдаче моментально, месячная квота — 500 страниц.

14. Поверхностный веб.

Почему в каталог не включена Википедия?

В Википедии почти не создаётся статей о фразеологизмах. Попадаются сплошь случайные упоминания.

1. Чуть устаревшие версии статей Википедии включены в состав сборника справочников academic.ru по адресу «dic.academic.ru/contents.nsf/ruwiki/ ». По этому URL ПоКрис ведёт поиск.
2. При включении Википедии, Викисловаря, а также некоторых очень популярных сайтов вроде Academia.edu в состав Поиска Кристиниты, результаты последнего страшно загромождаются информационным шумом. Порой в выдаче нам будут попадаться результаты из Википедии с редким вкраплением других с.
3. Ссылки на Википедию и Викисловарь за редким исключением присутствуют среди первых в результатах запроса в каждом универсальном поисковике, вполне можно обойтись и без специализированного.

Зачем некоторые материалы включены несколько раз?

Дубли на странице результатов Поиска не выводятся. Между тем:
1. Веб-ресурсы, где располагаются м., в любой момент могут перестать функционировать, оказаться заблокированными либо пропасть из поисковой выдачи.
2. Гугл подчас опускает релевантную информацию с одних сайтов слишком далеко в выдаче, тогда как то же самое на других индексируется получше, что облегчает юзерам доступ к ней.
Между тем, когда одни и те же м. размещены слишком много где, некоторые с. удаляются из каталога из-за лимита.

Техническая часть

Сравнение Google Custom Search Engine и Яндекс.Поиска для сайта

В таблице только Яндекс и Google, потому что прочие проекты от поисковых машин с качественными показателями, предоставляющие возможность пользовательского поиска, автору ПоКриса попросту неизвестны. Вдаваясь в вечнозелёный спор, кто же лучше, автор Поиска Кристиниты подметил, что на информационные запросы в зоне видимости Google часто выдаёт коммерческие сайты, Яндекс — раскрученные. Доля и тех и других в КатКрисе мала, так что при прочих равных особо не имеет значения, Яндекс или Гугл брать за основу ПоКриса.

	GCSE	Яндекс.Поиск
Проработка шаблонов URL	Хорошая	Слабая
Лимит на наполнение Каталога	5000 добавленных + исключённых с.	100000 добавленных с.
Допустимое количество исключений	Ограничивается только лимитом. Хоть 4999.	200, да и это сократят
Поисковая выдача по ссылкам на странице	Есть	Нет
Фидбэк	Лишь в платной версии, чьи функции абсолютно лишние для Поиска Кристиниты. Не потратив как минимум 100$, достучаться до разработчиков крайне проблематично.	Клуб Яндекс.Поиска, где на любой вопрос сотрудники Яндекса отвечают на русском языке. Отзывчивая техподдержка.
Ссылки на архивные версии веб-страниц	Нет. Пример с сайтом gameland.ru	Да
Живой поиск	Практически бесполезен	Высокая релевантность
Прочие проблемы	При добавлении/исключении с. невозможность применения звёздочки, если в URL содержится поддомен 3-го уровня или папка — subdomain.example.com , example.com/folder	Детально не разбирал. Подмечена сложность с добавлением поддоменов academic.ru
Перспективы	Пустующий форум, на котором даже пропало форматирование текста, отсутствие ответов по метке на Stack Overflow, неактивные твиттер, блог и отсутствие фидбэка дают основания полагать, что разработка сервиса может прекратиться.	Проект развивается

У обоих вариантов критичные недостатки. Пункты 1, 3 и 4 означают, что в Яндекс.Поиске для сайта серьёзно ограничена возможность фильтрации разделов Каталога, что ведёт к значительному захламлению выд. информационным шумом. Пока предпочтение отдано GCSE, чей низкий лимит (п.2) тем не менее не позволит Поиску Кристиниты особо развернуться и выйти на новый уровень. Планируется продолжать искать связи в нужных кругах, писать в обе компании, и молиться, что в дальнейшем сервисы будут развиваться.

Открытые поисковые системы

Sphinx, mnoGoSearch, DataparkSearch, Elasticsearch и другие.

Достоинства:

1. Уверенность, что не произойдёт закрытия очередного неприбыльного проекта.
2. Открытость. Лицензии GNU, а не проприетарные, предполагают свободное редактирование исходного кода ПО любым желающим, что, например, позволит совместно разрабатывать Поиск Кристиниты.
3. Независимость. Не нужно просить корпорации о каждой необходимой функции, обречённо дожидаясь отказа.
4. Возможности ограничены только умениями разработчиков.
5. Достижимость качественного ранжирования при использовании наряду традиционными формулами релевантности типа TF-IDF, — исключительно каковые применялись, к примеру, во Flexum, — алгоритмов ранжирования с учётом популярности тИЦ или PageRank.

Недостатки:

1. Money, money, money. Платить придётся страшно представить сколько. См. ответ по поводу Поиска Кристиниты от Александра Баркова, автора mnoGoSearch:

В качестве примера могу предлолжить ovguide.com. Он использует mnoGoSearch. Когда мы с ними общались последний раз, у них было несколько десятков миллионов документов и достаточно серьезная инфраструктура: Использовался mnoGoSearch Cluster на примерно 10-ми компьютерах (8ми-ядерные, около 16Гб памяти). Использовалась репликация. Краулер и индексатор работали на отдельных компьютерах от поиска. Поисковые системы на mnoGoSearch с бОльшим количеством документов я не видел. Но могу предположить, что количество техники, которое потребуется, будет расти примерно линейно.

А ведь ПоКрис выдаёт несколько миллиардов документов на некоторые запросы.

На недостатке 1 можно, в принципе, и закончить, но пойдём дальше.

2. Придётся придумывать Google. При всей своей гибкости настроек для достижения результатов, сопоставимых с Google Custom Search Engine, открытые поисковые движки нуждаются в совершенствовании.
3. Сложность установки и обслуживания, требующая наличия грамотных специалистов.

Баги Google Custom Search Engine

Кликните по ссылке, чтобы увидеть анимацию.

Разработчики GCSE оградили себя от общения с некоммерческими пользователями, отсутствует даже багтрекер. Некоторые замеченные на конец марта 2016 глюки:

1. Выдаётся неправильный V1 код для вставки в html-страницу;
2. При добавлении XML-страницы со ссылками, которые должны появляться в поисковой выдаче, необходимые результаты могут отобразиться, а могут и нет;
3. В выдаче не все результаты с сайта kvant.ras.ru;
4. В выдаче не все результаты с сайта inrock.ru;
5. Странное поведение при добавлении сайта ixbt.com,
6. Странное поведение при добавлении сайта ru.ign.com.

Недоработки Google Custom Search Engine

1. Применимость шаблонов URL только для доменов 2-го уровня, но не 3-го и далее, а также разделов сайта. Т. е. можно добавить в каталог шаблон example.com/*kites , но не test.example.com/*kites и example.com/test/*kites;
2. Когда по протоколам http:// и https:// 2 разных сайта, невозможно добавить в Каталог только один из них;
3. Когда с www и без 2 разных сайта, невозможно добавить в Каталог только один из них;

4. Не функционируют шаблоны URL, когда в необходимом URL находится символ # .

5. Чтобы в Панели управления GCSE своей поисковой системой перейти к редактированию добавленного с. под большим, скажем, 996-м номером, требуется не одну минуту жать по стрелке. Приходится вносить изменения в tsv-файлы и загружать их через панель управления. Это также неудобно в плане того, для предпросмотра SERP с нововключённым сайтом загружать приходится довольно часто, удаляя при этом старые файлы.

Почему в сайте Каталога Кристиниты имеется материал по термину, но в Поиске он не выводится?

Тут как проиндексирует Google. Многие параметры настраиваемы, но сам веб-паук остаётся гугловским, от него и пляшем. В «тёмном вебе» ПоКрис тоже не ищет. К сожалению, иногда из-за багов на google.ru нужные результаты есть, а в Поиске Кристиниты они отсутствуют.

Затруднения индексации

1. Фреймы, Flash. Не рекомендуются .

2. Доступ к сайту по IP-адресу, а не доменному имени. Пример — Пензенская энциклопедия по адресу 94.25.70.110/encyc .

3. Домены четвёртого и выше уровней вида yoursite.example1.example2.com .

4. Нахождение файла в ряде подпапок — yourdomain.com/folder1/folder2/folder3/folder4/folder5/folder6/file.html .

Затрудняет жизнь пользовательским поисковым системам и запрет на просмотр директорий, поскольку нельзя прямо проверить, находятся ли в папках только удовлетворяющие критериям поисковика м. или нет. Приходится вводить URL директории в форму поиска и смотреть на выдачу — такой способ не даёт точных результатов.

Нежелательные форматы URL

Иллюстрация к КРИС:URL . Верхний адрес каждой из пар URL — ссылка на энциклопедическую информацию, нижняя — нет. В левом верхнем углу удобный для Пользовательского поиска формат. На трёх остальных с. материалы, представляющие энциклопедическую ценность, невозможно отделить от остальных.

Не позволяют ограничивать пользовательский поиск только определёнными разделами сайта:

1. Размещение по очереди: один материал располагается по адресу yourdomain.com/post/4147 , следующий за ним — yourdomain.com/post/4148 и т. д.

2. Размещение по дате — когда статьи, написанные в один день, имеют вид yourdomain.com/2014/04/07/page4 и yourdomain.com/2014/04/07/page14 .

3. Динамические адреса страниц, содержащие знак вопроса и/или с расширением, отличным от *.htm или *.html, например *.php, *.jsp, *.pl и другие. Имеют вид yourdomain.com/index.php?newsid=4147 . Не рекомендуются ввиду ограничений со стороны поисковых систем, на Apache приводятся в псевдостатический вид с помощью mod_rewrite.

4. Скрытие папок через .htaccess . RewriteRule ^category/(.+)$ http://www.site.com/$1 [R=301,L] URL сменяются с yourdomain.com/folder/file на yourdomain.com/file, и для пользовательского поиска никак нельзя отделить yourdomain.com/folder.

Можно просить владельцев сайтов о редиректах 301, при которых не теряются PageRank и тИЦ, да те с высокой долей вероятности проигнорируют.

Поисковая выдача по ссылкам на странице

Если у сайтов нежелательные форматы URL, но содержание структурировано, распределено по категориям (в примере на скрине «категориями» являются «Новости», «Статьи», «Обзоры» и т. д.), в Google Custom Search Engine можно включить в каталог только содержимое этих категорий, значительно повышая качество и количество поисковой выдачи. Возьмём с. 4pda.ru , откуда требуется включение только обзоров. Но как обзоры, так и вся остальная информация располагаются по адресам вида http://4pda.ru/2016/03/23/285708/ и http://4pda.ru/2016/03/25/286396/ , год - месяц - число - номер статьи. Отфильтровать по URL не получится никак.

Но все ссылки на обзоры находятся на страницах http://4pda.ru/reviews , http://4pda.ru/reviews/page/2 , http://4pda.ru/reviews/page/3, ... , http://4pda.ru/reviews/page/n . Не забывая заменить символы у URL, добавляем в tsv-файл, что загрузим через панель управления, строки cse.google.com/tools/makeannotations?pattern=exact&url=4pda.ru%2Freviews%2Fpage%2F2&label=_cse_lmo7aip_90c&label=_csefeed_lmo7aip_90c для http://4pda.ru/reviews/page/2 или cse.google.com/tools/makeannotations?pattern=exact&url=4pda.ru%2Freviews%2Fpage%2F14&label=_cse_lmo7aip_90c&label=_csefeed_lmo7aip_90c для http://4pda.ru/reviews/page/14 , где _lmo7aip_90c — пометка, индивидуально присваиваемая каждой поисковой системе, посмотреть её можно через «Изменение поисковой системы» → «Настройка» → «Дополнительно» → «Комментарии СПП».

Итог — в выд. ссылки, содержащиеся на страницах http://4pda.ru/reviews/page/2 и http://4pda.ru/reviews/page/14 .

Сложности:

1. Из известных автору ПоКриса поисковых машин реализовано только в Google Custom Search Engine.
2. Да и там уже с двумя тысячами включённых и исключённых сайтов нужные результаты не появляются стабильно в SERP. Предположительно, чем больше разрастётся каталог, тем будет хуже.
3. А добавлять придётся много. Например, исключение новостей из выд. по с. topwar.ru обойдётся на конец марта 2016 в 2670 строк, от topwar.ru/news/page до http://topwar.ru/news/page/2670.
4. Да ещё и постоянно обновлять, ведь содержимое страниц с нужными ссылками динамически меняется.

Посему URL не становятся менее нежелательными.

Хотелки

1. Значки категорий Градации Кристиниты ( и т. д. ) рядом со ссылками в поисковой выдаче. Наподобие цветных полосок на иконках pdf-документов со скриншота SERP сайта eLIBRARY.RU , который вы видите рядом с этими словами.

а) Они упреждают, насколько на свой страх и риск используются материалы источников;
б) Многим может не понравиться, что ПоКрис ищет не только по книгам и журналам, прошедшим научное рецензирование. Но оставлять только такие источники — значит, в разы обеднить количество материалов. Наличие значков позволит переходить только по ссылкам той авторитетности, которую пользователь сочтёт для себя нужной.

2. Расстановка приоритетов, дабы ресурсы с громадной популярностью вроде Academia.edu или Википедии не захламляли поисковую выдачу, а с. с PR/ИЦ равными нулю или близкими к нему показателями не оставались далеко за пределами зоны видимости. Первым выставляем низкие, вторым, как нетрудно догадаться., высокие приоритеты.
Функцию реализовали в ныне почившем Flexum и многих открытых поисковых машинах, но не на сервисах Гугла и Яндекса.

3. Вложенная фильтрация. Когда требуется исключить из выд. результаты с URL http://rockcor.ru/litsection , оставив те, чей адрес содержит http://rockcor.ru/litsection/reviews/ . Присутствует, в частности, у mnoGoSearch.

В то же время, по мнению автора ПоКриса, только во вред идёт сортировка SERP по тематическим кластерам, как то юридические, психологические, биологические и т. п. сайты, ибо нужные сведения часто находятся в источниках другой тематики или сайтах — сборниках справочников. Необходимость в сортировке стремится к нулю, если вводить в поисковую форму чёткие, а не спектральные запросы. Посему функционал «уточнения категорий» GCSE не введён в ПоКрис.

Контакты

По всем вопросам и предложениям, ошибкам и опечаткам, улучшению идейной и технической составляющей, добавлению и удалению веб-сайтов из каталога, изменению категорий ГраКриса для с. обращаться без оскорблений и мата к Саше Черных через виджет обратной связи на сайте Поиска Кристиниты либо по электронному адресу SashaChernykhEmpressOfUniverse(мяу)kristinita.ru . Также можно оставить запрос на Github, нажав на «New Issue».

Сравнение с другими поисковыми системами

Участник:Саша_Черных/Поиск Кристиниты/Примеры

Правовые вопросы

1. Автор Поиска Кристиниты не связан каким-либо образом с сайтами, по которым осуществляется поиск. Если вы считаете, что на каком-либо из веб-ресурсов нарушены ваши авторские права, обращайтесь к его администрации.
   
2. В соответствии с требованием 2 в Каталог Кристиниты не включены сайты с уничижительным контентом, порочащие чью-либо честь и достоинство. Если же в выдаче таковой всё же попадётся, заполните форму на странице поддержки Google. ПоКрис не является личной разработкой, он индексирует точно те же страницы сайтов, что и гугловский поисковик. Когда веб-страница не выводится в выдаче Google, она, соответственно, исключена и из Поиска Кристиниты.

Область поиска

Где ищет Поиск Кристиниты

1. Энциклопедические справочники. Идеальная релевантность, ибо заглавие соответствует описываемому объекту или явлению.
2. Научная и научно-популярная литература.
3. Аналитика, обзоры в зарегистрированных печатных или электронных изданиях. Поскольку журналисты вольны в выборах заголовка и стиля, процент релевантных результатов иногда ниже, чем хотелось бы.
4. Некоторые другие случаи, рассмотренные в Градации.

Где не ищет Поиск Кристиниты

1. Новости. Пользуйтесь Яндекс.Новостями, для поиска устаревших новостей вводите запросы в универсальные поисковики. Текущие события, репортажи, публицистика дня сегодняшнего, анонсы, пресс-релизы, то есть всё, что можно охарактеризовать как временно актуальные материалы. Вне зависимости от качества, подачи и раскрытиям, включая новости науки. Причины:

По трём розовым ссылкам новости на энциклопедический запрос

а) Сильное заполонение зоны видимости новостными результатами, оттеснение остальных источников по любым поисковым запросам, включая энциклопедические. В примере запрос «Dota 2» — значит, его вводящему скорее всего хотелось узнать общую информацию об игре, её описание, а не результаты отдельных турниров на определённых год, представленные по 3-м розовым ссылкам.
б) В энциклопедии их включать не принято, а т. к. ПоКрис по сути представляет собой мегаэнциклопедию, при его составлении поддерживается устоявшийся порядок.

2. Переводческие словари. Если они включены в состав сайта из КатКриса, то по нахождении отфильтровываются. Для машинного перевода текстов используйте занимающую всего 6 Мб оперативки программу QTranslate, где предоставляется возможность пользоваться сервисами Google Translate, Bing Translator, Promt, Babylon, SDL FreeTranslation.com, Yandex.Translate, youdao и Baidu.
Также порекомендовал бы аддон для Firefox www.Translate (к сожалению, разработчики прекратили поддержку): вы выбираете между вариантами перевода от Pragma, Bing и Google, присутствует сортировка по тематикам «Бизнес и экономика», «Информатика», «Здоровье и биология» и т. д.
Прагмой можно переводить и без соединения с интернетом.
Когда необходим перевод специализированных слов, юзайте систему поиска по переводческим словарям на academic.ru.

3. Лингвистические словари. Орфографические, синонимов, ударений и т. п. О разнице между лингвистическими и энциклопедическими словарями см. в эссе ВП:НЕСЛОВАРЬ. В Каталоге Кристиниты отсеиваются так же, как и переводческие.

1. 4. Форумы (кроме профессиональных консультаций), блоги (за исключением тематических, принадлежащих эксперту в сфере), информационно-развлекательные сетевые сообщества.
2. 5. Краткие описания научных статей из аннотаций, ключевых слов и всяких различных о цитировании. ПоКрис ищет только по м., выложенным в открытый доступ целиком, не заменяя полноценного поиска по научным базам. Лучшая выд. кратких описаний среди универсальных русскоязычных научных библиотек у eLIBRARY.RU, прочие — Scholar.ru, Академия Google и JSTOR, при помощи последней ищутся старые статьи. Во многих сферах деятельности имеются собственные базы, для медицины это PubMed, некоторых естественных и технических наук — arXiv.org и т. д. Объёмный список научных библиотек на разных языках с указанием тематик и платные ли они, содержится в Википедии. Казахстанская студентка Саша Элбакян создала проект Sci-Hub, открывающий бесплатный доступ к научным источникам.

Также в КатКрис не попадают с., где выложены только содержания книг и/или периодики; интернет-магазины, где, как правило, даются только аннотации.

1. 6. Художественная литература. У неё иное предназначение. Прочие м., не ставящие первоочередной целью донести до читателя новую информацию.

Как составляется Каталог Кристиниты?

Поиск Кристиниты — одна из многих систем пользовательского поиска Google. Технически любому по силам создать такую же, а если вы владеете английским, HTML, CSS и потому способны разобраться в документации, то ваш поисковик визуально получится и покруче. Вообще, за два часа вы можете включить больше с., нежели автор Поиска Кристиниты собирал в течение месяцев. Только помните, не всё, что назвали «энциклопедией», отличается высокой степенью авторитетности.

Помогайте лучше в разработке Поиска Кристиниты вместо того, чтобы составлять собственные небольшие поисковики по какой-либо сфере деятельности. Ведь в КатКрис помимо сайтов по тематикам включены также отфильтрованные от неэнциклопедического содержимого сборники справочников, универсальные энциклопедии, множество книг и изданий, где может оказаться интересующая вас информация, — да и не исключено, что она найдётся и на с., специализирующихся по другим вопросам.

Как наполняется КатКрис

1. Добавляются заслуживающие внимания с., которые автор в течение долгих лет собирал, находя информацию Нигмой, Яндексом и прочими поисковиками.
2. Проводится поиск каталогов, возможно, энциклопедических материалов. Список проанализированных на март 2016. Все ссылки от начала до конца проверяются вручную (см. ниже) вне зависимости от того, рассматривался ли каталог целенаправленно или попался на глаза случайно.
3. По источникам из сносок, ссылок, разделов «Примечания» Википедии и прочих сайтов категории Градации Кристиниты.
4. Баннеры, ссылки-рекомендации.
5. В универсальные поисковики специально вбиваются понятия, и из выд. вплоть до десятой страницы отбираются сайты. Метод, впрочем, не самый продуктивный.
6. Опрашиваются люди, разбирающиеся в той или иной тематике.
7. Предложить с. через виджет обратной связи может каждый желающий.

И наполнение не самая трудоёмкая часть работы над Каталогом Кристиниты. Далее следует проверка.

Как проверяются сайты-кандидаты на включение в Поиск Кристиниты

1. Бегло изучается, не чисто новостной ли ресурс-кандидат, удовлетворяет ли хоть какая-то его часть остальным требованиям. Если он расположен на домене 3-го уровня, проверяется также и связанный домен 2-го уровня, за исключением, когда тот, — допустим, org.ru или narod.ru, — содержит изобилие поддоменов. Для доменов 4-го уровня рассматриваются связанные 3-го и 2-го.
2. При выполнении предыдущего пункта ищется ссылка на страницу, обычно называемую «О нас», «Редакция» или «О проекте», где содержатся данные об авторах с. Для занесения в Каталог достаточно номера свидетельства о регистрации СМИ.
   Если
   1. таковая страница отсутствует,
   2. сведения об авторстве м. на ней не указаны,
   3. выходные данные ограничены местоимением «мы» и его производными,
   4. авторы признаются, что являются любителями,
   5. авторы контента подписаны именами и фамилиями, а быстрым гуглением не получается определить, профессионалы ли они в теме
      то в случайном порядке отбирается несколько статей ресурса. Возможны 3 варианта:
      1. на с. указываются использованные материалы,
      2. использованные м. указываются периодически,
      3. использованные м. не указываются. Тогда отрывки текста не всегда, но иногда гуглятся на предмет совпадения. Нередко на других с., содержащих те же м., авторство проставили.
3. При неудовлетворении выходных данных ни одной категории Градации Кристиниты с. отсеиваются. Часть забракованных веб-ресурсов представлена в подразделе КРИС:АИ.
4. Проверяется адресная строка. Включение в Каталог сайтов с такими URL, что становится невозможным отфильтровать энциклопедическую информацию, рассматривается в соответствии с КРИС:URL.
5. У включённых в Каталог с. из поисковой выдачи по возможности отсекается следующий контент:
   1. Новости и остальная временно актуальная информация;
   2. Астрология, гороскопы, сонники и прочая паранаука;
   3. Форумы,
   4. Юмор,
   5. Художественная литература,
   6. Коммерческие разделы — купля-продажа, реклама, каталоги коммерческих компаний и специалистов в сфере, где данные предоставлены аффилированными лицами.
      На вики-сайтах исключаются пространства имён Шаблон, Категория и Обсуждение; из сборников справочников лингвистические и переводческие словари. Остальное, — в частности, страницы «Об авторах», «О сайте», «Контакты», — по причине лимита, временны́х затрат и незначительного влияния на качество выдачи не трогается, кроме случаев, где в ходе тестирований (см. ниже) слишком засоряет выдачу. Препятствий для включения в КатКрис интервью нет.
      
      Если энциклопедическая информация на с. содержится в 1—4 разделах, добавляются только эти разделы. Как пример, в ходе проверки сайта zooinform.ru были исключены следующие разделы: zooinform.ru/*exhibitions zooinform.ru/*events zooinform.ru/*pitomniki zooinform.ru/*kotomania zooinform.ru/*blago zooinform.ru/*sport zooinform.ru/*news zooinform.ru/*companies zooinform.ru/business/articles zooinform.ru/*clinics zooinform.ru/vete/blogs
      
      Когда разделов у сайта очень много, что часто характерно для периодики, после ручного отсечения неэнциклопедической информации в поисковую форму ПоКриса вбивается название сайта: в SERP порой оказываются другие замусоривающие м. с этого с. , которые также должны быть удалены.
6. Итак, в саму поисковую систему сайт внесён. Необходимо ещё вписать его на страницу Каталога. Как число не отмеченных на ней сайтов составит несколько сотен, все они в ускоренном режиме перепроверяются по пунктам выше. Устраняются ошибки, оплошности, присваивается одна из категорий Градации Кристиниты: у книг проверяются сведения об авторе, присутствие научных консультантов/рецензентов; в журналах обращается внимание на редколлегию.
   После добавления энного количества с., начинаются тестирования:
   1. Вбивается выражение с использованием оператора site: — site:example.com , где example.com — сайт из каталога. Очень слабо либо совсем непроиндексированные с. удаляются.
   2. В поисковую строку ПоКриса специально вводятся различные понятия, или же он используется по назначению. Удаляются не замеченные ранее части сайтов, заметно замусоривающие выдачу.

Градация Кристиниты

Главная отличительная особенность ПоКриса — ручная подборка материалов, по которым будет вестить поиск.

Правило Википедии об авторитетных источниках гласит о желательности использования статей из уважаемых научных журналов, книг издательств крупных вузов и публикаций в высококачественных новостных организациях. При этом явно не разрешаются или запрещается использование всех остальных источников, что даёт благодатную почву для разного рода манипуляций. В споре опытного, знакомого с премудростями и нюансами викиобщения участника и следующего правилами новичка у первого всегда оказываются относительные, конкретные и контекстуально зависимые источники, тогда как новому участнику приходится смириться с удалением проставленных им ссылок.

В ГраКрисе же онлайн-источники разделены на 7 категорий с чётко прописанными во избежание субъективных трактовок критериями. Обычно, но не всегда, чем выше категория материала по Градации Кристиниты, тем более качественнен и авторитетен. Если с. не удовлетворяет условиям ни одной из категорий — ему не присваивается никакая, и, соответственно, он не включается в КатКрис. Градация проводится от профессиональных м. к любительским. Последние не проходят редакторский контроль, экспертная проверка фактов не выполняется, иногда публикуются недостоверные слухи и предположения; сайты, их содержащие, часто представляют собой самопубликуемые источники, когда владелец собственноручно пишет выставленные им статьи. Продолжающим доверять непрофессиональным материалам крайне рекомендуется к прочтению исчерпывающая характеристика от академика А. А. Зализняка одной из их разновидности — любительской лингвистике.

Градацией оцениваются сайты, а не материалы на них расположенные, но с небольшими поправками — исключением пункта в) категории и пунктов а) и б) категории — её можно применять уже и к самим материалам. М. могут располагаться как на крупном официальном портале, так и в виде копии на чьем-либо личном сайте, — на факт включения это нисколько не повлияет. Когда на с. располагаются материалы, относящиеся к нескольким категориям, Градацией присваивается нижняя из них, если её доля составляет не менее 10% общего контента сайта.

S

а) С., где размещены книги специалистов, написанные с привлечением профессиональных рецензентов или консультантов или написанные группой авторов с учёными званиями и степенями.
б) С. реферируемых журналов,
в) С. периодических изданий с редакционной коллегией, состоящей из как минимум нескольких специалистов с учёными званиями и степенями.

М. данной категории считаются самыми качественными, однако при обращении и с ними приходится сталкиваться с проблемами, самые распространённые из которых:

a) неточности в описании непрофильных или более узких областей знаний,
b) наличие противоречий с прочими источниками данной категории,
c) устаревание,
d) идеологизированность,
e) Выполнение «для галочки».

As

а) С. зарегистрированных периодических изданий;
б) С., где размещены выпущенные издательствами книги, написанные профессионалами в своей сфере;
в) С, где без существенных поправок скомпилированы материалы категорий и, возможно, из различных источников. Ввиду значительных временных затрат на проверку, все ли м. допустимо относить к , веб-ресурсам присваивается категория .

Ha

а) Личные с. экспертов по теме; с., где выложен самиздат специалистов;
Примеры: coleop123.narod.ru vs-baronin.livejournal.com
б) С. неизданных энциклопедий и словарей, фактически контролирующиеся профильными специалистами;
Примеры: wiki.web.ru ejwiki.org glossostav.ru
в) Энциклопедические справочники, даже неподписанные, размещённые на с. с длительной историей и немалым количеством сотрудников (либо таковыми у объектов, чьими официальными ресурсами они являются), находящихся в числе лидеров освещения своих тематик;
Примеры: tretyakovgallery.ru/ru/collection justlady.ru/modnyy-slovar
г) С., где располагаются м. профессионалов не по своей специализации, написанные с привлечением хотя бы одного консультанта.

Ch

а) С., на которых выложены выпущенные книгой, в печатных изданиях либо впервые опубликованы энциклопедические м. — обычно научно-популярные — учёных или профессиональных журналистов по тематике, отличной от специализации, выполненные без помощи профильных экспертов. Будьте внимательны, авторы, в условиях капитализма вынужденные браться не за свои занятия, порой недостаточно глубоко разбираются в теме, на которую садятся писать.
Примеры: artchive.ru/encyclopedia

На сайтах категории Ny обращайте внимание на подпись. К статье с верхнего изображения она не проставлена, информация могла быть взята откуда угодно, к статье же с нижнего проставлен источник.

Er

а) С. любителей, да и любых анонимов, где практически везде указываются использовавшихся в работе независимые источники, среди которых большая часть составляет материалы 4-х категорий выше.
Примеры: a-pesni.org airwar.ru
б) С. на технологии wiki, где принято ссылаться на источники. Качество статей в пределах одного такого сайта обыкновенно разнится.
Примеры: cyclowiki.org

Ny

Если в подписи материала сайта категории Ny указывается имя составителя и год выпуска, вероятность, что информация взята из серьёзного издания, повышается в разы. На верхнем скриншоте Католическая Энциклопедия. EdwART. Что за EdwART — непонятно. Тогда как выходные данные с нижнего скрина позволяют доверять означенной энциклопедии.

а) С., чьё содержание не полностью, но не менее, чем на 25 % состоит из публикаций материалов категорий выше. Узнать, какие же использовались м., часто можно по подписи.
б) С. сборников справочников, где не указываются выходные данные всех используемых м. В состав включаются как энциклопедии, составленные десятками учёных, так и собранные где-нибудь в сети любительские словари.
Примеры: enc-dic.com edudic.ru
в) С., где принято ссылаться на источники, но среди них содержатся и не подпадающие под категории Градации Кристиниты.
Примеры: easyelite-home.ru — статья http://easyelite-home.ru/magician7.htm ссылается на неавторитетный сайт peoples.ru

Kh

а) Крайне редко сайтам, информация об авторстве на которых соответствует любому кроме 5.1 и 5.2 подпунктам подраздела Как проверяются сайты-кандидаты на включение в Поиск Кристиниты может быть присвоена категория . При рассмотрении вопроса о включении обязательно учитывается допустимость использования непрофессиональных материалов по тематике: так, можно по жаргону и рецензиям на компьютерные игры, но ни в коем случае не по квантовой механике. Критериями для включения также служат высокое качество м. и раскрытие скудно представленной в Каталоге темы. Решение принимается индивидуально по каждому ресурсу. Рефераты, курсовые и дипломные работы не подпадают даже под , диссертациям же и авторефератам присваиваются категории выше.
Примеры: horror-movies.ru song-story.ru

Глоссарий

Ко всем материалам, связанным с Поиском Кристиниты.

Справочник, энциклопедический справочник — в теории существуют определения к понятиям «энциклопедия», «справочник» и «словарь», на практике же авторы нарекают свои детища по собственному усмотрению, что не всегда соответствует принятым в издательском деле понятиям. Поэтому в рамках тезауруса данной статьи вводится наиболее подходящий, по мнению создателя Поиска Кристиниты, для описания содержимого каталога термин «справочник» с чётким определением. Здесь и далее по тексту под «справочником» или «энциклопедическим справочником» подразумевается издание, где в алфавитном порядке и энциклопедическом стиле достаточно подробно описывается какая-либо сфера знаний.

Поисковый сервис, поисковая система, поисковик, поиск — в пределах статей о Поиске Кристиниты любой веб-сайт, необязательно поисковая машина, на котором пользователь по заданному запросу получает ссылки на другие сайты либо на содержимое того же с., где расположена форма поиска.

С. — сайт/ы или их части, где содержится энциклопедическая информация,
М. — материал/ы; содержимое с.,
Вики, вики — Википедия,
ПоКрис — Поиск Кристиниты,
ГрадКрис — Градация Кристиниты,
КатКрис — Каталог Кристиниты,
Каталог — множество с., объединённых тематикой или прочим признаком
Выд., "выдача", "SERP" — поисковая выдача,
Рез. — результаты поисковой выдачи. GCSE — Google Custom Search Engine

Послесловие

Прискорбно наблюдать, как те же деятели науки и культуры, что повсеместно выступают с заявлениями о деградации образования и развале науки, собственноручно ограничивают свободный доступ к стоящим внимания источникам.

Пример для подражания — zdlm.ru . Номера журнала старше 2-х лет выкладываются в свободный доступ.

1. Понятно, что всем нужно зарабатывать, продавая свежие книги, журналы и газеты, прежде чем выкладывать их в сеть. Но от кого в годы торрент-трекеров защищать авторским правом старые ещё с советских времён издания? Много ли получается наварить на делах давно минувших дней вместо того, чтобы выложить информацию на свой сайт, зарабатывая на рекламе? Теперь за информацией прежде всего обращаются к поисковикам, а не отдельно взятым источникам, которым с каждым годом всё бессмысленнее конкурировать со Всемирной паутиной.
   
2. На многих сайтах материалы выложены на файлообменники либо представлены внутри неиндексируемых краулерами изображений (см. КРИС:DjVu). Пожалуйста, подумайте о желающих получать знания пользователях, выкладывайте контент на html-страницах без всяких сложных онлайн-просмотрщиков и файлообменников или хотя бы в текстовых форматах для скачивания, не запаковывая файлы в архивы. Поисковики увидят ваши материалы, что повысит посещаемость каждой вашей же статьи, — которая будет составлять уже не 0,6 и не 5 читателей, а много больше, — со всеми вытекающими, в том числе финансовыми преимуществами.
   

За свободным доступом к знаниям ближайшее будущее, так не отдаляйте же его наступление. Работайте над собой.