Персонализация контента с помощью yii, sphinx и couchbase

Персонализация контента с помощью Yii, Sphinx и Couchbase

Артём Демченков (Онтико)

ООО “Онтико”

Что такое “Персонализация контента?”

Youtube.com

Виды рекомендованного контента

- Страницы, связанные с уже просмотренными страницами.

- Страницы, связанные с контентом текущей страницы.

- Страницы, связанные с вашими интересами.

- Страницы, специально подобранные вам редактором сайта.

Связь через теги на примере сайта медицинской

тематики

Теги на странице сайта

Исходные данные

- PHP (Yii Framework)


- PHP (Yii Framework)- 50 000 статей, 100 000 новостей


- PHP (Yii Framework)- 50 000 статей, 100 000 новостей- 50 000 тегов в MySQL


- PHP (Yii Framework)- 50 000 статей, 100 000 новостей- 50 000 тегов в MySQL- У каждого тега есть родитель, потомки и связанные теги

Дерево тегов (Каталог медицинских терминов)

Архитектура системы

NGINX PHP SPHINX

Memcache

MySQLCouchbase

Запрос виджета

Упрощенная структура базы данных

med_news

id

title

text

is_publish

med_tags

id

title

is_publish

med_news_tags

id

news_id

tag_id

Sphinx

Для индексации используем запрос:

sql_query = SELECT n.id as id, GROUP_CONCAT(CONCAT('searchtag',t.tag_id)) as news_index FROM med_news n LEFT JOIN med_news_tags t ON t.news_id=n.id WHERE n.is_publish=1 GROUP BY n.id

При поиске передаем Sphinx'у строку вида:

“searchtag1 searchtag2 searchtag3 searchtag4...”

Алгоритм подбора поискового запроса

1. Теги страницы



2. Дочерние теги каждого из тегов страницы




3. Теги, связанных с каждым из тегов страницы





4. Родитель каждого из тегов страницы

Дерево тегов (Каталог медицинских терминов)






А если материалов не хватает, то все сначала :-)

MySQL?

Выходим из мейнстрима

1. Хранит часто используемые данные в оперативной памяти, а редкие на диске.

2. Позволяет удобно реплицировать данные на несколькоcерверов.

http://www.couchbase.com/

Каждый тег в Couchbase

25 = { “n” : 2, “a” : 1, “p” : 156, “d” : “6, 7, 8”, “r” : “35, 56, 33” }

Подбор строки





Связь Couchbase и Yii (1 способ)

Библиотека,основанная на протоколе Memcached.

Для установки можно положить файлы библиотекив папку /protected/vendors и подключить в /protected/config/main.php

https://github.com/couchbaselabs/php-couchbase

Связь Couchbase и Yii (2 способ)

PHP Client Library

Библиотека написана на С и собирается из исходников.

http://www.couchbase.com/develop/php/current

Связь Sphinx и Yii (1 способ)

Расширение Dgsphinxsearch

Способ установки подробно описан на странице расширения:

http://www.yiiframework.com/extension/dgsphinxsearch

Связь Sphinx и Yii (2 способ)

Sphinx API

Для установки можно положить файл APIв папку /protected/vendors и подключить в /protected/config/main.php

http://code.google.com/p/sphinxsearch/source/browse/trunk/api/sphinxapi.php

И наконец...

1. Поисковый запрос в Sphinx

2. Результат в Memcache

3. И в браузер пользователю

Спасибо за внимание

Артём Демченков

@ : [email protected], [email protected]

: ardemchenkov

Персонализация контента с помощью yii, sphinx и couchbase

Technology