codex-team / codex-orion Goto Github PK

Реализовать в проекте демо-версию работы с Twitter-API, описанную в http://www.cakesolutions.net/teamblogs/2013/12/08/streaming-twitter-api-in-akka-and-spray

• Изучить примеры использования Akka Streams.
• Сделать демо-версию работы с Twitter Api #7.
• Перевести работу с Twitter Api на Akka Http + Akka Streams #8.
• Разобраться в апишке твиттера и написать доку про то, что и как будет использоваться:
  https://dev.twitter.com/streaming/overview
• Сделать заглушку для аналитики потоков.
• Добавить простую аналитику.
• Выводить аналитику в качестве Rest-страницы.

Нужно сравнить удобство чтения

Сейчас у нас есть очень простой парсер Russia Today и на его примере мы можем создать каркас.
Пока что, мы (@eliseealex и @n0str) решили делать парсинг в три этапа:

1. Получение списка новостей по таймеру, вызванному из Main. И передача результата запроса следующему актору.
2. Разбиение списка новостей на отдельные новости и передача этого списка следующему актору.
3. Парсинг статьи в общий формат для всех издательств и передача, следующему актору для аналитики.

Предполагается, что каждый из этих акторов будет в единственном экземпляре для всех источников новостей и в каждом из них будет содержаться только логика по передаче сообщения обработчику и, может быть, вызову следующего актора.

Комментарии там используются через сторонний виджет. Нужно будет разобраться в скриптах и получать число и содержание комментариев отдельным запросом для каждой статьи.

Подумать не вынести ли это в child actor.

• @eliseealex
• @neSpecc