Как я могу улучшить эту ленту новостей PHP/MySQL?

позвольте мне начать с самого начала, сказав, что я знаю, что это не лучшее решение. Я знаю, что это клуджи и взлом функции. но именно поэтому я здесь!

этот вопрос/работа строитсяобсуждение на Quora с Эндрю Босворт, создатель ленты новостей Facebook.

я строю ленту новостей сортов. Он построен исключительно в PHP и MySQL.

MySQL

реляционная модель для канала состоит из двух таблиц. Одна таблица функционирует как журнал действий; фактически, она называется activity_log. Другая таблица -newsfeed. эти таблицы почти идентичны.

The схема для журнала и activity_log(uid INT(11), activity ENUM, activity_id INT(11), title TEXT, date TIMESTAMP)

...а то схемы для кормов и newsfeed(uid INT(11), poster_uid INT(11), activity ENUM, activity_id INT(11), title TEXT, date TIMESTAMP).

в любое время пользователь делает что-то отношение к ленте новостей, например, задавая вопрос, он будет записан в журнал активности немедленно.

создание ленты новостей

затем каждые X минут (5 минут на данный момент, изменится на 15-30 минут позже), я запускаю задание cron который выполняет сценарий ниже. Этот скрипт перебирает всех пользователей в базе данных, находит все действия для всего этого друзей пользователя, а затем записывает эти действия в ленту новостей.

на данный момент SQL что отбраковывает активность (вызывается в ActivityLog::getUsersActivity()), имеет LIMIT 100 наложено по соображениям производительности*. *Не то чтобы я знаю, о чем говорю.

<?php

$user = new User();
$activityLog = new ActivityLog();
$friend = new Friend();
$newsFeed = new NewsFeed();

// Get all the users
$usersArray = $user->getAllUsers();
foreach($usersArray as $userArray) {

  $uid = $userArray['uid'];

  // Get the user's friends
  $friendsJSON = $friend->getFriends($uid);
  $friendsArray = json_decode($friendsJSON, true);

  // Get the activity of each friend
  foreach($friendsArray as $friendArray) {
    $array = $activityLog->getUsersActivity($friendArray['fid2']);

    // Only write if the user has activity
    if(!empty($array)) {

      // Add each piece of activity to the news feed
      foreach($array as $news) {
        $newsFeed->addNews($uid, $friendArray['fid2'], $news['activity'], $news['activity_id'], $news['title'], $news['time']);
      }
    }
  }
}

отображение новостей

в клиентском коде, при получении ленты новостей пользователя, я делаю что-то вроде:

$feedArray = $newsFeed->getUsersFeedWithLimitAndOffset($uid, 25, 0);

foreach($feedArray as $feedItem) {

// Use a switch to determine the activity type here, and display based on type
// e.g. User Name asked A Question
// where "A Question" == $feedItem['title'];

}

улучшение Ленты Новостей

теперь простите мое ограниченное понимание лучших практик для разработки ленты новостей, но я понимаю подход, который я использую, чтобы быть ограниченной версией того, что называется разветвление на write, ограниченный в том смысле, что я запускаю задание cron в качестве промежуточного шага вместо прямой записи в новостные ленты пользователей. Но это очень отличается от модели pull, в том смысле, что лента новостей пользователя не компилируется при загрузке, а скорее на регулярной основе.

это a большой вопрос, который, вероятно, заслуживает большого количества взад и вперед, но я думаю, что он может служить пробным камнем для многих важных разговоров, которые должны иметь новые разработчики, такие как я. Я просто пытаюсь понять, что я делаю неправильно, как я могу улучшить, или как я должен, возможно, даже начать с нуля и попробовать другой подход.

еще одна вещь, которая меня беспокоит в этой модели, заключается в том, что она работает на основе новизны, а не релевантности. Если кто-нибудь может подсказать, как это может быть я бы с удовольствием поработал в этом направлении. Я использую API Directed Edge для генерации рекомендаций, но кажется, что для чего-то вроде ленты новостей рекомендатели не будут работать (поскольку ранее ничего не было фаворитов!).