Queue.php is now moved as well
This commit is contained in:
Michael
parent
501514bd54
commit
98686e9091
4 changed files with 190 additions and 195 deletions
|
|
@ -1,191 +0,0 @@
|
||||||
<?php
|
|
||||||
/**
|
|
||||||
* @file include/queue.php
|
|
||||||
*/
|
|
||||||
use Friendica\Core\Cache;
|
|
||||||
use Friendica\Core\Config;
|
|
||||||
use Friendica\Core\Worker;
|
|
||||||
use Friendica\Database\DBM;
|
|
||||||
use Friendica\Protocol\Diaspora;
|
|
||||||
use Friendica\Protocol\DFRN;
|
|
||||||
use Friendica\Protocol\PortableContact;
|
|
||||||
|
|
||||||
require_once 'include/queue_fn.php';
|
|
||||||
require_once 'include/datetime.php';
|
|
||||||
require_once 'include/items.php';
|
|
||||||
require_once 'include/bbcode.php';
|
|
||||||
|
|
||||||
function queue_run(&$argv, &$argc)
|
|
||||||
{
|
|
||||||
global $a;
|
|
||||||
|
|
||||||
if ($argc > 1) {
|
|
||||||
$queue_id = intval($argv[1]);
|
|
||||||
} else {
|
|
||||||
$queue_id = 0;
|
|
||||||
}
|
|
||||||
|
|
||||||
$cachekey_deadguy = 'queue_run:deadguy:';
|
|
||||||
$cachekey_server = 'queue_run:server:';
|
|
||||||
|
|
||||||
if (!$queue_id) {
|
|
||||||
logger('queue: start');
|
|
||||||
|
|
||||||
// Handling the pubsubhubbub requests
|
|
||||||
Worker::add(array('priority' => PRIORITY_HIGH, 'dont_fork' => true), 'pubsubpublish');
|
|
||||||
|
|
||||||
$r = q(
|
|
||||||
"SELECT `queue`.*, `contact`.`name`, `contact`.`uid` FROM `queue`
|
|
||||||
INNER JOIN `contact` ON `queue`.`cid` = `contact`.`id`
|
|
||||||
WHERE `queue`.`created` < UTC_TIMESTAMP() - INTERVAL 3 DAY"
|
|
||||||
);
|
|
||||||
|
|
||||||
if (DBM::is_result($r)) {
|
|
||||||
foreach ($r as $rr) {
|
|
||||||
logger('Removing expired queue item for ' . $rr['name'] . ', uid=' . $rr['uid']);
|
|
||||||
logger('Expired queue data: ' . $rr['content'], LOGGER_DATA);
|
|
||||||
}
|
|
||||||
q("DELETE FROM `queue` WHERE `created` < UTC_TIMESTAMP() - INTERVAL 3 DAY");
|
|
||||||
}
|
|
||||||
|
|
||||||
/*
|
|
||||||
* For the first 12 hours we'll try to deliver every 15 minutes
|
|
||||||
* After that, we'll only attempt delivery once per hour.
|
|
||||||
*/
|
|
||||||
$r = q("SELECT `id` FROM `queue` WHERE ((`created` > UTC_TIMESTAMP() - INTERVAL 12 HOUR AND `last` < UTC_TIMESTAMP() - INTERVAL 15 MINUTE) OR (`last` < UTC_TIMESTAMP() - INTERVAL 1 HOUR)) ORDER BY `cid`, `created`");
|
|
||||||
|
|
||||||
call_hooks('queue_predeliver', $a, $r);
|
|
||||||
|
|
||||||
if (DBM::is_result($r)) {
|
|
||||||
foreach ($r as $q_item) {
|
|
||||||
logger('Call queue for id '.$q_item['id']);
|
|
||||||
Worker::add(array('priority' => PRIORITY_LOW, 'dont_fork' => true), "queue", (int)$q_item['id']);
|
|
||||||
}
|
|
||||||
}
|
|
||||||
return;
|
|
||||||
}
|
|
||||||
|
|
||||||
|
|
||||||
// delivering
|
|
||||||
|
|
||||||
require_once 'include/salmon.php';
|
|
||||||
|
|
||||||
$r = q(
|
|
||||||
"SELECT * FROM `queue` WHERE `id` = %d LIMIT 1",
|
|
||||||
intval($queue_id)
|
|
||||||
);
|
|
||||||
|
|
||||||
if (!DBM::is_result($r)) {
|
|
||||||
return;
|
|
||||||
}
|
|
||||||
|
|
||||||
$q_item = $r[0];
|
|
||||||
|
|
||||||
$c = q(
|
|
||||||
"SELECT * FROM `contact` WHERE `id` = %d LIMIT 1",
|
|
||||||
intval($q_item['cid'])
|
|
||||||
);
|
|
||||||
|
|
||||||
if (!DBM::is_result($c)) {
|
|
||||||
remove_queue_item($q_item['id']);
|
|
||||||
return;
|
|
||||||
}
|
|
||||||
|
|
||||||
$dead = Cache::get($cachekey_deadguy.$c[0]['notify']);
|
|
||||||
|
|
||||||
if (!is_null($dead) && $dead) {
|
|
||||||
logger('queue: skipping known dead url: '.$c[0]['notify']);
|
|
||||||
update_queue_time($q_item['id']);
|
|
||||||
return;
|
|
||||||
}
|
|
||||||
|
|
||||||
$server = PortableContact::detectServer($c[0]['url']);
|
|
||||||
|
|
||||||
if ($server != "") {
|
|
||||||
$vital = Cache::get($cachekey_server.$server);
|
|
||||||
|
|
||||||
if (is_null($vital)) {
|
|
||||||
logger("Check server ".$server." (".$c[0]["network"].")");
|
|
||||||
|
|
||||||
$vital = PortableContact::checkServer($server, $c[0]["network"], true);
|
|
||||||
Cache::set($cachekey_server.$server, $vital, CACHE_QUARTER_HOUR);
|
|
||||||
}
|
|
||||||
|
|
||||||
if (!is_null($vital) && !$vital) {
|
|
||||||
logger('queue: skipping dead server: '.$server);
|
|
||||||
update_queue_time($q_item['id']);
|
|
||||||
return;
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
$u = q(
|
|
||||||
"SELECT `user`.*, `user`.`pubkey` AS `upubkey`, `user`.`prvkey` AS `uprvkey`
|
|
||||||
FROM `user` WHERE `uid` = %d LIMIT 1",
|
|
||||||
intval($c[0]['uid'])
|
|
||||||
);
|
|
||||||
if (!DBM::is_result($u)) {
|
|
||||||
remove_queue_item($q_item['id']);
|
|
||||||
return;
|
|
||||||
}
|
|
||||||
|
|
||||||
$data = $q_item['content'];
|
|
||||||
$public = $q_item['batch'];
|
|
||||||
$contact = $c[0];
|
|
||||||
$owner = $u[0];
|
|
||||||
|
|
||||||
$deliver_status = 0;
|
|
||||||
|
|
||||||
switch ($contact['network']) {
|
|
||||||
case NETWORK_DFRN:
|
|
||||||
logger('queue: dfrndelivery: item '.$q_item['id'].' for '.$contact['name'].' <'.$contact['url'].'>');
|
|
||||||
$deliver_status = DFRN::deliver($owner, $contact, $data);
|
|
||||||
|
|
||||||
if ($deliver_status == (-1)) {
|
|
||||||
update_queue_time($q_item['id']);
|
|
||||||
Cache::set($cachekey_deadguy.$contact['notify'], true, CACHE_QUARTER_HOUR);
|
|
||||||
} else {
|
|
||||||
remove_queue_item($q_item['id']);
|
|
||||||
}
|
|
||||||
break;
|
|
||||||
case NETWORK_OSTATUS:
|
|
||||||
if ($contact['notify']) {
|
|
||||||
logger('queue: slapdelivery: item '.$q_item['id'].' for '.$contact['name'].' <'.$contact['url'].'>');
|
|
||||||
$deliver_status = slapper($owner, $contact['notify'], $data);
|
|
||||||
|
|
||||||
if ($deliver_status == (-1)) {
|
|
||||||
update_queue_time($q_item['id']);
|
|
||||||
Cache::set($cachekey_deadguy.$contact['notify'], true, CACHE_QUARTER_HOUR);
|
|
||||||
} else {
|
|
||||||
remove_queue_item($q_item['id']);
|
|
||||||
}
|
|
||||||
}
|
|
||||||
break;
|
|
||||||
case NETWORK_DIASPORA:
|
|
||||||
if ($contact['notify']) {
|
|
||||||
logger('queue: diaspora_delivery: item '.$q_item['id'].' for '.$contact['name'].' <'.$contact['url'].'>');
|
|
||||||
$deliver_status = Diaspora::transmit($owner, $contact, $data, $public, true);
|
|
||||||
|
|
||||||
if ($deliver_status == (-1)) {
|
|
||||||
update_queue_time($q_item['id']);
|
|
||||||
Cache::set($cachekey_deadguy.$contact['notify'], true, CACHE_QUARTER_HOUR);
|
|
||||||
} else {
|
|
||||||
remove_queue_item($q_item['id']);
|
|
||||||
}
|
|
||||||
}
|
|
||||||
break;
|
|
||||||
|
|
||||||
default:
|
|
||||||
$params = array('owner' => $owner, 'contact' => $contact, 'queue' => $q_item, 'result' => false);
|
|
||||||
call_hooks('queue_deliver', $a, $params);
|
|
||||||
|
|
||||||
if ($params['result']) {
|
|
||||||
remove_queue_item($q_item['id']);
|
|
||||||
} else {
|
|
||||||
update_queue_time($q_item['id']);
|
|
||||||
}
|
|
||||||
break;
|
|
||||||
}
|
|
||||||
logger('Deliver status '.(int)$deliver_status.' for item '.$q_item['id'].' to '.$contact['name'].' <'.$contact['url'].'>');
|
|
||||||
|
|
||||||
return;
|
|
||||||
}
|
|
||||||
|
|
@ -39,7 +39,7 @@ Class Cron {
|
||||||
logger('cron: start');
|
logger('cron: start');
|
||||||
|
|
||||||
// run queue delivery process in the background
|
// run queue delivery process in the background
|
||||||
Worker::add(PRIORITY_NEGLIGIBLE, "queue");
|
Worker::add(PRIORITY_NEGLIGIBLE, "Queue");
|
||||||
|
|
||||||
// run the process to discover global contacts in the background
|
// run the process to discover global contacts in the background
|
||||||
Worker::add(PRIORITY_LOW, "DiscoverPoCo");
|
Worker::add(PRIORITY_LOW, "DiscoverPoCo");
|
||||||
|
|
|
||||||
|
|
@ -58,13 +58,13 @@ class Expire {
|
||||||
logger('expire: start');
|
logger('expire: start');
|
||||||
|
|
||||||
Worker::add(array('priority' => $a->queue['priority'], 'created' => $a->queue['created'], 'dont_fork' => true),
|
Worker::add(array('priority' => $a->queue['priority'], 'created' => $a->queue['created'], 'dont_fork' => true),
|
||||||
'expire', 'delete');
|
'Expire', 'delete');
|
||||||
|
|
||||||
$r = dba::p("SELECT `uid`, `username` FROM `user` WHERE `expire` != 0");
|
$r = dba::p("SELECT `uid`, `username` FROM `user` WHERE `expire` != 0");
|
||||||
while ($row = dba::fetch($r)) {
|
while ($row = dba::fetch($r)) {
|
||||||
logger('Calling expiry for user '.$row['uid'].' ('.$row['username'].')', LOGGER_DEBUG);
|
logger('Calling expiry for user '.$row['uid'].' ('.$row['username'].')', LOGGER_DEBUG);
|
||||||
Worker::add(array('priority' => $a->queue['priority'], 'created' => $a->queue['created'], 'dont_fork' => true),
|
Worker::add(array('priority' => $a->queue['priority'], 'created' => $a->queue['created'], 'dont_fork' => true),
|
||||||
'expire', (int)$row['uid']);
|
'Expire', (int)$row['uid']);
|
||||||
}
|
}
|
||||||
dba::close($r);
|
dba::close($r);
|
||||||
|
|
||||||
|
|
@ -74,7 +74,7 @@ class Expire {
|
||||||
foreach ($a->hooks['expire'] as $hook) {
|
foreach ($a->hooks['expire'] as $hook) {
|
||||||
logger("Calling expire hook for '" . $hook[1] . "'", LOGGER_DEBUG);
|
logger("Calling expire hook for '" . $hook[1] . "'", LOGGER_DEBUG);
|
||||||
Worker::add(array('priority' => $a->queue['priority'], 'created' => $a->queue['created'], 'dont_fork' => true),
|
Worker::add(array('priority' => $a->queue['priority'], 'created' => $a->queue['created'], 'dont_fork' => true),
|
||||||
'expire', 'hook', $hook[1]);
|
'Expire', 'hook', $hook[1]);
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
|
|
|
||||||
186
src/Worker/Queue.php
Normal file
186
src/Worker/Queue.php
Normal file
|
|
@ -0,0 +1,186 @@
|
||||||
|
<?php
|
||||||
|
/**
|
||||||
|
* @file include/queue.php
|
||||||
|
*/
|
||||||
|
use Friendica\Core\Cache;
|
||||||
|
use Friendica\Core\Config;
|
||||||
|
use Friendica\Core\Worker;
|
||||||
|
use Friendica\Database\DBM;
|
||||||
|
use Friendica\Protocol\Diaspora;
|
||||||
|
use Friendica\Protocol\DFRN;
|
||||||
|
use Friendica\Protocol\PortableContact;
|
||||||
|
|
||||||
|
require_once 'include/queue_fn.php';
|
||||||
|
require_once 'include/datetime.php';
|
||||||
|
require_once 'include/items.php';
|
||||||
|
require_once 'include/bbcode.php';
|
||||||
|
require_once 'include/salmon.php';
|
||||||
|
|
||||||
|
class Queue {
|
||||||
|
public static function execute($queue_id = 0)
|
||||||
|
{
|
||||||
|
global $a;
|
||||||
|
|
||||||
|
$cachekey_deadguy = 'queue_run:deadguy:';
|
||||||
|
$cachekey_server = 'queue_run:server:';
|
||||||
|
|
||||||
|
if (!$queue_id) {
|
||||||
|
logger('queue: start');
|
||||||
|
|
||||||
|
// Handling the pubsubhubbub requests
|
||||||
|
Worker::add(array('priority' => PRIORITY_HIGH, 'dont_fork' => true), 'pubsubpublish');
|
||||||
|
|
||||||
|
$r = q(
|
||||||
|
"SELECT `queue`.*, `contact`.`name`, `contact`.`uid` FROM `queue`
|
||||||
|
INNER JOIN `contact` ON `queue`.`cid` = `contact`.`id`
|
||||||
|
WHERE `queue`.`created` < UTC_TIMESTAMP() - INTERVAL 3 DAY"
|
||||||
|
);
|
||||||
|
|
||||||
|
if (DBM::is_result($r)) {
|
||||||
|
foreach ($r as $rr) {
|
||||||
|
logger('Removing expired queue item for ' . $rr['name'] . ', uid=' . $rr['uid']);
|
||||||
|
logger('Expired queue data: ' . $rr['content'], LOGGER_DATA);
|
||||||
|
}
|
||||||
|
q("DELETE FROM `queue` WHERE `created` < UTC_TIMESTAMP() - INTERVAL 3 DAY");
|
||||||
|
}
|
||||||
|
|
||||||
|
/*
|
||||||
|
* For the first 12 hours we'll try to deliver every 15 minutes
|
||||||
|
* After that, we'll only attempt delivery once per hour.
|
||||||
|
*/
|
||||||
|
$r = q("SELECT `id` FROM `queue` WHERE ((`created` > UTC_TIMESTAMP() - INTERVAL 12 HOUR AND `last` < UTC_TIMESTAMP() - INTERVAL 15 MINUTE) OR (`last` < UTC_TIMESTAMP() - INTERVAL 1 HOUR)) ORDER BY `cid`, `created`");
|
||||||
|
|
||||||
|
call_hooks('queue_predeliver', $a, $r);
|
||||||
|
|
||||||
|
if (DBM::is_result($r)) {
|
||||||
|
foreach ($r as $q_item) {
|
||||||
|
logger('Call queue for id '.$q_item['id']);
|
||||||
|
Worker::add(array('priority' => PRIORITY_LOW, 'dont_fork' => true), "Queue", (int)$q_item['id']);
|
||||||
|
}
|
||||||
|
}
|
||||||
|
return;
|
||||||
|
}
|
||||||
|
|
||||||
|
|
||||||
|
// delivering
|
||||||
|
|
||||||
|
$r = q(
|
||||||
|
"SELECT * FROM `queue` WHERE `id` = %d LIMIT 1",
|
||||||
|
intval($queue_id)
|
||||||
|
);
|
||||||
|
|
||||||
|
if (!DBM::is_result($r)) {
|
||||||
|
return;
|
||||||
|
}
|
||||||
|
|
||||||
|
$q_item = $r[0];
|
||||||
|
|
||||||
|
$c = q(
|
||||||
|
"SELECT * FROM `contact` WHERE `id` = %d LIMIT 1",
|
||||||
|
intval($q_item['cid'])
|
||||||
|
);
|
||||||
|
|
||||||
|
if (!DBM::is_result($c)) {
|
||||||
|
remove_queue_item($q_item['id']);
|
||||||
|
return;
|
||||||
|
}
|
||||||
|
|
||||||
|
$dead = Cache::get($cachekey_deadguy.$c[0]['notify']);
|
||||||
|
|
||||||
|
if (!is_null($dead) && $dead) {
|
||||||
|
logger('queue: skipping known dead url: '.$c[0]['notify']);
|
||||||
|
update_queue_time($q_item['id']);
|
||||||
|
return;
|
||||||
|
}
|
||||||
|
|
||||||
|
$server = PortableContact::detectServer($c[0]['url']);
|
||||||
|
|
||||||
|
if ($server != "") {
|
||||||
|
$vital = Cache::get($cachekey_server.$server);
|
||||||
|
|
||||||
|
if (is_null($vital)) {
|
||||||
|
logger("Check server ".$server." (".$c[0]["network"].")");
|
||||||
|
|
||||||
|
$vital = PortableContact::checkServer($server, $c[0]["network"], true);
|
||||||
|
Cache::set($cachekey_server.$server, $vital, CACHE_QUARTER_HOUR);
|
||||||
|
}
|
||||||
|
|
||||||
|
if (!is_null($vital) && !$vital) {
|
||||||
|
logger('queue: skipping dead server: '.$server);
|
||||||
|
update_queue_time($q_item['id']);
|
||||||
|
return;
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
$u = q(
|
||||||
|
"SELECT `user`.*, `user`.`pubkey` AS `upubkey`, `user`.`prvkey` AS `uprvkey`
|
||||||
|
FROM `user` WHERE `uid` = %d LIMIT 1",
|
||||||
|
intval($c[0]['uid'])
|
||||||
|
);
|
||||||
|
if (!DBM::is_result($u)) {
|
||||||
|
remove_queue_item($q_item['id']);
|
||||||
|
return;
|
||||||
|
}
|
||||||
|
|
||||||
|
$data = $q_item['content'];
|
||||||
|
$public = $q_item['batch'];
|
||||||
|
$contact = $c[0];
|
||||||
|
$owner = $u[0];
|
||||||
|
|
||||||
|
$deliver_status = 0;
|
||||||
|
|
||||||
|
switch ($contact['network']) {
|
||||||
|
case NETWORK_DFRN:
|
||||||
|
logger('queue: dfrndelivery: item '.$q_item['id'].' for '.$contact['name'].' <'.$contact['url'].'>');
|
||||||
|
$deliver_status = DFRN::deliver($owner, $contact, $data);
|
||||||
|
|
||||||
|
if ($deliver_status == (-1)) {
|
||||||
|
update_queue_time($q_item['id']);
|
||||||
|
Cache::set($cachekey_deadguy.$contact['notify'], true, CACHE_QUARTER_HOUR);
|
||||||
|
} else {
|
||||||
|
remove_queue_item($q_item['id']);
|
||||||
|
}
|
||||||
|
break;
|
||||||
|
case NETWORK_OSTATUS:
|
||||||
|
if ($contact['notify']) {
|
||||||
|
logger('queue: slapdelivery: item '.$q_item['id'].' for '.$contact['name'].' <'.$contact['url'].'>');
|
||||||
|
$deliver_status = slapper($owner, $contact['notify'], $data);
|
||||||
|
|
||||||
|
if ($deliver_status == (-1)) {
|
||||||
|
update_queue_time($q_item['id']);
|
||||||
|
Cache::set($cachekey_deadguy.$contact['notify'], true, CACHE_QUARTER_HOUR);
|
||||||
|
} else {
|
||||||
|
remove_queue_item($q_item['id']);
|
||||||
|
}
|
||||||
|
}
|
||||||
|
break;
|
||||||
|
case NETWORK_DIASPORA:
|
||||||
|
if ($contact['notify']) {
|
||||||
|
logger('queue: diaspora_delivery: item '.$q_item['id'].' for '.$contact['name'].' <'.$contact['url'].'>');
|
||||||
|
$deliver_status = Diaspora::transmit($owner, $contact, $data, $public, true);
|
||||||
|
|
||||||
|
if ($deliver_status == (-1)) {
|
||||||
|
update_queue_time($q_item['id']);
|
||||||
|
Cache::set($cachekey_deadguy.$contact['notify'], true, CACHE_QUARTER_HOUR);
|
||||||
|
} else {
|
||||||
|
remove_queue_item($q_item['id']);
|
||||||
|
}
|
||||||
|
}
|
||||||
|
break;
|
||||||
|
|
||||||
|
default:
|
||||||
|
$params = array('owner' => $owner, 'contact' => $contact, 'queue' => $q_item, 'result' => false);
|
||||||
|
call_hooks('queue_deliver', $a, $params);
|
||||||
|
|
||||||
|
if ($params['result']) {
|
||||||
|
remove_queue_item($q_item['id']);
|
||||||
|
} else {
|
||||||
|
update_queue_time($q_item['id']);
|
||||||
|
}
|
||||||
|
break;
|
||||||
|
}
|
||||||
|
logger('Deliver status '.(int)$deliver_status.' for item '.$q_item['id'].' to '.$contact['name'].' <'.$contact['url'].'>');
|
||||||
|
|
||||||
|
return;
|
||||||
|
}
|
||||||
|
}
|
||||||
Loading…
Reference in a new issue