19493c275SMichael Große<?php 29493c275SMichael Große 39493c275SMichael Großenamespace dokuwiki; 49493c275SMichael Große 5e1d9dcc8SAndreas Gohruse dokuwiki\Extension\Event; 6*3df1553dSSatoshi Saharause dokuwiki\Logger; 74027a91aSSatoshi Saharause dokuwiki\Search\Indexer; 8432adb37SAndreas Gohruse dokuwiki\Sitemap\Mapper; 9704a815fSMichael Großeuse dokuwiki\Subscriptions\BulkSubscriptionSender; 109493c275SMichael Große 113ad4c3cdSAndreas Gohr/** 123ad4c3cdSAndreas Gohr * Class TaskRunner 133ad4c3cdSAndreas Gohr * 143ad4c3cdSAndreas Gohr * Run an asynchronous task. 153ad4c3cdSAndreas Gohr */ 169493c275SMichael Großeclass TaskRunner 179493c275SMichael Große{ 183ad4c3cdSAndreas Gohr /** 193ad4c3cdSAndreas Gohr * Run the next task 203ad4c3cdSAndreas Gohr * 213ad4c3cdSAndreas Gohr * @todo refactor to remove dependencies on globals 223ad4c3cdSAndreas Gohr * @triggers INDEXER_TASKS_RUN 233ad4c3cdSAndreas Gohr */ 249493c275SMichael Große public function run() 259493c275SMichael Große { 263b58faf6SMichael Große global $INPUT, $conf, $ID; 273b58faf6SMichael Große 283b58faf6SMichael Große // keep running after browser closes connection 293b58faf6SMichael Große @ignore_user_abort(true); 303b58faf6SMichael Große 313b58faf6SMichael Große // check if user abort worked, if yes send output early 323b58faf6SMichael Große $defer = !@ignore_user_abort() || $conf['broken_iua']; 333b58faf6SMichael Große $output = $INPUT->has('debug') && $conf['allowdebug']; 343b58faf6SMichael Große if(!$defer && !$output){ 353b58faf6SMichael Große $this->sendGIF(); 363b58faf6SMichael Große } 373b58faf6SMichael Große 383b58faf6SMichael Große $ID = cleanID($INPUT->str('id')); 393b58faf6SMichael Große 403b58faf6SMichael Große // Catch any possible output (e.g. errors) 413b58faf6SMichael Große if(!$output) { 423b58faf6SMichael Große ob_start(); 433b58faf6SMichael Große } else { 443b58faf6SMichael Große header('Content-Type: text/plain'); 453b58faf6SMichael Große } 463b58faf6SMichael Große 479493c275SMichael Große // run one of the jobs 489493c275SMichael Große $tmp = []; // No event data 49e1d9dcc8SAndreas Gohr $evt = new Event('INDEXER_TASKS_RUN', $tmp); 509493c275SMichael Große if ($evt->advise_before()) { 519493c275SMichael Große $this->runIndexer() or 529493c275SMichael Große $this->runSitemapper() or 539493c275SMichael Große $this->sendDigest() or 549493c275SMichael Große $this->runTrimRecentChanges() or 559493c275SMichael Große $this->runTrimRecentChanges(true) or 569493c275SMichael Große $evt->advise_after(); 579493c275SMichael Große } 583b58faf6SMichael Große 593b58faf6SMichael Große if(!$output) { 603b58faf6SMichael Große ob_end_clean(); 613b58faf6SMichael Große if($defer) { 623b58faf6SMichael Große $this->sendGIF(); 633b58faf6SMichael Große } 643b58faf6SMichael Große } 653b58faf6SMichael Große } 663b58faf6SMichael Große 673b58faf6SMichael Große /** 683b58faf6SMichael Große * Just send a 1x1 pixel blank gif to the browser 693b58faf6SMichael Große * 703b58faf6SMichael Große * @author Andreas Gohr <andi@splitbrain.org> 713b58faf6SMichael Große * @author Harry Fuecks <fuecks@gmail.com> 723b58faf6SMichael Große */ 733ad4c3cdSAndreas Gohr protected function sendGIF() 743ad4c3cdSAndreas Gohr { 753b58faf6SMichael Große $img = base64_decode('R0lGODlhAQABAIAAAAAAAP///yH5BAEAAAEALAAAAAABAAEAAAIBTAA7'); 763b58faf6SMichael Große header('Content-Type: image/gif'); 773b58faf6SMichael Große header('Content-Length: '.strlen($img)); 783b58faf6SMichael Große header('Connection: Close'); 793b58faf6SMichael Große print $img; 803b58faf6SMichael Große tpl_flush(); 813b58faf6SMichael Große // Browser should drop connection after this 823b58faf6SMichael Große // Thinks it's got the whole image 839493c275SMichael Große } 849493c275SMichael Große 859493c275SMichael Große /** 869493c275SMichael Große * Trims the recent changes cache (or imports the old changelog) as needed. 879493c275SMichael Große * 889493c275SMichael Große * @param bool $media_changes If the media changelog shall be trimmed instead of 899493c275SMichael Große * the page changelog 90b5cf9c44SMichael Große * 919493c275SMichael Große * @return bool 9250d9e958SAndreas Gohr * @triggers TASK_RECENTCHANGES_TRIM 939493c275SMichael Große * @author Ben Coburn <btcoburn@silicodon.net> 949493c275SMichael Große */ 95b5cf9c44SMichael Große protected function runTrimRecentChanges($media_changes = false) 96b5cf9c44SMichael Große { 979493c275SMichael Große global $conf; 989493c275SMichael Große 999493c275SMichael Große echo "runTrimRecentChanges($media_changes): started" . NL; 1009493c275SMichael Große 1019493c275SMichael Große $fn = ($media_changes ? $conf['media_changelog'] : $conf['changelog']); 1029493c275SMichael Große 1039493c275SMichael Große // Trim the Recent Changes 1049493c275SMichael Große // Trims the recent changes cache to the last $conf['changes_days'] recent 1059493c275SMichael Große // changes or $conf['recent'] items, which ever is larger. 1069493c275SMichael Große // The trimming is only done once a day. 1079493c275SMichael Große if (file_exists($fn) && 1089493c275SMichael Große (@filemtime($fn . '.trimmed') + 86400) < time() && 1099493c275SMichael Große !file_exists($fn . '_tmp')) { 1109493c275SMichael Große @touch($fn . '.trimmed'); 1119493c275SMichael Große io_lock($fn); 1129493c275SMichael Große $lines = file($fn); 1139493c275SMichael Große if (count($lines) <= $conf['recent']) { 1149493c275SMichael Große // nothing to trim 1159493c275SMichael Große io_unlock($fn); 1169493c275SMichael Große echo "runTrimRecentChanges($media_changes): finished" . NL; 1179493c275SMichael Große return false; 1189493c275SMichael Große } 1199493c275SMichael Große 1209493c275SMichael Große io_saveFile($fn . '_tmp', ''); // presave tmp as 2nd lock 1219493c275SMichael Große $trim_time = time() - $conf['recent_days'] * 86400; 122b5cf9c44SMichael Große $out_lines = []; 123b5cf9c44SMichael Große $old_lines = []; 1249493c275SMichael Große for ($i = 0; $i < count($lines); $i++) { 1259493c275SMichael Große $log = parseChangelogLine($lines[$i]); 126b5cf9c44SMichael Große if ($log === false) { 127e24a74c0SAndreas Gohr continue; // discard junk 128e24a74c0SAndreas Gohr } 129e24a74c0SAndreas Gohr 1309493c275SMichael Große if ($log['date'] < $trim_time) { 131e24a74c0SAndreas Gohr // keep old lines for now (append .$i to prevent key collisions) 132e24a74c0SAndreas Gohr $old_lines[$log['date'] . ".$i"] = $lines[$i]; 1339493c275SMichael Große } else { 134e24a74c0SAndreas Gohr // definitely keep these lines 135e24a74c0SAndreas Gohr $out_lines[$log['date'] . ".$i"] = $lines[$i]; 1369493c275SMichael Große } 1379493c275SMichael Große } 1389493c275SMichael Große 1399493c275SMichael Große if (count($lines) == count($out_lines)) { 1409493c275SMichael Große // nothing to trim 1419493c275SMichael Große @unlink($fn . '_tmp'); 1429493c275SMichael Große io_unlock($fn); 1439493c275SMichael Große echo "runTrimRecentChanges($media_changes): finished" . NL; 1449493c275SMichael Große return false; 1459493c275SMichael Große } 1469493c275SMichael Große 1479493c275SMichael Große // sort the final result, it shouldn't be necessary, 1489493c275SMichael Große // however the extra robustness in making the changelog cache self-correcting is worth it 1499493c275SMichael Große ksort($out_lines); 1509493c275SMichael Große $extra = $conf['recent'] - count($out_lines); // do we need extra lines do bring us up to minimum 1519493c275SMichael Große if ($extra > 0) { 1529493c275SMichael Große ksort($old_lines); 1539493c275SMichael Große $out_lines = array_merge(array_slice($old_lines, -$extra), $out_lines); 1549493c275SMichael Große } 1559493c275SMichael Große 156b413fb0bSMichael Große $eventData = [ 157eb787020SMichael Große 'isMedia' => $media_changes, 158b413fb0bSMichael Große 'trimmedChangelogLines' => $out_lines, 159b413fb0bSMichael Große 'removedChangelogLines' => $extra > 0 ? array_slice($old_lines, 0, -$extra) : $old_lines, 160b413fb0bSMichael Große ]; 161cbb44eabSAndreas Gohr Event::createAndTrigger('TASK_RECENTCHANGES_TRIM', $eventData); 162b413fb0bSMichael Große $out_lines = $eventData['trimmedChangelogLines']; 163b413fb0bSMichael Große 1649493c275SMichael Große // save trimmed changelog 1659493c275SMichael Große io_saveFile($fn . '_tmp', implode('', $out_lines)); 1669493c275SMichael Große @unlink($fn); 1679493c275SMichael Große if (!rename($fn . '_tmp', $fn)) { 1689493c275SMichael Große // rename failed so try another way... 1699493c275SMichael Große io_unlock($fn); 1709493c275SMichael Große io_saveFile($fn, implode('', $out_lines)); 1719493c275SMichael Große @unlink($fn . '_tmp'); 1729493c275SMichael Große } else { 1739493c275SMichael Große io_unlock($fn); 1749493c275SMichael Große } 1759493c275SMichael Große echo "runTrimRecentChanges($media_changes): finished" . NL; 1769493c275SMichael Große return true; 1779493c275SMichael Große } 1789493c275SMichael Große 1799493c275SMichael Große // nothing done 1809493c275SMichael Große echo "runTrimRecentChanges($media_changes): finished" . NL; 1819493c275SMichael Große return false; 1829493c275SMichael Große } 1839493c275SMichael Große 1849493c275SMichael Große 1859493c275SMichael Große /** 1869493c275SMichael Große * Runs the indexer for the current page 1879493c275SMichael Große * 1889493c275SMichael Große * @author Andreas Gohr <andi@splitbrain.org> 1899493c275SMichael Große */ 190b5cf9c44SMichael Große protected function runIndexer() 191b5cf9c44SMichael Große { 1929493c275SMichael Große global $ID; 193b5cf9c44SMichael Große print 'runIndexer(): started' . NL; 1949493c275SMichael Große 19573f05217SPhy if ((string) $ID === '') { 196b5cf9c44SMichael Große return false; 197b5cf9c44SMichael Große } 1989493c275SMichael Große 1999493c275SMichael Große // do the work 20015f699acSAndreas Gohr try { 201a32da6ddSSatoshi Sahara return (new Indexer($ID))->dispatch(true); 20215f699acSAndreas Gohr } catch (Search\Exception\SearchException $e) { 20372ebc99bSSatoshi Sahara $msg = get_class($e) .' : '. $e->getMessage(); 20472ebc99bSSatoshi Sahara echo $msg; 205*3df1553dSSatoshi Sahara Logger::debug($msg); 20615f699acSAndreas Gohr return false; 20715f699acSAndreas Gohr } 2089493c275SMichael Große } 2099493c275SMichael Große 2109493c275SMichael Große /** 2119493c275SMichael Große * Builds a Google Sitemap of all public pages known to the indexer 2129493c275SMichael Große * 2139493c275SMichael Große * The map is placed in the root directory named sitemap.xml.gz - This 2149493c275SMichael Große * file needs to be writable! 2159493c275SMichael Große * 2169493c275SMichael Große * @author Andreas Gohr 2179493c275SMichael Große * @link https://www.google.com/webmasters/sitemaps/docs/en/about.html 2189493c275SMichael Große */ 219b5cf9c44SMichael Große protected function runSitemapper() 220b5cf9c44SMichael Große { 221b5cf9c44SMichael Große print 'runSitemapper(): started' . NL; 222432adb37SAndreas Gohr $result = Mapper::generate() && Mapper::pingSearchEngines(); 2239493c275SMichael Große print 'runSitemapper(): finished' . NL; 2249493c275SMichael Große return $result; 2259493c275SMichael Große } 2269493c275SMichael Große 2279493c275SMichael Große /** 2289493c275SMichael Große * Send digest and list mails for all subscriptions which are in effect for the 2299493c275SMichael Große * current page 2309493c275SMichael Große * 2319493c275SMichael Große * @author Adrian Lang <lang@cosmocode.de> 2329493c275SMichael Große */ 233b5cf9c44SMichael Große protected function sendDigest() 234b5cf9c44SMichael Große { 2359493c275SMichael Große global $ID; 2369493c275SMichael Große 2379493c275SMichael Große echo 'sendDigest(): started' . NL; 2389493c275SMichael Große if (!actionOK('subscribe')) { 2399493c275SMichael Große echo 'sendDigest(): disabled' . NL; 2409493c275SMichael Große return false; 2419493c275SMichael Große } 242704a815fSMichael Große $sub = new BulkSubscriptionSender(); 24375d66495SMichael Große $sent = $sub->sendBulk($ID); 2449493c275SMichael Große 2459493c275SMichael Große echo "sendDigest(): sent $sent mails" . NL; 2469493c275SMichael Große echo 'sendDigest(): finished' . NL; 2479493c275SMichael Große return (bool)$sent; 2489493c275SMichael Große } 2499493c275SMichael Große} 250