folly/experimental/FunctionScheduler.h

   1 /*
   2  * Copyright 2016 Facebook, Inc.
   3  *
   4  * Licensed under the Apache License, Version 2.0 (the "License");
   5  * you may not use this file except in compliance with the License.
   6  * You may obtain a copy of the License at
   7  *
   8  *   http://www.apache.org/licenses/LICENSE-2.0
   9  *
  10  * Unless required by applicable law or agreed to in writing, software
  11  * distributed under the License is distributed on an "AS IS" BASIS,
  12  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  13  * See the License for the specific language governing permissions and
  14  * limitations under the License.
  15  */
  16
  17 #pragma once
  18
  19 #include <folly/Function.h>
  20 #include <folly/Range.h>
  21 #include <chrono>
  22 #include <condition_variable>
  23 #include <mutex>
  24 #include <thread>
  25 #include <vector>
  26
  27 namespace folly {
  28
  29 /**
  30  * Schedules any number of functions to run at various intervals. E.g.,
  31  *
  32  *   FunctionScheduler fs;
  33  *
  34  *   fs.addFunction([&] { LOG(INFO) << "tick..."; }, seconds(1), "ticker");
  35  *   fs.addFunction(std::bind(&TestClass::doStuff, this), minutes(5), "stuff");
  36  *   fs.start();
  37  *   ........
  38  *   fs.cancelFunction("ticker");
  39  *   fs.addFunction([&] { LOG(INFO) << "tock..."; }, minutes(3), "tocker");
  40  *   ........
  41  *   fs.shutdown();
  42  *
  43  *
  44  * Note: the class uses only one thread - if you want to use more than one
  45  *       thread use multiple FunctionScheduler objects
  46  *
  47  * start() schedules the functions, while shutdown() terminates further
  48  * scheduling.
  49  */
  50 class FunctionScheduler {
  51  public:
  52   FunctionScheduler();
  53   ~FunctionScheduler();
  54
  55   /**
  56    * By default steady is false, meaning schedules may lag behind overtime.
  57    * This could be due to long running tasks or time drift because of randomness
  58    * in thread wakeup time.
  59    * By setting steady to true, FunctionScheduler will attempt to catch up.
  60    * i.e. more like a cronjob
  61    *
  62    * NOTE: it's only safe to set this before calling start()
  63    */
  64   void setSteady(bool steady) { steady_ = steady; }
  65
  66   /*
  67    * Parameters to control the function interval.
  68    *
  69    * If isPoisson is true, then use std::poisson_distribution to pick the
  70    * interval between each invocation of the function.
  71    *
  72    * If isPoisson os false, then always use fixed the interval specified to
  73    * addFunction().
  74    */
  75   struct LatencyDistribution {
  76     bool isPoisson;
  77     double poissonMean;
  78
  79     LatencyDistribution(bool poisson, double mean)
  80       : isPoisson(poisson),
  81         poissonMean(mean) {
  82     }
  83   };
  84
  85   /**
  86    * Adds a new function to the FunctionScheduler.
  87    *
  88    * Functions will not be run until start() is called.  When start() is
  89    * called, each function will be run after its specified startDelay.
  90    * Functions may also be added after start() has been called, in which case
  91    * startDelay is still honored.
  92    *
  93    * Throws an exception on error.  In particular, each function must have a
  94    * unique name--two functions cannot be added with the same name.
  95    */
  96   void addFunction(Function<void()>&& cb,
  97                    std::chrono::milliseconds interval,
  98                    StringPiece nameID = StringPiece(),
  99                    std::chrono::milliseconds startDelay =
 100                      std::chrono::milliseconds(0));
 101
 102   /*
 103    * Add a new function to the FunctionScheduler with a specified
 104    * LatencyDistribution
 105    */
 106   void addFunction(
 107       Function<void()>&& cb,
 108       std::chrono::milliseconds interval,
 109       const LatencyDistribution& latencyDistr,
 110       StringPiece nameID = StringPiece(),
 111       std::chrono::milliseconds startDelay = std::chrono::milliseconds(0));
 112
 113   /**
 114    * Adds a new function to the FunctionScheduler to run only once.
 115    */
 116   void addFunctionOnce(
 117       Function<void()>&& cb,
 118       StringPiece nameID = StringPiece(),
 119       std::chrono::milliseconds startDelay = std::chrono::milliseconds(0));
 120
 121   /**
 122     * Add a new function to the FunctionScheduler with the time
 123     * interval being distributed uniformly within the given interval
 124     * [minInterval, maxInterval].
 125     */
 126   void addFunctionUniformDistribution(Function<void()>&& cb,
 127                                       std::chrono::milliseconds minInterval,
 128                                       std::chrono::milliseconds maxInterval,
 129                                       StringPiece nameID,
 130                                       std::chrono::milliseconds startDelay);
 131
 132   /**
 133    * A type alias for function that is called to determine the time
 134    * interval for the next scheduled run.
 135    */
 136   using IntervalDistributionFunc = Function<std::chrono::milliseconds()>;
 137
 138   /**
 139    * Add a new function to the FunctionScheduler. The scheduling interval
 140    * is determined by the interval distribution functor, which is called
 141    * every time the next function execution is scheduled. This allows
 142    * for supporting custom interval distribution algorithms in addition
 143    * to built in constant interval; and Poisson and jitter distributions
 144    * (@see FunctionScheduler::addFunction and
 145    * @see FunctionScheduler::addFunctionJitterInterval).
 146    */
 147   void addFunctionGenericDistribution(
 148       Function<void()>&& cb,
 149       IntervalDistributionFunc&& intervalFunc,
 150       const std::string& nameID,
 151       const std::string& intervalDescr,
 152       std::chrono::milliseconds startDelay);
 153
 154   /**
 155    * Cancels the function with the specified name, so it will no longer be run.
 156    *
 157    * Returns false if no function exists with the specified name.
 158    */
 159   bool cancelFunction(StringPiece nameID);
 160
 161   /**
 162    * All functions registered will be canceled.
 163    */
 164   void cancelAllFunctions();
 165
 166   /**
 167    * Resets the specified function's timer.
 168    * When resetFunctionTimer is called, the specified function's timer will
 169    * be reset with the same parameters it was passed initially, including
 170    * its startDelay. If the startDelay was 0, the function will be invoked
 171    * immediately.
 172    *
 173    * Returns false if no function exists with the specified name.
 174    */
 175   bool resetFunctionTimer(StringPiece nameID);
 176
 177   /**
 178    * Starts the scheduler.
 179    *
 180    * Returns false if the scheduler was already running.
 181    */
 182   bool start();
 183
 184   /**
 185    * Stops the FunctionScheduler.
 186    *
 187    * It may be restarted later by calling start() again.
 188    * Returns false if the scheduler was not running.
 189    */
 190   bool shutdown();
 191
 192   /**
 193    * Set the name of the worker thread.
 194    */
 195   void setThreadName(StringPiece threadName);
 196
 197  private:
 198   struct RepeatFunc {
 199     Function<void()> cb;
 200     IntervalDistributionFunc intervalFunc;
 201     std::chrono::steady_clock::time_point nextRunTime;
 202     std::string name;
 203     std::chrono::milliseconds startDelay;
 204     std::string intervalDescr;
 205     bool runOnce;
 206
 207     RepeatFunc(
 208         Function<void()>&& cback,
 209         IntervalDistributionFunc&& intervalFn,
 210         const std::string& nameID,
 211         const std::string& intervalDistDescription,
 212         std::chrono::milliseconds delay,
 213         bool once)
 214         : cb(std::move(cback)),
 215           intervalFunc(std::move(intervalFn)),
 216           nextRunTime(),
 217           name(nameID),
 218           startDelay(delay),
 219           intervalDescr(intervalDistDescription),
 220           runOnce(once) {}
 221
 222     std::chrono::steady_clock::time_point getNextRunTime() const {
 223       return nextRunTime;
 224     }
 225     void setNextRunTimeStrict(std::chrono::steady_clock::time_point curTime) {
 226       nextRunTime = curTime + intervalFunc();
 227     }
 228     void setNextRunTimeSteady() { nextRunTime += intervalFunc(); }
 229     void resetNextRunTime(std::chrono::steady_clock::time_point curTime) {
 230       nextRunTime = curTime + startDelay;
 231     }
 232     void cancel() {
 233       // Simply reset cb to an empty function.
 234       cb = {};
 235     }
 236     bool isValid() const { return bool(cb); }
 237   };
 238
 239   struct RunTimeOrder {
 240     bool operator()(const RepeatFunc& f1, const RepeatFunc& f2) const {
 241       return f1.getNextRunTime() > f2.getNextRunTime();
 242     }
 243   };
 244
 245   typedef std::vector<RepeatFunc> FunctionHeap;
 246
 247   void run();
 248   void runOneFunction(std::unique_lock<std::mutex>& lock,
 249                       std::chrono::steady_clock::time_point now);
 250   void cancelFunction(const std::unique_lock<std::mutex>& lock,
 251                       FunctionHeap::iterator it);
 252   void addFunctionToHeap(const std::unique_lock<std::mutex>& lock,
 253                          RepeatFunc&& func);
 254
 255   void addFunctionInternal(
 256       Function<void()>&& cb,
 257       IntervalDistributionFunc&& intervalFunc,
 258       const std::string& nameID,
 259       const std::string& intervalDescr,
 260       std::chrono::milliseconds startDelay,
 261       bool runOnce);
 262
 263   std::thread thread_;
 264
 265   // Mutex to protect our member variables.
 266   std::mutex mutex_;
 267   bool running_{false};
 268
 269   // The functions to run.
 270   // This is a heap, ordered by next run time.
 271   FunctionHeap functions_;
 272   RunTimeOrder fnCmp_;
 273
 274   // The function currently being invoked by the running thread.
 275   // This is null when the running thread is idle
 276   RepeatFunc* currentFunction_{nullptr};
 277
 278   // Condition variable that is signalled whenever a new function is added
 279   // or when the FunctionScheduler is stopped.
 280   std::condition_variable runningCondvar_;
 281
 282   std::string threadName_;
 283   bool steady_{false};
 284 };
 285
 286 }