lib/Transforms/IPO/InlineAlways.cpp

   1 //===- InlineAlways.cpp - Code to inline always_inline functions ----------===//
   2 //
   3 //                     The LLVM Compiler Infrastructure
   4 //
   5 // This file is distributed under the University of Illinois Open Source
   6 // License. See LICENSE.TXT for details.
   7 //
   8 //===----------------------------------------------------------------------===//
   9 //
  10 // This file implements a custom inliner that handles only functions that
  11 // are marked as "always inline".
  12 //
  13 //===----------------------------------------------------------------------===//
  14
  15 #define DEBUG_TYPE "inline"
  16 #include "llvm/CallingConv.h"
  17 #include "llvm/Instructions.h"
  18 #include "llvm/IntrinsicInst.h"
  19 #include "llvm/Module.h"
  20 #include "llvm/Type.h"
  21 #include "llvm/Analysis/CallGraph.h"
  22 #include "llvm/Analysis/InlineCost.h"
  23 #include "llvm/Support/CallSite.h"
  24 #include "llvm/Transforms/IPO.h"
  25 #include "llvm/Transforms/IPO/InlinerPass.h"
  26 #include "llvm/Target/TargetData.h"
  27 #include "llvm/ADT/SmallPtrSet.h"
  28
  29 using namespace llvm;
  30
  31 namespace {
  32
  33   // AlwaysInliner only inlines functions that are mark as "always inline".
  34   class AlwaysInliner : public Inliner {
  35     InlineCostAnalyzer CA;
  36   public:
  37     // Use extremely low threshold.
  38     AlwaysInliner() : Inliner(ID, -2000000000, /*InsertLifetime*/true) {
  39       initializeAlwaysInlinerPass(*PassRegistry::getPassRegistry());
  40     }
  41     AlwaysInliner(bool InsertLifetime) : Inliner(ID, -2000000000,
  42                                                  InsertLifetime) {
  43       initializeAlwaysInlinerPass(*PassRegistry::getPassRegistry());
  44     }
  45     static char ID; // Pass identification, replacement for typeid
  46     InlineCost getInlineCost(CallSite CS) {
  47       Function *Callee = CS.getCalledFunction();
  48       // We assume indirect calls aren't calling an always-inline function.
  49       if (!Callee) return InlineCost::getNever();
  50
  51       // We can't inline calls to external functions.
  52       // FIXME: We shouldn't even get here.
  53       if (Callee->isDeclaration()) return InlineCost::getNever();
  54
  55       // Return never for anything not marked as always inline.
  56       if (!Callee->hasFnAttr(Attribute::AlwaysInline))
  57         return InlineCost::getNever();
  58
  59       // We still have to check the inline cost in case there are reasons to
  60       // not inline which trump the always-inline attribute such as setjmp and
  61       // indirectbr.
  62       return CA.getInlineCost(CS, getInlineThreshold(CS));
  63     }
  64     void resetCachedCostInfo(Function *Caller) {
  65       CA.resetCachedCostInfo(Caller);
  66     }
  67     void growCachedCostInfo(Function* Caller, Function* Callee) {
  68       CA.growCachedCostInfo(Caller, Callee);
  69     }
  70     virtual bool doFinalization(CallGraph &CG) {
  71       return removeDeadFunctions(CG, /*AlwaysInlineOnly=*/true);
  72     }
  73     virtual bool doInitialization(CallGraph &CG);
  74     void releaseMemory() {
  75       CA.clear();
  76     }
  77   };
  78 }
  79
  80 char AlwaysInliner::ID = 0;
  81 INITIALIZE_PASS_BEGIN(AlwaysInliner, "always-inline",
  82                 "Inliner for always_inline functions", false, false)
  83 INITIALIZE_AG_DEPENDENCY(CallGraph)
  84 INITIALIZE_PASS_END(AlwaysInliner, "always-inline",
  85                 "Inliner for always_inline functions", false, false)
  86
  87 Pass *llvm::createAlwaysInlinerPass() { return new AlwaysInliner(); }
  88
  89 Pass *llvm::createAlwaysInlinerPass(bool InsertLifetime) {
  90   return new AlwaysInliner(InsertLifetime);
  91 }
  92
  93 // doInitialization - Initializes the vector of functions that have not
  94 // been annotated with the "always inline" attribute.
  95 bool AlwaysInliner::doInitialization(CallGraph &CG) {
  96   CA.setTargetData(getAnalysisIfAvailable<TargetData>());
  97   return false;
  98 }