ScheduleDAG: Added isBoundaryNode to conveniently detect a common corner case.
[oota-llvm.git] / lib / AsmParser / LLParser.cpp
1 //===-- LLParser.cpp - Parser Class ---------------------------------------===//
2 //
3 //                     The LLVM Compiler Infrastructure
4 //
5 // This file is distributed under the University of Illinois Open Source
6 // License. See LICENSE.TXT for details.
7 //
8 //===----------------------------------------------------------------------===//
9 //
10 //  This file defines the parser class for .ll files.
11 //
12 //===----------------------------------------------------------------------===//
13
14 #include "LLParser.h"
15 #include "llvm/ADT/SmallPtrSet.h"
16 #include "llvm/AutoUpgrade.h"
17 #include "llvm/IR/CallingConv.h"
18 #include "llvm/IR/Constants.h"
19 #include "llvm/IR/DerivedTypes.h"
20 #include "llvm/IR/InlineAsm.h"
21 #include "llvm/IR/Instructions.h"
22 #include "llvm/IR/Module.h"
23 #include "llvm/IR/Operator.h"
24 #include "llvm/IR/ValueSymbolTable.h"
25 #include "llvm/Support/ErrorHandling.h"
26 #include "llvm/Support/raw_ostream.h"
27 using namespace llvm;
28
29 static std::string getTypeString(Type *T) {
30   std::string Result;
31   raw_string_ostream Tmp(Result);
32   Tmp << *T;
33   return Tmp.str();
34 }
35
36 /// Run: module ::= toplevelentity*
37 bool LLParser::Run() {
38   // Prime the lexer.
39   Lex.Lex();
40
41   return ParseTopLevelEntities() ||
42          ValidateEndOfModule();
43 }
44
45 /// ValidateEndOfModule - Do final validity and sanity checks at the end of the
46 /// module.
47 bool LLParser::ValidateEndOfModule() {
48   // Handle any instruction metadata forward references.
49   if (!ForwardRefInstMetadata.empty()) {
50     for (DenseMap<Instruction*, std::vector<MDRef> >::iterator
51          I = ForwardRefInstMetadata.begin(), E = ForwardRefInstMetadata.end();
52          I != E; ++I) {
53       Instruction *Inst = I->first;
54       const std::vector<MDRef> &MDList = I->second;
55
56       for (unsigned i = 0, e = MDList.size(); i != e; ++i) {
57         unsigned SlotNo = MDList[i].MDSlot;
58
59         if (SlotNo >= NumberedMetadata.size() || NumberedMetadata[SlotNo] == 0)
60           return Error(MDList[i].Loc, "use of undefined metadata '!" +
61                        Twine(SlotNo) + "'");
62         Inst->setMetadata(MDList[i].MDKind, NumberedMetadata[SlotNo]);
63       }
64     }
65     ForwardRefInstMetadata.clear();
66   }
67
68
69   // If there are entries in ForwardRefBlockAddresses at this point, they are
70   // references after the function was defined.  Resolve those now.
71   while (!ForwardRefBlockAddresses.empty()) {
72     // Okay, we are referencing an already-parsed function, resolve them now.
73     Function *TheFn = 0;
74     const ValID &Fn = ForwardRefBlockAddresses.begin()->first;
75     if (Fn.Kind == ValID::t_GlobalName)
76       TheFn = M->getFunction(Fn.StrVal);
77     else if (Fn.UIntVal < NumberedVals.size())
78       TheFn = dyn_cast<Function>(NumberedVals[Fn.UIntVal]);
79
80     if (TheFn == 0)
81       return Error(Fn.Loc, "unknown function referenced by blockaddress");
82
83     // Resolve all these references.
84     if (ResolveForwardRefBlockAddresses(TheFn,
85                                       ForwardRefBlockAddresses.begin()->second,
86                                         0))
87       return true;
88
89     ForwardRefBlockAddresses.erase(ForwardRefBlockAddresses.begin());
90   }
91
92   for (unsigned i = 0, e = NumberedTypes.size(); i != e; ++i)
93     if (NumberedTypes[i].second.isValid())
94       return Error(NumberedTypes[i].second,
95                    "use of undefined type '%" + Twine(i) + "'");
96
97   for (StringMap<std::pair<Type*, LocTy> >::iterator I =
98        NamedTypes.begin(), E = NamedTypes.end(); I != E; ++I)
99     if (I->second.second.isValid())
100       return Error(I->second.second,
101                    "use of undefined type named '" + I->getKey() + "'");
102
103   if (!ForwardRefVals.empty())
104     return Error(ForwardRefVals.begin()->second.second,
105                  "use of undefined value '@" + ForwardRefVals.begin()->first +
106                  "'");
107
108   if (!ForwardRefValIDs.empty())
109     return Error(ForwardRefValIDs.begin()->second.second,
110                  "use of undefined value '@" +
111                  Twine(ForwardRefValIDs.begin()->first) + "'");
112
113   if (!ForwardRefMDNodes.empty())
114     return Error(ForwardRefMDNodes.begin()->second.second,
115                  "use of undefined metadata '!" +
116                  Twine(ForwardRefMDNodes.begin()->first) + "'");
117
118
119   // Look for intrinsic functions and CallInst that need to be upgraded
120   for (Module::iterator FI = M->begin(), FE = M->end(); FI != FE; )
121     UpgradeCallsToIntrinsic(FI++); // must be post-increment, as we remove
122
123   return false;
124 }
125
126 bool LLParser::ResolveForwardRefBlockAddresses(Function *TheFn,
127                              std::vector<std::pair<ValID, GlobalValue*> > &Refs,
128                                                PerFunctionState *PFS) {
129   // Loop over all the references, resolving them.
130   for (unsigned i = 0, e = Refs.size(); i != e; ++i) {
131     BasicBlock *Res;
132     if (PFS) {
133       if (Refs[i].first.Kind == ValID::t_LocalName)
134         Res = PFS->GetBB(Refs[i].first.StrVal, Refs[i].first.Loc);
135       else
136         Res = PFS->GetBB(Refs[i].first.UIntVal, Refs[i].first.Loc);
137     } else if (Refs[i].first.Kind == ValID::t_LocalID) {
138       return Error(Refs[i].first.Loc,
139        "cannot take address of numeric label after the function is defined");
140     } else {
141       Res = dyn_cast_or_null<BasicBlock>(
142                      TheFn->getValueSymbolTable().lookup(Refs[i].first.StrVal));
143     }
144
145     if (Res == 0)
146       return Error(Refs[i].first.Loc,
147                    "referenced value is not a basic block");
148
149     // Get the BlockAddress for this and update references to use it.
150     BlockAddress *BA = BlockAddress::get(TheFn, Res);
151     Refs[i].second->replaceAllUsesWith(BA);
152     Refs[i].second->eraseFromParent();
153   }
154   return false;
155 }
156
157
158 //===----------------------------------------------------------------------===//
159 // Top-Level Entities
160 //===----------------------------------------------------------------------===//
161
162 bool LLParser::ParseTopLevelEntities() {
163   while (1) {
164     switch (Lex.getKind()) {
165     default:         return TokError("expected top-level entity");
166     case lltok::Eof: return false;
167     case lltok::kw_declare: if (ParseDeclare()) return true; break;
168     case lltok::kw_define:  if (ParseDefine()) return true; break;
169     case lltok::kw_module:  if (ParseModuleAsm()) return true; break;
170     case lltok::kw_target:  if (ParseTargetDefinition()) return true; break;
171     case lltok::kw_deplibs: if (ParseDepLibs()) return true; break;
172     case lltok::LocalVarID: if (ParseUnnamedType()) return true; break;
173     case lltok::LocalVar:   if (ParseNamedType()) return true; break;
174     case lltok::GlobalID:   if (ParseUnnamedGlobal()) return true; break;
175     case lltok::GlobalVar:  if (ParseNamedGlobal()) return true; break;
176     case lltok::exclaim:    if (ParseStandaloneMetadata()) return true; break;
177     case lltok::MetadataVar: if (ParseNamedMetadata()) return true; break;
178
179     // The Global variable production with no name can have many different
180     // optional leading prefixes, the production is:
181     // GlobalVar ::= OptionalLinkage OptionalVisibility OptionalThreadLocal
182     //               OptionalAddrSpace OptionalUnNammedAddr
183     //               ('constant'|'global') ...
184     case lltok::kw_private:             // OptionalLinkage
185     case lltok::kw_linker_private:      // OptionalLinkage
186     case lltok::kw_linker_private_weak: // OptionalLinkage
187     case lltok::kw_linker_private_weak_def_auto: // FIXME: backwards compat.
188     case lltok::kw_internal:            // OptionalLinkage
189     case lltok::kw_weak:                // OptionalLinkage
190     case lltok::kw_weak_odr:            // OptionalLinkage
191     case lltok::kw_linkonce:            // OptionalLinkage
192     case lltok::kw_linkonce_odr:        // OptionalLinkage
193     case lltok::kw_linkonce_odr_auto_hide: // OptionalLinkage
194     case lltok::kw_appending:           // OptionalLinkage
195     case lltok::kw_dllexport:           // OptionalLinkage
196     case lltok::kw_common:              // OptionalLinkage
197     case lltok::kw_dllimport:           // OptionalLinkage
198     case lltok::kw_extern_weak:         // OptionalLinkage
199     case lltok::kw_external: {          // OptionalLinkage
200       unsigned Linkage, Visibility;
201       if (ParseOptionalLinkage(Linkage) ||
202           ParseOptionalVisibility(Visibility) ||
203           ParseGlobal("", SMLoc(), Linkage, true, Visibility))
204         return true;
205       break;
206     }
207     case lltok::kw_default:       // OptionalVisibility
208     case lltok::kw_hidden:        // OptionalVisibility
209     case lltok::kw_protected: {   // OptionalVisibility
210       unsigned Visibility;
211       if (ParseOptionalVisibility(Visibility) ||
212           ParseGlobal("", SMLoc(), 0, false, Visibility))
213         return true;
214       break;
215     }
216
217     case lltok::kw_thread_local:  // OptionalThreadLocal
218     case lltok::kw_addrspace:     // OptionalAddrSpace
219     case lltok::kw_constant:      // GlobalType
220     case lltok::kw_global:        // GlobalType
221       if (ParseGlobal("", SMLoc(), 0, false, 0)) return true;
222       break;
223     }
224   }
225 }
226
227
228 /// toplevelentity
229 ///   ::= 'module' 'asm' STRINGCONSTANT
230 bool LLParser::ParseModuleAsm() {
231   assert(Lex.getKind() == lltok::kw_module);
232   Lex.Lex();
233
234   std::string AsmStr;
235   if (ParseToken(lltok::kw_asm, "expected 'module asm'") ||
236       ParseStringConstant(AsmStr)) return true;
237
238   M->appendModuleInlineAsm(AsmStr);
239   return false;
240 }
241
242 /// toplevelentity
243 ///   ::= 'target' 'triple' '=' STRINGCONSTANT
244 ///   ::= 'target' 'datalayout' '=' STRINGCONSTANT
245 bool LLParser::ParseTargetDefinition() {
246   assert(Lex.getKind() == lltok::kw_target);
247   std::string Str;
248   switch (Lex.Lex()) {
249   default: return TokError("unknown target property");
250   case lltok::kw_triple:
251     Lex.Lex();
252     if (ParseToken(lltok::equal, "expected '=' after target triple") ||
253         ParseStringConstant(Str))
254       return true;
255     M->setTargetTriple(Str);
256     return false;
257   case lltok::kw_datalayout:
258     Lex.Lex();
259     if (ParseToken(lltok::equal, "expected '=' after target datalayout") ||
260         ParseStringConstant(Str))
261       return true;
262     M->setDataLayout(Str);
263     return false;
264   }
265 }
266
267 /// toplevelentity
268 ///   ::= 'deplibs' '=' '[' ']'
269 ///   ::= 'deplibs' '=' '[' STRINGCONSTANT (',' STRINGCONSTANT)* ']'
270 /// FIXME: Remove in 4.0. Currently parse, but ignore.
271 bool LLParser::ParseDepLibs() {
272   assert(Lex.getKind() == lltok::kw_deplibs);
273   Lex.Lex();
274   if (ParseToken(lltok::equal, "expected '=' after deplibs") ||
275       ParseToken(lltok::lsquare, "expected '=' after deplibs"))
276     return true;
277
278   if (EatIfPresent(lltok::rsquare))
279     return false;
280
281   do {
282     std::string Str;
283     if (ParseStringConstant(Str)) return true;
284   } while (EatIfPresent(lltok::comma));
285
286   return ParseToken(lltok::rsquare, "expected ']' at end of list");
287 }
288
289 /// ParseUnnamedType:
290 ///   ::= LocalVarID '=' 'type' type
291 bool LLParser::ParseUnnamedType() {
292   LocTy TypeLoc = Lex.getLoc();
293   unsigned TypeID = Lex.getUIntVal();
294   Lex.Lex(); // eat LocalVarID;
295
296   if (ParseToken(lltok::equal, "expected '=' after name") ||
297       ParseToken(lltok::kw_type, "expected 'type' after '='"))
298     return true;
299
300   if (TypeID >= NumberedTypes.size())
301     NumberedTypes.resize(TypeID+1);
302
303   Type *Result = 0;
304   if (ParseStructDefinition(TypeLoc, "",
305                             NumberedTypes[TypeID], Result)) return true;
306
307   if (!isa<StructType>(Result)) {
308     std::pair<Type*, LocTy> &Entry = NumberedTypes[TypeID];
309     if (Entry.first)
310       return Error(TypeLoc, "non-struct types may not be recursive");
311     Entry.first = Result;
312     Entry.second = SMLoc();
313   }
314
315   return false;
316 }
317
318
319 /// toplevelentity
320 ///   ::= LocalVar '=' 'type' type
321 bool LLParser::ParseNamedType() {
322   std::string Name = Lex.getStrVal();
323   LocTy NameLoc = Lex.getLoc();
324   Lex.Lex();  // eat LocalVar.
325
326   if (ParseToken(lltok::equal, "expected '=' after name") ||
327       ParseToken(lltok::kw_type, "expected 'type' after name"))
328     return true;
329
330   Type *Result = 0;
331   if (ParseStructDefinition(NameLoc, Name,
332                             NamedTypes[Name], Result)) return true;
333
334   if (!isa<StructType>(Result)) {
335     std::pair<Type*, LocTy> &Entry = NamedTypes[Name];
336     if (Entry.first)
337       return Error(NameLoc, "non-struct types may not be recursive");
338     Entry.first = Result;
339     Entry.second = SMLoc();
340   }
341
342   return false;
343 }
344
345
346 /// toplevelentity
347 ///   ::= 'declare' FunctionHeader
348 bool LLParser::ParseDeclare() {
349   assert(Lex.getKind() == lltok::kw_declare);
350   Lex.Lex();
351
352   Function *F;
353   return ParseFunctionHeader(F, false);
354 }
355
356 /// toplevelentity
357 ///   ::= 'define' FunctionHeader '{' ...
358 bool LLParser::ParseDefine() {
359   assert(Lex.getKind() == lltok::kw_define);
360   Lex.Lex();
361
362   Function *F;
363   return ParseFunctionHeader(F, true) ||
364          ParseFunctionBody(*F);
365 }
366
367 /// ParseGlobalType
368 ///   ::= 'constant'
369 ///   ::= 'global'
370 bool LLParser::ParseGlobalType(bool &IsConstant) {
371   if (Lex.getKind() == lltok::kw_constant)
372     IsConstant = true;
373   else if (Lex.getKind() == lltok::kw_global)
374     IsConstant = false;
375   else {
376     IsConstant = false;
377     return TokError("expected 'global' or 'constant'");
378   }
379   Lex.Lex();
380   return false;
381 }
382
383 /// ParseUnnamedGlobal:
384 ///   OptionalVisibility ALIAS ...
385 ///   OptionalLinkage OptionalVisibility ...   -> global variable
386 ///   GlobalID '=' OptionalVisibility ALIAS ...
387 ///   GlobalID '=' OptionalLinkage OptionalVisibility ...   -> global variable
388 bool LLParser::ParseUnnamedGlobal() {
389   unsigned VarID = NumberedVals.size();
390   std::string Name;
391   LocTy NameLoc = Lex.getLoc();
392
393   // Handle the GlobalID form.
394   if (Lex.getKind() == lltok::GlobalID) {
395     if (Lex.getUIntVal() != VarID)
396       return Error(Lex.getLoc(), "variable expected to be numbered '%" +
397                    Twine(VarID) + "'");
398     Lex.Lex(); // eat GlobalID;
399
400     if (ParseToken(lltok::equal, "expected '=' after name"))
401       return true;
402   }
403
404   bool HasLinkage;
405   unsigned Linkage, Visibility;
406   if (ParseOptionalLinkage(Linkage, HasLinkage) ||
407       ParseOptionalVisibility(Visibility))
408     return true;
409
410   if (HasLinkage || Lex.getKind() != lltok::kw_alias)
411     return ParseGlobal(Name, NameLoc, Linkage, HasLinkage, Visibility);
412   return ParseAlias(Name, NameLoc, Visibility);
413 }
414
415 /// ParseNamedGlobal:
416 ///   GlobalVar '=' OptionalVisibility ALIAS ...
417 ///   GlobalVar '=' OptionalLinkage OptionalVisibility ...   -> global variable
418 bool LLParser::ParseNamedGlobal() {
419   assert(Lex.getKind() == lltok::GlobalVar);
420   LocTy NameLoc = Lex.getLoc();
421   std::string Name = Lex.getStrVal();
422   Lex.Lex();
423
424   bool HasLinkage;
425   unsigned Linkage, Visibility;
426   if (ParseToken(lltok::equal, "expected '=' in global variable") ||
427       ParseOptionalLinkage(Linkage, HasLinkage) ||
428       ParseOptionalVisibility(Visibility))
429     return true;
430
431   if (HasLinkage || Lex.getKind() != lltok::kw_alias)
432     return ParseGlobal(Name, NameLoc, Linkage, HasLinkage, Visibility);
433   return ParseAlias(Name, NameLoc, Visibility);
434 }
435
436 // MDString:
437 //   ::= '!' STRINGCONSTANT
438 bool LLParser::ParseMDString(MDString *&Result) {
439   std::string Str;
440   if (ParseStringConstant(Str)) return true;
441   Result = MDString::get(Context, Str);
442   return false;
443 }
444
445 // MDNode:
446 //   ::= '!' MDNodeNumber
447 //
448 /// This version of ParseMDNodeID returns the slot number and null in the case
449 /// of a forward reference.
450 bool LLParser::ParseMDNodeID(MDNode *&Result, unsigned &SlotNo) {
451   // !{ ..., !42, ... }
452   if (ParseUInt32(SlotNo)) return true;
453
454   // Check existing MDNode.
455   if (SlotNo < NumberedMetadata.size() && NumberedMetadata[SlotNo] != 0)
456     Result = NumberedMetadata[SlotNo];
457   else
458     Result = 0;
459   return false;
460 }
461
462 bool LLParser::ParseMDNodeID(MDNode *&Result) {
463   // !{ ..., !42, ... }
464   unsigned MID = 0;
465   if (ParseMDNodeID(Result, MID)) return true;
466
467   // If not a forward reference, just return it now.
468   if (Result) return false;
469
470   // Otherwise, create MDNode forward reference.
471   MDNode *FwdNode = MDNode::getTemporary(Context, ArrayRef<Value*>());
472   ForwardRefMDNodes[MID] = std::make_pair(FwdNode, Lex.getLoc());
473
474   if (NumberedMetadata.size() <= MID)
475     NumberedMetadata.resize(MID+1);
476   NumberedMetadata[MID] = FwdNode;
477   Result = FwdNode;
478   return false;
479 }
480
481 /// ParseNamedMetadata:
482 ///   !foo = !{ !1, !2 }
483 bool LLParser::ParseNamedMetadata() {
484   assert(Lex.getKind() == lltok::MetadataVar);
485   std::string Name = Lex.getStrVal();
486   Lex.Lex();
487
488   if (ParseToken(lltok::equal, "expected '=' here") ||
489       ParseToken(lltok::exclaim, "Expected '!' here") ||
490       ParseToken(lltok::lbrace, "Expected '{' here"))
491     return true;
492
493   NamedMDNode *NMD = M->getOrInsertNamedMetadata(Name);
494   if (Lex.getKind() != lltok::rbrace)
495     do {
496       if (ParseToken(lltok::exclaim, "Expected '!' here"))
497         return true;
498
499       MDNode *N = 0;
500       if (ParseMDNodeID(N)) return true;
501       NMD->addOperand(N);
502     } while (EatIfPresent(lltok::comma));
503
504   if (ParseToken(lltok::rbrace, "expected end of metadata node"))
505     return true;
506
507   return false;
508 }
509
510 /// ParseStandaloneMetadata:
511 ///   !42 = !{...}
512 bool LLParser::ParseStandaloneMetadata() {
513   assert(Lex.getKind() == lltok::exclaim);
514   Lex.Lex();
515   unsigned MetadataID = 0;
516
517   LocTy TyLoc;
518   Type *Ty = 0;
519   SmallVector<Value *, 16> Elts;
520   if (ParseUInt32(MetadataID) ||
521       ParseToken(lltok::equal, "expected '=' here") ||
522       ParseType(Ty, TyLoc) ||
523       ParseToken(lltok::exclaim, "Expected '!' here") ||
524       ParseToken(lltok::lbrace, "Expected '{' here") ||
525       ParseMDNodeVector(Elts, NULL) ||
526       ParseToken(lltok::rbrace, "expected end of metadata node"))
527     return true;
528
529   MDNode *Init = MDNode::get(Context, Elts);
530
531   // See if this was forward referenced, if so, handle it.
532   std::map<unsigned, std::pair<TrackingVH<MDNode>, LocTy> >::iterator
533     FI = ForwardRefMDNodes.find(MetadataID);
534   if (FI != ForwardRefMDNodes.end()) {
535     MDNode *Temp = FI->second.first;
536     Temp->replaceAllUsesWith(Init);
537     MDNode::deleteTemporary(Temp);
538     ForwardRefMDNodes.erase(FI);
539
540     assert(NumberedMetadata[MetadataID] == Init && "Tracking VH didn't work");
541   } else {
542     if (MetadataID >= NumberedMetadata.size())
543       NumberedMetadata.resize(MetadataID+1);
544
545     if (NumberedMetadata[MetadataID] != 0)
546       return TokError("Metadata id is already used");
547     NumberedMetadata[MetadataID] = Init;
548   }
549
550   return false;
551 }
552
553 /// ParseAlias:
554 ///   ::= GlobalVar '=' OptionalVisibility 'alias' OptionalLinkage Aliasee
555 /// Aliasee
556 ///   ::= TypeAndValue
557 ///   ::= 'bitcast' '(' TypeAndValue 'to' Type ')'
558 ///   ::= 'getelementptr' 'inbounds'? '(' ... ')'
559 ///
560 /// Everything through visibility has already been parsed.
561 ///
562 bool LLParser::ParseAlias(const std::string &Name, LocTy NameLoc,
563                           unsigned Visibility) {
564   assert(Lex.getKind() == lltok::kw_alias);
565   Lex.Lex();
566   unsigned Linkage;
567   LocTy LinkageLoc = Lex.getLoc();
568   if (ParseOptionalLinkage(Linkage))
569     return true;
570
571   if (Linkage != GlobalValue::ExternalLinkage &&
572       Linkage != GlobalValue::WeakAnyLinkage &&
573       Linkage != GlobalValue::WeakODRLinkage &&
574       Linkage != GlobalValue::InternalLinkage &&
575       Linkage != GlobalValue::PrivateLinkage &&
576       Linkage != GlobalValue::LinkerPrivateLinkage &&
577       Linkage != GlobalValue::LinkerPrivateWeakLinkage)
578     return Error(LinkageLoc, "invalid linkage type for alias");
579
580   Constant *Aliasee;
581   LocTy AliaseeLoc = Lex.getLoc();
582   if (Lex.getKind() != lltok::kw_bitcast &&
583       Lex.getKind() != lltok::kw_getelementptr) {
584     if (ParseGlobalTypeAndValue(Aliasee)) return true;
585   } else {
586     // The bitcast dest type is not present, it is implied by the dest type.
587     ValID ID;
588     if (ParseValID(ID)) return true;
589     if (ID.Kind != ValID::t_Constant)
590       return Error(AliaseeLoc, "invalid aliasee");
591     Aliasee = ID.ConstantVal;
592   }
593
594   if (!Aliasee->getType()->isPointerTy())
595     return Error(AliaseeLoc, "alias must have pointer type");
596
597   // Okay, create the alias but do not insert it into the module yet.
598   GlobalAlias* GA = new GlobalAlias(Aliasee->getType(),
599                                     (GlobalValue::LinkageTypes)Linkage, Name,
600                                     Aliasee);
601   GA->setVisibility((GlobalValue::VisibilityTypes)Visibility);
602
603   // See if this value already exists in the symbol table.  If so, it is either
604   // a redefinition or a definition of a forward reference.
605   if (GlobalValue *Val = M->getNamedValue(Name)) {
606     // See if this was a redefinition.  If so, there is no entry in
607     // ForwardRefVals.
608     std::map<std::string, std::pair<GlobalValue*, LocTy> >::iterator
609       I = ForwardRefVals.find(Name);
610     if (I == ForwardRefVals.end())
611       return Error(NameLoc, "redefinition of global named '@" + Name + "'");
612
613     // Otherwise, this was a definition of forward ref.  Verify that types
614     // agree.
615     if (Val->getType() != GA->getType())
616       return Error(NameLoc,
617               "forward reference and definition of alias have different types");
618
619     // If they agree, just RAUW the old value with the alias and remove the
620     // forward ref info.
621     Val->replaceAllUsesWith(GA);
622     Val->eraseFromParent();
623     ForwardRefVals.erase(I);
624   }
625
626   // Insert into the module, we know its name won't collide now.
627   M->getAliasList().push_back(GA);
628   assert(GA->getName() == Name && "Should not be a name conflict!");
629
630   return false;
631 }
632
633 /// ParseGlobal
634 ///   ::= GlobalVar '=' OptionalLinkage OptionalVisibility OptionalThreadLocal
635 ///       OptionalAddrSpace OptionalUnNammedAddr GlobalType Type Const
636 ///   ::= OptionalLinkage OptionalVisibility OptionalThreadLocal
637 ///       OptionalAddrSpace OptionalUnNammedAddr GlobalType Type Const
638 ///
639 /// Everything through visibility has been parsed already.
640 ///
641 bool LLParser::ParseGlobal(const std::string &Name, LocTy NameLoc,
642                            unsigned Linkage, bool HasLinkage,
643                            unsigned Visibility) {
644   unsigned AddrSpace;
645   bool IsConstant, UnnamedAddr;
646   GlobalVariable::ThreadLocalMode TLM;
647   LocTy UnnamedAddrLoc;
648   LocTy TyLoc;
649
650   Type *Ty = 0;
651   if (ParseOptionalThreadLocal(TLM) ||
652       ParseOptionalAddrSpace(AddrSpace) ||
653       ParseOptionalToken(lltok::kw_unnamed_addr, UnnamedAddr,
654                          &UnnamedAddrLoc) ||
655       ParseGlobalType(IsConstant) ||
656       ParseType(Ty, TyLoc))
657     return true;
658
659   // If the linkage is specified and is external, then no initializer is
660   // present.
661   Constant *Init = 0;
662   if (!HasLinkage || (Linkage != GlobalValue::DLLImportLinkage &&
663                       Linkage != GlobalValue::ExternalWeakLinkage &&
664                       Linkage != GlobalValue::ExternalLinkage)) {
665     if (ParseGlobalValue(Ty, Init))
666       return true;
667   }
668
669   if (Ty->isFunctionTy() || Ty->isLabelTy())
670     return Error(TyLoc, "invalid type for global variable");
671
672   GlobalVariable *GV = 0;
673
674   // See if the global was forward referenced, if so, use the global.
675   if (!Name.empty()) {
676     if (GlobalValue *GVal = M->getNamedValue(Name)) {
677       if (!ForwardRefVals.erase(Name) || !isa<GlobalValue>(GVal))
678         return Error(NameLoc, "redefinition of global '@" + Name + "'");
679       GV = cast<GlobalVariable>(GVal);
680     }
681   } else {
682     std::map<unsigned, std::pair<GlobalValue*, LocTy> >::iterator
683       I = ForwardRefValIDs.find(NumberedVals.size());
684     if (I != ForwardRefValIDs.end()) {
685       GV = cast<GlobalVariable>(I->second.first);
686       ForwardRefValIDs.erase(I);
687     }
688   }
689
690   if (GV == 0) {
691     GV = new GlobalVariable(*M, Ty, false, GlobalValue::ExternalLinkage, 0,
692                             Name, 0, GlobalVariable::NotThreadLocal,
693                             AddrSpace);
694   } else {
695     if (GV->getType()->getElementType() != Ty)
696       return Error(TyLoc,
697             "forward reference and definition of global have different types");
698
699     // Move the forward-reference to the correct spot in the module.
700     M->getGlobalList().splice(M->global_end(), M->getGlobalList(), GV);
701   }
702
703   if (Name.empty())
704     NumberedVals.push_back(GV);
705
706   // Set the parsed properties on the global.
707   if (Init)
708     GV->setInitializer(Init);
709   GV->setConstant(IsConstant);
710   GV->setLinkage((GlobalValue::LinkageTypes)Linkage);
711   GV->setVisibility((GlobalValue::VisibilityTypes)Visibility);
712   GV->setThreadLocalMode(TLM);
713   GV->setUnnamedAddr(UnnamedAddr);
714
715   // Parse attributes on the global.
716   while (Lex.getKind() == lltok::comma) {
717     Lex.Lex();
718
719     if (Lex.getKind() == lltok::kw_section) {
720       Lex.Lex();
721       GV->setSection(Lex.getStrVal());
722       if (ParseToken(lltok::StringConstant, "expected global section string"))
723         return true;
724     } else if (Lex.getKind() == lltok::kw_align) {
725       unsigned Alignment;
726       if (ParseOptionalAlignment(Alignment)) return true;
727       GV->setAlignment(Alignment);
728     } else {
729       TokError("unknown global variable property!");
730     }
731   }
732
733   return false;
734 }
735
736
737 //===----------------------------------------------------------------------===//
738 // GlobalValue Reference/Resolution Routines.
739 //===----------------------------------------------------------------------===//
740
741 /// GetGlobalVal - Get a value with the specified name or ID, creating a
742 /// forward reference record if needed.  This can return null if the value
743 /// exists but does not have the right type.
744 GlobalValue *LLParser::GetGlobalVal(const std::string &Name, Type *Ty,
745                                     LocTy Loc) {
746   PointerType *PTy = dyn_cast<PointerType>(Ty);
747   if (PTy == 0) {
748     Error(Loc, "global variable reference must have pointer type");
749     return 0;
750   }
751
752   // Look this name up in the normal function symbol table.
753   GlobalValue *Val =
754     cast_or_null<GlobalValue>(M->getValueSymbolTable().lookup(Name));
755
756   // If this is a forward reference for the value, see if we already created a
757   // forward ref record.
758   if (Val == 0) {
759     std::map<std::string, std::pair<GlobalValue*, LocTy> >::iterator
760       I = ForwardRefVals.find(Name);
761     if (I != ForwardRefVals.end())
762       Val = I->second.first;
763   }
764
765   // If we have the value in the symbol table or fwd-ref table, return it.
766   if (Val) {
767     if (Val->getType() == Ty) return Val;
768     Error(Loc, "'@" + Name + "' defined with type '" +
769           getTypeString(Val->getType()) + "'");
770     return 0;
771   }
772
773   // Otherwise, create a new forward reference for this value and remember it.
774   GlobalValue *FwdVal;
775   if (FunctionType *FT = dyn_cast<FunctionType>(PTy->getElementType()))
776     FwdVal = Function::Create(FT, GlobalValue::ExternalWeakLinkage, Name, M);
777   else
778     FwdVal = new GlobalVariable(*M, PTy->getElementType(), false,
779                                 GlobalValue::ExternalWeakLinkage, 0, Name,
780                                 0, GlobalVariable::NotThreadLocal,
781                                 PTy->getAddressSpace());
782
783   ForwardRefVals[Name] = std::make_pair(FwdVal, Loc);
784   return FwdVal;
785 }
786
787 GlobalValue *LLParser::GetGlobalVal(unsigned ID, Type *Ty, LocTy Loc) {
788   PointerType *PTy = dyn_cast<PointerType>(Ty);
789   if (PTy == 0) {
790     Error(Loc, "global variable reference must have pointer type");
791     return 0;
792   }
793
794   GlobalValue *Val = ID < NumberedVals.size() ? NumberedVals[ID] : 0;
795
796   // If this is a forward reference for the value, see if we already created a
797   // forward ref record.
798   if (Val == 0) {
799     std::map<unsigned, std::pair<GlobalValue*, LocTy> >::iterator
800       I = ForwardRefValIDs.find(ID);
801     if (I != ForwardRefValIDs.end())
802       Val = I->second.first;
803   }
804
805   // If we have the value in the symbol table or fwd-ref table, return it.
806   if (Val) {
807     if (Val->getType() == Ty) return Val;
808     Error(Loc, "'@" + Twine(ID) + "' defined with type '" +
809           getTypeString(Val->getType()) + "'");
810     return 0;
811   }
812
813   // Otherwise, create a new forward reference for this value and remember it.
814   GlobalValue *FwdVal;
815   if (FunctionType *FT = dyn_cast<FunctionType>(PTy->getElementType()))
816     FwdVal = Function::Create(FT, GlobalValue::ExternalWeakLinkage, "", M);
817   else
818     FwdVal = new GlobalVariable(*M, PTy->getElementType(), false,
819                                 GlobalValue::ExternalWeakLinkage, 0, "");
820
821   ForwardRefValIDs[ID] = std::make_pair(FwdVal, Loc);
822   return FwdVal;
823 }
824
825
826 //===----------------------------------------------------------------------===//
827 // Helper Routines.
828 //===----------------------------------------------------------------------===//
829
830 /// ParseToken - If the current token has the specified kind, eat it and return
831 /// success.  Otherwise, emit the specified error and return failure.
832 bool LLParser::ParseToken(lltok::Kind T, const char *ErrMsg) {
833   if (Lex.getKind() != T)
834     return TokError(ErrMsg);
835   Lex.Lex();
836   return false;
837 }
838
839 /// ParseStringConstant
840 ///   ::= StringConstant
841 bool LLParser::ParseStringConstant(std::string &Result) {
842   if (Lex.getKind() != lltok::StringConstant)
843     return TokError("expected string constant");
844   Result = Lex.getStrVal();
845   Lex.Lex();
846   return false;
847 }
848
849 /// ParseUInt32
850 ///   ::= uint32
851 bool LLParser::ParseUInt32(unsigned &Val) {
852   if (Lex.getKind() != lltok::APSInt || Lex.getAPSIntVal().isSigned())
853     return TokError("expected integer");
854   uint64_t Val64 = Lex.getAPSIntVal().getLimitedValue(0xFFFFFFFFULL+1);
855   if (Val64 != unsigned(Val64))
856     return TokError("expected 32-bit integer (too large)");
857   Val = Val64;
858   Lex.Lex();
859   return false;
860 }
861
862 /// ParseTLSModel
863 ///   := 'localdynamic'
864 ///   := 'initialexec'
865 ///   := 'localexec'
866 bool LLParser::ParseTLSModel(GlobalVariable::ThreadLocalMode &TLM) {
867   switch (Lex.getKind()) {
868     default:
869       return TokError("expected localdynamic, initialexec or localexec");
870     case lltok::kw_localdynamic:
871       TLM = GlobalVariable::LocalDynamicTLSModel;
872       break;
873     case lltok::kw_initialexec:
874       TLM = GlobalVariable::InitialExecTLSModel;
875       break;
876     case lltok::kw_localexec:
877       TLM = GlobalVariable::LocalExecTLSModel;
878       break;
879   }
880
881   Lex.Lex();
882   return false;
883 }
884
885 /// ParseOptionalThreadLocal
886 ///   := /*empty*/
887 ///   := 'thread_local'
888 ///   := 'thread_local' '(' tlsmodel ')'
889 bool LLParser::ParseOptionalThreadLocal(GlobalVariable::ThreadLocalMode &TLM) {
890   TLM = GlobalVariable::NotThreadLocal;
891   if (!EatIfPresent(lltok::kw_thread_local))
892     return false;
893
894   TLM = GlobalVariable::GeneralDynamicTLSModel;
895   if (Lex.getKind() == lltok::lparen) {
896     Lex.Lex();
897     return ParseTLSModel(TLM) ||
898       ParseToken(lltok::rparen, "expected ')' after thread local model");
899   }
900   return false;
901 }
902
903 /// ParseOptionalAddrSpace
904 ///   := /*empty*/
905 ///   := 'addrspace' '(' uint32 ')'
906 bool LLParser::ParseOptionalAddrSpace(unsigned &AddrSpace) {
907   AddrSpace = 0;
908   if (!EatIfPresent(lltok::kw_addrspace))
909     return false;
910   return ParseToken(lltok::lparen, "expected '(' in address space") ||
911          ParseUInt32(AddrSpace) ||
912          ParseToken(lltok::rparen, "expected ')' in address space");
913 }
914
915 /// ParseOptionalFuncAttrs - Parse a potentially empty list of function attributes.
916 bool LLParser::ParseOptionalFuncAttrs(AttrBuilder &B) {
917   bool HaveError = false;
918
919   B.clear();
920
921   while (1) {
922     lltok::Kind Token = Lex.getKind();
923     switch (Token) {
924     default:  // End of attributes.
925       return HaveError;
926     case lltok::kw_alignstack: {
927       unsigned Alignment;
928       if (ParseOptionalStackAlignment(Alignment))
929         return true;
930       B.addStackAlignmentAttr(Alignment);
931       continue;
932     }
933     case lltok::kw_align: {
934       // As a hack, we allow "align 2" on functions as a synonym for "alignstack
935       // 2".
936       unsigned Alignment;
937       if (ParseOptionalAlignment(Alignment))
938         return true;
939       B.addAlignmentAttr(Alignment);
940       continue;
941     }
942     case lltok::kw_address_safety:  B.addAttribute(Attribute::AddressSafety); break;
943     case lltok::kw_alwaysinline:    B.addAttribute(Attribute::AlwaysInline); break;
944     case lltok::kw_inlinehint:      B.addAttribute(Attribute::InlineHint); break;
945     case lltok::kw_minsize:         B.addAttribute(Attribute::MinSize); break;
946     case lltok::kw_naked:           B.addAttribute(Attribute::Naked); break;
947     case lltok::kw_noinline:        B.addAttribute(Attribute::NoInline); break;
948     case lltok::kw_nonlazybind:     B.addAttribute(Attribute::NonLazyBind); break;
949     case lltok::kw_noredzone:       B.addAttribute(Attribute::NoRedZone); break;
950     case lltok::kw_noimplicitfloat: B.addAttribute(Attribute::NoImplicitFloat); break;
951     case lltok::kw_noreturn:        B.addAttribute(Attribute::NoReturn); break;
952     case lltok::kw_nounwind:        B.addAttribute(Attribute::NoUnwind); break;
953     case lltok::kw_optsize:         B.addAttribute(Attribute::OptimizeForSize); break;
954     case lltok::kw_readnone:        B.addAttribute(Attribute::ReadNone); break;
955     case lltok::kw_readonly:        B.addAttribute(Attribute::ReadOnly); break;
956     case lltok::kw_returns_twice:   B.addAttribute(Attribute::ReturnsTwice); break;
957     case lltok::kw_ssp:             B.addAttribute(Attribute::StackProtect); break;
958     case lltok::kw_sspreq:          B.addAttribute(Attribute::StackProtectReq); break;
959     case lltok::kw_sspstrong:       B.addAttribute(Attribute::StackProtectStrong); break;
960     case lltok::kw_uwtable:         B.addAttribute(Attribute::UWTable); break;
961     case lltok::kw_noduplicate:     B.addAttribute(Attribute::NoDuplicate); break;
962
963     // Error handling.
964     case lltok::kw_zeroext:
965     case lltok::kw_signext:
966     case lltok::kw_inreg:
967       HaveError |= Error(Lex.getLoc(), "invalid use of attribute on a function");
968       break;
969     case lltok::kw_sret:      case lltok::kw_noalias:
970     case lltok::kw_nocapture: case lltok::kw_byval:
971     case lltok::kw_nest:
972       HaveError |=
973         Error(Lex.getLoc(), "invalid use of parameter-only attribute on a function");
974       break;
975     }
976
977     Lex.Lex();
978   }
979 }
980
981 /// ParseOptionalParamAttrs - Parse a potentially empty list of parameter attributes.
982 bool LLParser::ParseOptionalParamAttrs(AttrBuilder &B) {
983   bool HaveError = false;
984
985   B.clear();
986
987   while (1) {
988     lltok::Kind Token = Lex.getKind();
989     switch (Token) {
990     default:  // End of attributes.
991       return HaveError;
992     case lltok::kw_align: {
993       unsigned Alignment;
994       if (ParseOptionalAlignment(Alignment))
995         return true;
996       B.addAlignmentAttr(Alignment);
997       continue;
998     }
999     case lltok::kw_byval:           B.addAttribute(Attribute::ByVal); break;
1000     case lltok::kw_inreg:           B.addAttribute(Attribute::InReg); break;
1001     case lltok::kw_nest:            B.addAttribute(Attribute::Nest); break;
1002     case lltok::kw_noalias:         B.addAttribute(Attribute::NoAlias); break;
1003     case lltok::kw_nocapture:       B.addAttribute(Attribute::NoCapture); break;
1004     case lltok::kw_signext:         B.addAttribute(Attribute::SExt); break;
1005     case lltok::kw_sret:            B.addAttribute(Attribute::StructRet); break;
1006     case lltok::kw_zeroext:         B.addAttribute(Attribute::ZExt); break;
1007
1008     case lltok::kw_noreturn:       case lltok::kw_nounwind:
1009     case lltok::kw_uwtable:        case lltok::kw_returns_twice:
1010     case lltok::kw_noinline:       case lltok::kw_readnone:
1011     case lltok::kw_readonly:       case lltok::kw_inlinehint:
1012     case lltok::kw_alwaysinline:   case lltok::kw_optsize:
1013     case lltok::kw_ssp:            case lltok::kw_sspreq:
1014     case lltok::kw_noredzone:      case lltok::kw_noimplicitfloat:
1015     case lltok::kw_naked:          case lltok::kw_nonlazybind:
1016     case lltok::kw_address_safety: case lltok::kw_minsize:
1017     case lltok::kw_alignstack:
1018       HaveError |= Error(Lex.getLoc(), "invalid use of function-only attribute");
1019       break;
1020     }
1021
1022     Lex.Lex();
1023   }
1024 }
1025
1026 /// ParseOptionalReturnAttrs - Parse a potentially empty list of return attributes.
1027 bool LLParser::ParseOptionalReturnAttrs(AttrBuilder &B) {
1028   bool HaveError = false;
1029
1030   B.clear();
1031
1032   while (1) {
1033     lltok::Kind Token = Lex.getKind();
1034     switch (Token) {
1035     default:  // End of attributes.
1036       return HaveError;
1037     case lltok::kw_inreg:           B.addAttribute(Attribute::InReg); break;
1038     case lltok::kw_noalias:         B.addAttribute(Attribute::NoAlias); break;
1039     case lltok::kw_signext:         B.addAttribute(Attribute::SExt); break;
1040     case lltok::kw_zeroext:         B.addAttribute(Attribute::ZExt); break;
1041
1042     // Error handling.
1043     case lltok::kw_sret:  case lltok::kw_nocapture:
1044     case lltok::kw_byval: case lltok::kw_nest:
1045       HaveError |= Error(Lex.getLoc(), "invalid use of parameter-only attribute");
1046       break;
1047
1048     case lltok::kw_noreturn:       case lltok::kw_nounwind:
1049     case lltok::kw_uwtable:        case lltok::kw_returns_twice:
1050     case lltok::kw_noinline:       case lltok::kw_readnone:
1051     case lltok::kw_readonly:       case lltok::kw_inlinehint:
1052     case lltok::kw_alwaysinline:   case lltok::kw_optsize:
1053     case lltok::kw_ssp:            case lltok::kw_sspreq:
1054     case lltok::kw_sspstrong:      case lltok::kw_noimplicitfloat:
1055     case lltok::kw_noredzone:      case lltok::kw_naked:
1056     case lltok::kw_nonlazybind:    case lltok::kw_address_safety:
1057     case lltok::kw_minsize:        case lltok::kw_alignstack:
1058     case lltok::kw_align:          case lltok::kw_noduplicate:
1059       HaveError |= Error(Lex.getLoc(), "invalid use of function-only attribute");
1060       break;
1061     }
1062
1063     Lex.Lex();
1064   }
1065 }
1066
1067 /// ParseOptionalLinkage
1068 ///   ::= /*empty*/
1069 ///   ::= 'private'
1070 ///   ::= 'linker_private'
1071 ///   ::= 'linker_private_weak'
1072 ///   ::= 'internal'
1073 ///   ::= 'weak'
1074 ///   ::= 'weak_odr'
1075 ///   ::= 'linkonce'
1076 ///   ::= 'linkonce_odr'
1077 ///   ::= 'linkonce_odr_auto_hide'
1078 ///   ::= 'available_externally'
1079 ///   ::= 'appending'
1080 ///   ::= 'dllexport'
1081 ///   ::= 'common'
1082 ///   ::= 'dllimport'
1083 ///   ::= 'extern_weak'
1084 ///   ::= 'external'
1085 bool LLParser::ParseOptionalLinkage(unsigned &Res, bool &HasLinkage) {
1086   HasLinkage = false;
1087   switch (Lex.getKind()) {
1088   default:                       Res=GlobalValue::ExternalLinkage; return false;
1089   case lltok::kw_private:        Res = GlobalValue::PrivateLinkage;       break;
1090   case lltok::kw_linker_private: Res = GlobalValue::LinkerPrivateLinkage; break;
1091   case lltok::kw_linker_private_weak:
1092     Res = GlobalValue::LinkerPrivateWeakLinkage;
1093     break;
1094   case lltok::kw_internal:       Res = GlobalValue::InternalLinkage;      break;
1095   case lltok::kw_weak:           Res = GlobalValue::WeakAnyLinkage;       break;
1096   case lltok::kw_weak_odr:       Res = GlobalValue::WeakODRLinkage;       break;
1097   case lltok::kw_linkonce:       Res = GlobalValue::LinkOnceAnyLinkage;   break;
1098   case lltok::kw_linkonce_odr:   Res = GlobalValue::LinkOnceODRLinkage;   break;
1099   case lltok::kw_linkonce_odr_auto_hide:
1100   case lltok::kw_linker_private_weak_def_auto: // FIXME: For backwards compat.
1101     Res = GlobalValue::LinkOnceODRAutoHideLinkage;
1102     break;
1103   case lltok::kw_available_externally:
1104     Res = GlobalValue::AvailableExternallyLinkage;
1105     break;
1106   case lltok::kw_appending:      Res = GlobalValue::AppendingLinkage;     break;
1107   case lltok::kw_dllexport:      Res = GlobalValue::DLLExportLinkage;     break;
1108   case lltok::kw_common:         Res = GlobalValue::CommonLinkage;        break;
1109   case lltok::kw_dllimport:      Res = GlobalValue::DLLImportLinkage;     break;
1110   case lltok::kw_extern_weak:    Res = GlobalValue::ExternalWeakLinkage;  break;
1111   case lltok::kw_external:       Res = GlobalValue::ExternalLinkage;      break;
1112   }
1113   Lex.Lex();
1114   HasLinkage = true;
1115   return false;
1116 }
1117
1118 /// ParseOptionalVisibility
1119 ///   ::= /*empty*/
1120 ///   ::= 'default'
1121 ///   ::= 'hidden'
1122 ///   ::= 'protected'
1123 ///
1124 bool LLParser::ParseOptionalVisibility(unsigned &Res) {
1125   switch (Lex.getKind()) {
1126   default:                  Res = GlobalValue::DefaultVisibility; return false;
1127   case lltok::kw_default:   Res = GlobalValue::DefaultVisibility; break;
1128   case lltok::kw_hidden:    Res = GlobalValue::HiddenVisibility; break;
1129   case lltok::kw_protected: Res = GlobalValue::ProtectedVisibility; break;
1130   }
1131   Lex.Lex();
1132   return false;
1133 }
1134
1135 /// ParseOptionalCallingConv
1136 ///   ::= /*empty*/
1137 ///   ::= 'ccc'
1138 ///   ::= 'fastcc'
1139 ///   ::= 'kw_intel_ocl_bicc'
1140 ///   ::= 'coldcc'
1141 ///   ::= 'x86_stdcallcc'
1142 ///   ::= 'x86_fastcallcc'
1143 ///   ::= 'x86_thiscallcc'
1144 ///   ::= 'arm_apcscc'
1145 ///   ::= 'arm_aapcscc'
1146 ///   ::= 'arm_aapcs_vfpcc'
1147 ///   ::= 'msp430_intrcc'
1148 ///   ::= 'ptx_kernel'
1149 ///   ::= 'ptx_device'
1150 ///   ::= 'spir_func'
1151 ///   ::= 'spir_kernel'
1152 ///   ::= 'cc' UINT
1153 ///
1154 bool LLParser::ParseOptionalCallingConv(CallingConv::ID &CC) {
1155   switch (Lex.getKind()) {
1156   default:                       CC = CallingConv::C; return false;
1157   case lltok::kw_ccc:            CC = CallingConv::C; break;
1158   case lltok::kw_fastcc:         CC = CallingConv::Fast; break;
1159   case lltok::kw_coldcc:         CC = CallingConv::Cold; break;
1160   case lltok::kw_x86_stdcallcc:  CC = CallingConv::X86_StdCall; break;
1161   case lltok::kw_x86_fastcallcc: CC = CallingConv::X86_FastCall; break;
1162   case lltok::kw_x86_thiscallcc: CC = CallingConv::X86_ThisCall; break;
1163   case lltok::kw_arm_apcscc:     CC = CallingConv::ARM_APCS; break;
1164   case lltok::kw_arm_aapcscc:    CC = CallingConv::ARM_AAPCS; break;
1165   case lltok::kw_arm_aapcs_vfpcc:CC = CallingConv::ARM_AAPCS_VFP; break;
1166   case lltok::kw_msp430_intrcc:  CC = CallingConv::MSP430_INTR; break;
1167   case lltok::kw_ptx_kernel:     CC = CallingConv::PTX_Kernel; break;
1168   case lltok::kw_ptx_device:     CC = CallingConv::PTX_Device; break;
1169   case lltok::kw_spir_kernel:    CC = CallingConv::SPIR_KERNEL; break;
1170   case lltok::kw_spir_func:      CC = CallingConv::SPIR_FUNC; break;
1171   case lltok::kw_intel_ocl_bicc: CC = CallingConv::Intel_OCL_BI; break;
1172   case lltok::kw_cc: {
1173       unsigned ArbitraryCC;
1174       Lex.Lex();
1175       if (ParseUInt32(ArbitraryCC))
1176         return true;
1177       CC = static_cast<CallingConv::ID>(ArbitraryCC);
1178       return false;
1179     }
1180   }
1181
1182   Lex.Lex();
1183   return false;
1184 }
1185
1186 /// ParseInstructionMetadata
1187 ///   ::= !dbg !42 (',' !dbg !57)*
1188 bool LLParser::ParseInstructionMetadata(Instruction *Inst,
1189                                         PerFunctionState *PFS) {
1190   do {
1191     if (Lex.getKind() != lltok::MetadataVar)
1192       return TokError("expected metadata after comma");
1193
1194     std::string Name = Lex.getStrVal();
1195     unsigned MDK = M->getMDKindID(Name);
1196     Lex.Lex();
1197
1198     MDNode *Node;
1199     SMLoc Loc = Lex.getLoc();
1200
1201     if (ParseToken(lltok::exclaim, "expected '!' here"))
1202       return true;
1203
1204     // This code is similar to that of ParseMetadataValue, however it needs to
1205     // have special-case code for a forward reference; see the comments on
1206     // ForwardRefInstMetadata for details. Also, MDStrings are not supported
1207     // at the top level here.
1208     if (Lex.getKind() == lltok::lbrace) {
1209       ValID ID;
1210       if (ParseMetadataListValue(ID, PFS))
1211         return true;
1212       assert(ID.Kind == ValID::t_MDNode);
1213       Inst->setMetadata(MDK, ID.MDNodeVal);
1214     } else {
1215       unsigned NodeID = 0;
1216       if (ParseMDNodeID(Node, NodeID))
1217         return true;
1218       if (Node) {
1219         // If we got the node, add it to the instruction.
1220         Inst->setMetadata(MDK, Node);
1221       } else {
1222         MDRef R = { Loc, MDK, NodeID };
1223         // Otherwise, remember that this should be resolved later.
1224         ForwardRefInstMetadata[Inst].push_back(R);
1225       }
1226     }
1227
1228     // If this is the end of the list, we're done.
1229   } while (EatIfPresent(lltok::comma));
1230   return false;
1231 }
1232
1233 /// ParseOptionalAlignment
1234 ///   ::= /* empty */
1235 ///   ::= 'align' 4
1236 bool LLParser::ParseOptionalAlignment(unsigned &Alignment) {
1237   Alignment = 0;
1238   if (!EatIfPresent(lltok::kw_align))
1239     return false;
1240   LocTy AlignLoc = Lex.getLoc();
1241   if (ParseUInt32(Alignment)) return true;
1242   if (!isPowerOf2_32(Alignment))
1243     return Error(AlignLoc, "alignment is not a power of two");
1244   if (Alignment > Value::MaximumAlignment)
1245     return Error(AlignLoc, "huge alignments are not supported yet");
1246   return false;
1247 }
1248
1249 /// ParseOptionalCommaAlign
1250 ///   ::=
1251 ///   ::= ',' align 4
1252 ///
1253 /// This returns with AteExtraComma set to true if it ate an excess comma at the
1254 /// end.
1255 bool LLParser::ParseOptionalCommaAlign(unsigned &Alignment,
1256                                        bool &AteExtraComma) {
1257   AteExtraComma = false;
1258   while (EatIfPresent(lltok::comma)) {
1259     // Metadata at the end is an early exit.
1260     if (Lex.getKind() == lltok::MetadataVar) {
1261       AteExtraComma = true;
1262       return false;
1263     }
1264
1265     if (Lex.getKind() != lltok::kw_align)
1266       return Error(Lex.getLoc(), "expected metadata or 'align'");
1267
1268     if (ParseOptionalAlignment(Alignment)) return true;
1269   }
1270
1271   return false;
1272 }
1273
1274 /// ParseScopeAndOrdering
1275 ///   if isAtomic: ::= 'singlethread'? AtomicOrdering
1276 ///   else: ::=
1277 ///
1278 /// This sets Scope and Ordering to the parsed values.
1279 bool LLParser::ParseScopeAndOrdering(bool isAtomic, SynchronizationScope &Scope,
1280                                      AtomicOrdering &Ordering) {
1281   if (!isAtomic)
1282     return false;
1283
1284   Scope = CrossThread;
1285   if (EatIfPresent(lltok::kw_singlethread))
1286     Scope = SingleThread;
1287   switch (Lex.getKind()) {
1288   default: return TokError("Expected ordering on atomic instruction");
1289   case lltok::kw_unordered: Ordering = Unordered; break;
1290   case lltok::kw_monotonic: Ordering = Monotonic; break;
1291   case lltok::kw_acquire: Ordering = Acquire; break;
1292   case lltok::kw_release: Ordering = Release; break;
1293   case lltok::kw_acq_rel: Ordering = AcquireRelease; break;
1294   case lltok::kw_seq_cst: Ordering = SequentiallyConsistent; break;
1295   }
1296   Lex.Lex();
1297   return false;
1298 }
1299
1300 /// ParseOptionalStackAlignment
1301 ///   ::= /* empty */
1302 ///   ::= 'alignstack' '(' 4 ')'
1303 bool LLParser::ParseOptionalStackAlignment(unsigned &Alignment) {
1304   Alignment = 0;
1305   if (!EatIfPresent(lltok::kw_alignstack))
1306     return false;
1307   LocTy ParenLoc = Lex.getLoc();
1308   if (!EatIfPresent(lltok::lparen))
1309     return Error(ParenLoc, "expected '('");
1310   LocTy AlignLoc = Lex.getLoc();
1311   if (ParseUInt32(Alignment)) return true;
1312   ParenLoc = Lex.getLoc();
1313   if (!EatIfPresent(lltok::rparen))
1314     return Error(ParenLoc, "expected ')'");
1315   if (!isPowerOf2_32(Alignment))
1316     return Error(AlignLoc, "stack alignment is not a power of two");
1317   return false;
1318 }
1319
1320 /// ParseIndexList - This parses the index list for an insert/extractvalue
1321 /// instruction.  This sets AteExtraComma in the case where we eat an extra
1322 /// comma at the end of the line and find that it is followed by metadata.
1323 /// Clients that don't allow metadata can call the version of this function that
1324 /// only takes one argument.
1325 ///
1326 /// ParseIndexList
1327 ///    ::=  (',' uint32)+
1328 ///
1329 bool LLParser::ParseIndexList(SmallVectorImpl<unsigned> &Indices,
1330                               bool &AteExtraComma) {
1331   AteExtraComma = false;
1332
1333   if (Lex.getKind() != lltok::comma)
1334     return TokError("expected ',' as start of index list");
1335
1336   while (EatIfPresent(lltok::comma)) {
1337     if (Lex.getKind() == lltok::MetadataVar) {
1338       AteExtraComma = true;
1339       return false;
1340     }
1341     unsigned Idx = 0;
1342     if (ParseUInt32(Idx)) return true;
1343     Indices.push_back(Idx);
1344   }
1345
1346   return false;
1347 }
1348
1349 //===----------------------------------------------------------------------===//
1350 // Type Parsing.
1351 //===----------------------------------------------------------------------===//
1352
1353 /// ParseType - Parse a type.
1354 bool LLParser::ParseType(Type *&Result, bool AllowVoid) {
1355   SMLoc TypeLoc = Lex.getLoc();
1356   switch (Lex.getKind()) {
1357   default:
1358     return TokError("expected type");
1359   case lltok::Type:
1360     // Type ::= 'float' | 'void' (etc)
1361     Result = Lex.getTyVal();
1362     Lex.Lex();
1363     break;
1364   case lltok::lbrace:
1365     // Type ::= StructType
1366     if (ParseAnonStructType(Result, false))
1367       return true;
1368     break;
1369   case lltok::lsquare:
1370     // Type ::= '[' ... ']'
1371     Lex.Lex(); // eat the lsquare.
1372     if (ParseArrayVectorType(Result, false))
1373       return true;
1374     break;
1375   case lltok::less: // Either vector or packed struct.
1376     // Type ::= '<' ... '>'
1377     Lex.Lex();
1378     if (Lex.getKind() == lltok::lbrace) {
1379       if (ParseAnonStructType(Result, true) ||
1380           ParseToken(lltok::greater, "expected '>' at end of packed struct"))
1381         return true;
1382     } else if (ParseArrayVectorType(Result, true))
1383       return true;
1384     break;
1385   case lltok::LocalVar: {
1386     // Type ::= %foo
1387     std::pair<Type*, LocTy> &Entry = NamedTypes[Lex.getStrVal()];
1388
1389     // If the type hasn't been defined yet, create a forward definition and
1390     // remember where that forward def'n was seen (in case it never is defined).
1391     if (Entry.first == 0) {
1392       Entry.first = StructType::create(Context, Lex.getStrVal());
1393       Entry.second = Lex.getLoc();
1394     }
1395     Result = Entry.first;
1396     Lex.Lex();
1397     break;
1398   }
1399
1400   case lltok::LocalVarID: {
1401     // Type ::= %4
1402     if (Lex.getUIntVal() >= NumberedTypes.size())
1403       NumberedTypes.resize(Lex.getUIntVal()+1);
1404     std::pair<Type*, LocTy> &Entry = NumberedTypes[Lex.getUIntVal()];
1405
1406     // If the type hasn't been defined yet, create a forward definition and
1407     // remember where that forward def'n was seen (in case it never is defined).
1408     if (Entry.first == 0) {
1409       Entry.first = StructType::create(Context);
1410       Entry.second = Lex.getLoc();
1411     }
1412     Result = Entry.first;
1413     Lex.Lex();
1414     break;
1415   }
1416   }
1417
1418   // Parse the type suffixes.
1419   while (1) {
1420     switch (Lex.getKind()) {
1421     // End of type.
1422     default:
1423       if (!AllowVoid && Result->isVoidTy())
1424         return Error(TypeLoc, "void type only allowed for function results");
1425       return false;
1426
1427     // Type ::= Type '*'
1428     case lltok::star:
1429       if (Result->isLabelTy())
1430         return TokError("basic block pointers are invalid");
1431       if (Result->isVoidTy())
1432         return TokError("pointers to void are invalid - use i8* instead");
1433       if (!PointerType::isValidElementType(Result))
1434         return TokError("pointer to this type is invalid");
1435       Result = PointerType::getUnqual(Result);
1436       Lex.Lex();
1437       break;
1438
1439     // Type ::= Type 'addrspace' '(' uint32 ')' '*'
1440     case lltok::kw_addrspace: {
1441       if (Result->isLabelTy())
1442         return TokError("basic block pointers are invalid");
1443       if (Result->isVoidTy())
1444         return TokError("pointers to void are invalid; use i8* instead");
1445       if (!PointerType::isValidElementType(Result))
1446         return TokError("pointer to this type is invalid");
1447       unsigned AddrSpace;
1448       if (ParseOptionalAddrSpace(AddrSpace) ||
1449           ParseToken(lltok::star, "expected '*' in address space"))
1450         return true;
1451
1452       Result = PointerType::get(Result, AddrSpace);
1453       break;
1454     }
1455
1456     /// Types '(' ArgTypeListI ')' OptFuncAttrs
1457     case lltok::lparen:
1458       if (ParseFunctionType(Result))
1459         return true;
1460       break;
1461     }
1462   }
1463 }
1464
1465 /// ParseParameterList
1466 ///    ::= '(' ')'
1467 ///    ::= '(' Arg (',' Arg)* ')'
1468 ///  Arg
1469 ///    ::= Type OptionalAttributes Value OptionalAttributes
1470 bool LLParser::ParseParameterList(SmallVectorImpl<ParamInfo> &ArgList,
1471                                   PerFunctionState &PFS) {
1472   if (ParseToken(lltok::lparen, "expected '(' in call"))
1473     return true;
1474
1475   while (Lex.getKind() != lltok::rparen) {
1476     // If this isn't the first argument, we need a comma.
1477     if (!ArgList.empty() &&
1478         ParseToken(lltok::comma, "expected ',' in argument list"))
1479       return true;
1480
1481     // Parse the argument.
1482     LocTy ArgLoc;
1483     Type *ArgTy = 0;
1484     AttrBuilder ArgAttrs;
1485     Value *V;
1486     if (ParseType(ArgTy, ArgLoc))
1487       return true;
1488
1489     // Otherwise, handle normal operands.
1490     if (ParseOptionalParamAttrs(ArgAttrs) || ParseValue(ArgTy, V, PFS))
1491       return true;
1492     ArgList.push_back(ParamInfo(ArgLoc, V, Attribute::get(V->getContext(),
1493                                                            ArgAttrs)));
1494   }
1495
1496   Lex.Lex();  // Lex the ')'.
1497   return false;
1498 }
1499
1500
1501
1502 /// ParseArgumentList - Parse the argument list for a function type or function
1503 /// prototype.
1504 ///   ::= '(' ArgTypeListI ')'
1505 /// ArgTypeListI
1506 ///   ::= /*empty*/
1507 ///   ::= '...'
1508 ///   ::= ArgTypeList ',' '...'
1509 ///   ::= ArgType (',' ArgType)*
1510 ///
1511 bool LLParser::ParseArgumentList(SmallVectorImpl<ArgInfo> &ArgList,
1512                                  bool &isVarArg){
1513   isVarArg = false;
1514   assert(Lex.getKind() == lltok::lparen);
1515   Lex.Lex(); // eat the (.
1516
1517   if (Lex.getKind() == lltok::rparen) {
1518     // empty
1519   } else if (Lex.getKind() == lltok::dotdotdot) {
1520     isVarArg = true;
1521     Lex.Lex();
1522   } else {
1523     LocTy TypeLoc = Lex.getLoc();
1524     Type *ArgTy = 0;
1525     AttrBuilder Attrs;
1526     std::string Name;
1527
1528     if (ParseType(ArgTy) ||
1529         ParseOptionalParamAttrs(Attrs)) return true;
1530
1531     if (ArgTy->isVoidTy())
1532       return Error(TypeLoc, "argument can not have void type");
1533
1534     if (Lex.getKind() == lltok::LocalVar) {
1535       Name = Lex.getStrVal();
1536       Lex.Lex();
1537     }
1538
1539     if (!FunctionType::isValidArgumentType(ArgTy))
1540       return Error(TypeLoc, "invalid type for function argument");
1541
1542     ArgList.push_back(ArgInfo(TypeLoc, ArgTy,
1543                               Attribute::get(ArgTy->getContext(),
1544                                               Attrs), Name));
1545
1546     while (EatIfPresent(lltok::comma)) {
1547       // Handle ... at end of arg list.
1548       if (EatIfPresent(lltok::dotdotdot)) {
1549         isVarArg = true;
1550         break;
1551       }
1552
1553       // Otherwise must be an argument type.
1554       TypeLoc = Lex.getLoc();
1555       if (ParseType(ArgTy) || ParseOptionalParamAttrs(Attrs)) return true;
1556
1557       if (ArgTy->isVoidTy())
1558         return Error(TypeLoc, "argument can not have void type");
1559
1560       if (Lex.getKind() == lltok::LocalVar) {
1561         Name = Lex.getStrVal();
1562         Lex.Lex();
1563       } else {
1564         Name = "";
1565       }
1566
1567       if (!ArgTy->isFirstClassType())
1568         return Error(TypeLoc, "invalid type for function argument");
1569
1570       ArgList.push_back(ArgInfo(TypeLoc, ArgTy,
1571                                 Attribute::get(ArgTy->getContext(), Attrs),
1572                                 Name));
1573     }
1574   }
1575
1576   return ParseToken(lltok::rparen, "expected ')' at end of argument list");
1577 }
1578
1579 /// ParseFunctionType
1580 ///  ::= Type ArgumentList OptionalAttrs
1581 bool LLParser::ParseFunctionType(Type *&Result) {
1582   assert(Lex.getKind() == lltok::lparen);
1583
1584   if (!FunctionType::isValidReturnType(Result))
1585     return TokError("invalid function return type");
1586
1587   SmallVector<ArgInfo, 8> ArgList;
1588   bool isVarArg;
1589   if (ParseArgumentList(ArgList, isVarArg))
1590     return true;
1591
1592   // Reject names on the arguments lists.
1593   for (unsigned i = 0, e = ArgList.size(); i != e; ++i) {
1594     if (!ArgList[i].Name.empty())
1595       return Error(ArgList[i].Loc, "argument name invalid in function type");
1596     if (ArgList[i].Attrs.hasAttributes())
1597       return Error(ArgList[i].Loc,
1598                    "argument attributes invalid in function type");
1599   }
1600
1601   SmallVector<Type*, 16> ArgListTy;
1602   for (unsigned i = 0, e = ArgList.size(); i != e; ++i)
1603     ArgListTy.push_back(ArgList[i].Ty);
1604
1605   Result = FunctionType::get(Result, ArgListTy, isVarArg);
1606   return false;
1607 }
1608
1609 /// ParseAnonStructType - Parse an anonymous struct type, which is inlined into
1610 /// other structs.
1611 bool LLParser::ParseAnonStructType(Type *&Result, bool Packed) {
1612   SmallVector<Type*, 8> Elts;
1613   if (ParseStructBody(Elts)) return true;
1614
1615   Result = StructType::get(Context, Elts, Packed);
1616   return false;
1617 }
1618
1619 /// ParseStructDefinition - Parse a struct in a 'type' definition.
1620 bool LLParser::ParseStructDefinition(SMLoc TypeLoc, StringRef Name,
1621                                      std::pair<Type*, LocTy> &Entry,
1622                                      Type *&ResultTy) {
1623   // If the type was already defined, diagnose the redefinition.
1624   if (Entry.first && !Entry.second.isValid())
1625     return Error(TypeLoc, "redefinition of type");
1626
1627   // If we have opaque, just return without filling in the definition for the
1628   // struct.  This counts as a definition as far as the .ll file goes.
1629   if (EatIfPresent(lltok::kw_opaque)) {
1630     // This type is being defined, so clear the location to indicate this.
1631     Entry.second = SMLoc();
1632
1633     // If this type number has never been uttered, create it.
1634     if (Entry.first == 0)
1635       Entry.first = StructType::create(Context, Name);
1636     ResultTy = Entry.first;
1637     return false;
1638   }
1639
1640   // If the type starts with '<', then it is either a packed struct or a vector.
1641   bool isPacked = EatIfPresent(lltok::less);
1642
1643   // If we don't have a struct, then we have a random type alias, which we
1644   // accept for compatibility with old files.  These types are not allowed to be
1645   // forward referenced and not allowed to be recursive.
1646   if (Lex.getKind() != lltok::lbrace) {
1647     if (Entry.first)
1648       return Error(TypeLoc, "forward references to non-struct type");
1649
1650     ResultTy = 0;
1651     if (isPacked)
1652       return ParseArrayVectorType(ResultTy, true);
1653     return ParseType(ResultTy);
1654   }
1655
1656   // This type is being defined, so clear the location to indicate this.
1657   Entry.second = SMLoc();
1658
1659   // If this type number has never been uttered, create it.
1660   if (Entry.first == 0)
1661     Entry.first = StructType::create(Context, Name);
1662
1663   StructType *STy = cast<StructType>(Entry.first);
1664
1665   SmallVector<Type*, 8> Body;
1666   if (ParseStructBody(Body) ||
1667       (isPacked && ParseToken(lltok::greater, "expected '>' in packed struct")))
1668     return true;
1669
1670   STy->setBody(Body, isPacked);
1671   ResultTy = STy;
1672   return false;
1673 }
1674
1675
1676 /// ParseStructType: Handles packed and unpacked types.  </> parsed elsewhere.
1677 ///   StructType
1678 ///     ::= '{' '}'
1679 ///     ::= '{' Type (',' Type)* '}'
1680 ///     ::= '<' '{' '}' '>'
1681 ///     ::= '<' '{' Type (',' Type)* '}' '>'
1682 bool LLParser::ParseStructBody(SmallVectorImpl<Type*> &Body) {
1683   assert(Lex.getKind() == lltok::lbrace);
1684   Lex.Lex(); // Consume the '{'
1685
1686   // Handle the empty struct.
1687   if (EatIfPresent(lltok::rbrace))
1688     return false;
1689
1690   LocTy EltTyLoc = Lex.getLoc();
1691   Type *Ty = 0;
1692   if (ParseType(Ty)) return true;
1693   Body.push_back(Ty);
1694
1695   if (!StructType::isValidElementType(Ty))
1696     return Error(EltTyLoc, "invalid element type for struct");
1697
1698   while (EatIfPresent(lltok::comma)) {
1699     EltTyLoc = Lex.getLoc();
1700     if (ParseType(Ty)) return true;
1701
1702     if (!StructType::isValidElementType(Ty))
1703       return Error(EltTyLoc, "invalid element type for struct");
1704
1705     Body.push_back(Ty);
1706   }
1707
1708   return ParseToken(lltok::rbrace, "expected '}' at end of struct");
1709 }
1710
1711 /// ParseArrayVectorType - Parse an array or vector type, assuming the first
1712 /// token has already been consumed.
1713 ///   Type
1714 ///     ::= '[' APSINTVAL 'x' Types ']'
1715 ///     ::= '<' APSINTVAL 'x' Types '>'
1716 bool LLParser::ParseArrayVectorType(Type *&Result, bool isVector) {
1717   if (Lex.getKind() != lltok::APSInt || Lex.getAPSIntVal().isSigned() ||
1718       Lex.getAPSIntVal().getBitWidth() > 64)
1719     return TokError("expected number in address space");
1720
1721   LocTy SizeLoc = Lex.getLoc();
1722   uint64_t Size = Lex.getAPSIntVal().getZExtValue();
1723   Lex.Lex();
1724
1725   if (ParseToken(lltok::kw_x, "expected 'x' after element count"))
1726       return true;
1727
1728   LocTy TypeLoc = Lex.getLoc();
1729   Type *EltTy = 0;
1730   if (ParseType(EltTy)) return true;
1731
1732   if (ParseToken(isVector ? lltok::greater : lltok::rsquare,
1733                  "expected end of sequential type"))
1734     return true;
1735
1736   if (isVector) {
1737     if (Size == 0)
1738       return Error(SizeLoc, "zero element vector is illegal");
1739     if ((unsigned)Size != Size)
1740       return Error(SizeLoc, "size too large for vector");
1741     if (!VectorType::isValidElementType(EltTy))
1742       return Error(TypeLoc, "invalid vector element type");
1743     Result = VectorType::get(EltTy, unsigned(Size));
1744   } else {
1745     if (!ArrayType::isValidElementType(EltTy))
1746       return Error(TypeLoc, "invalid array element type");
1747     Result = ArrayType::get(EltTy, Size);
1748   }
1749   return false;
1750 }
1751
1752 //===----------------------------------------------------------------------===//
1753 // Function Semantic Analysis.
1754 //===----------------------------------------------------------------------===//
1755
1756 LLParser::PerFunctionState::PerFunctionState(LLParser &p, Function &f,
1757                                              int functionNumber)
1758   : P(p), F(f), FunctionNumber(functionNumber) {
1759
1760   // Insert unnamed arguments into the NumberedVals list.
1761   for (Function::arg_iterator AI = F.arg_begin(), E = F.arg_end();
1762        AI != E; ++AI)
1763     if (!AI->hasName())
1764       NumberedVals.push_back(AI);
1765 }
1766
1767 LLParser::PerFunctionState::~PerFunctionState() {
1768   // If there were any forward referenced non-basicblock values, delete them.
1769   for (std::map<std::string, std::pair<Value*, LocTy> >::iterator
1770        I = ForwardRefVals.begin(), E = ForwardRefVals.end(); I != E; ++I)
1771     if (!isa<BasicBlock>(I->second.first)) {
1772       I->second.first->replaceAllUsesWith(
1773                            UndefValue::get(I->second.first->getType()));
1774       delete I->second.first;
1775       I->second.first = 0;
1776     }
1777
1778   for (std::map<unsigned, std::pair<Value*, LocTy> >::iterator
1779        I = ForwardRefValIDs.begin(), E = ForwardRefValIDs.end(); I != E; ++I)
1780     if (!isa<BasicBlock>(I->second.first)) {
1781       I->second.first->replaceAllUsesWith(
1782                            UndefValue::get(I->second.first->getType()));
1783       delete I->second.first;
1784       I->second.first = 0;
1785     }
1786 }
1787
1788 bool LLParser::PerFunctionState::FinishFunction() {
1789   // Check to see if someone took the address of labels in this block.
1790   if (!P.ForwardRefBlockAddresses.empty()) {
1791     ValID FunctionID;
1792     if (!F.getName().empty()) {
1793       FunctionID.Kind = ValID::t_GlobalName;
1794       FunctionID.StrVal = F.getName();
1795     } else {
1796       FunctionID.Kind = ValID::t_GlobalID;
1797       FunctionID.UIntVal = FunctionNumber;
1798     }
1799
1800     std::map<ValID, std::vector<std::pair<ValID, GlobalValue*> > >::iterator
1801       FRBAI = P.ForwardRefBlockAddresses.find(FunctionID);
1802     if (FRBAI != P.ForwardRefBlockAddresses.end()) {
1803       // Resolve all these references.
1804       if (P.ResolveForwardRefBlockAddresses(&F, FRBAI->second, this))
1805         return true;
1806
1807       P.ForwardRefBlockAddresses.erase(FRBAI);
1808     }
1809   }
1810
1811   if (!ForwardRefVals.empty())
1812     return P.Error(ForwardRefVals.begin()->second.second,
1813                    "use of undefined value '%" + ForwardRefVals.begin()->first +
1814                    "'");
1815   if (!ForwardRefValIDs.empty())
1816     return P.Error(ForwardRefValIDs.begin()->second.second,
1817                    "use of undefined value '%" +
1818                    Twine(ForwardRefValIDs.begin()->first) + "'");
1819   return false;
1820 }
1821
1822
1823 /// GetVal - Get a value with the specified name or ID, creating a
1824 /// forward reference record if needed.  This can return null if the value
1825 /// exists but does not have the right type.
1826 Value *LLParser::PerFunctionState::GetVal(const std::string &Name,
1827                                           Type *Ty, LocTy Loc) {
1828   // Look this name up in the normal function symbol table.
1829   Value *Val = F.getValueSymbolTable().lookup(Name);
1830
1831   // If this is a forward reference for the value, see if we already created a
1832   // forward ref record.
1833   if (Val == 0) {
1834     std::map<std::string, std::pair<Value*, LocTy> >::iterator
1835       I = ForwardRefVals.find(Name);
1836     if (I != ForwardRefVals.end())
1837       Val = I->second.first;
1838   }
1839
1840   // If we have the value in the symbol table or fwd-ref table, return it.
1841   if (Val) {
1842     if (Val->getType() == Ty) return Val;
1843     if (Ty->isLabelTy())
1844       P.Error(Loc, "'%" + Name + "' is not a basic block");
1845     else
1846       P.Error(Loc, "'%" + Name + "' defined with type '" +
1847               getTypeString(Val->getType()) + "'");
1848     return 0;
1849   }
1850
1851   // Don't make placeholders with invalid type.
1852   if (!Ty->isFirstClassType() && !Ty->isLabelTy()) {
1853     P.Error(Loc, "invalid use of a non-first-class type");
1854     return 0;
1855   }
1856
1857   // Otherwise, create a new forward reference for this value and remember it.
1858   Value *FwdVal;
1859   if (Ty->isLabelTy())
1860     FwdVal = BasicBlock::Create(F.getContext(), Name, &F);
1861   else
1862     FwdVal = new Argument(Ty, Name);
1863
1864   ForwardRefVals[Name] = std::make_pair(FwdVal, Loc);
1865   return FwdVal;
1866 }
1867
1868 Value *LLParser::PerFunctionState::GetVal(unsigned ID, Type *Ty,
1869                                           LocTy Loc) {
1870   // Look this name up in the normal function symbol table.
1871   Value *Val = ID < NumberedVals.size() ? NumberedVals[ID] : 0;
1872
1873   // If this is a forward reference for the value, see if we already created a
1874   // forward ref record.
1875   if (Val == 0) {
1876     std::map<unsigned, std::pair<Value*, LocTy> >::iterator
1877       I = ForwardRefValIDs.find(ID);
1878     if (I != ForwardRefValIDs.end())
1879       Val = I->second.first;
1880   }
1881
1882   // If we have the value in the symbol table or fwd-ref table, return it.
1883   if (Val) {
1884     if (Val->getType() == Ty) return Val;
1885     if (Ty->isLabelTy())
1886       P.Error(Loc, "'%" + Twine(ID) + "' is not a basic block");
1887     else
1888       P.Error(Loc, "'%" + Twine(ID) + "' defined with type '" +
1889               getTypeString(Val->getType()) + "'");
1890     return 0;
1891   }
1892
1893   if (!Ty->isFirstClassType() && !Ty->isLabelTy()) {
1894     P.Error(Loc, "invalid use of a non-first-class type");
1895     return 0;
1896   }
1897
1898   // Otherwise, create a new forward reference for this value and remember it.
1899   Value *FwdVal;
1900   if (Ty->isLabelTy())
1901     FwdVal = BasicBlock::Create(F.getContext(), "", &F);
1902   else
1903     FwdVal = new Argument(Ty);
1904
1905   ForwardRefValIDs[ID] = std::make_pair(FwdVal, Loc);
1906   return FwdVal;
1907 }
1908
1909 /// SetInstName - After an instruction is parsed and inserted into its
1910 /// basic block, this installs its name.
1911 bool LLParser::PerFunctionState::SetInstName(int NameID,
1912                                              const std::string &NameStr,
1913                                              LocTy NameLoc, Instruction *Inst) {
1914   // If this instruction has void type, it cannot have a name or ID specified.
1915   if (Inst->getType()->isVoidTy()) {
1916     if (NameID != -1 || !NameStr.empty())
1917       return P.Error(NameLoc, "instructions returning void cannot have a name");
1918     return false;
1919   }
1920
1921   // If this was a numbered instruction, verify that the instruction is the
1922   // expected value and resolve any forward references.
1923   if (NameStr.empty()) {
1924     // If neither a name nor an ID was specified, just use the next ID.
1925     if (NameID == -1)
1926       NameID = NumberedVals.size();
1927
1928     if (unsigned(NameID) != NumberedVals.size())
1929       return P.Error(NameLoc, "instruction expected to be numbered '%" +
1930                      Twine(NumberedVals.size()) + "'");
1931
1932     std::map<unsigned, std::pair<Value*, LocTy> >::iterator FI =
1933       ForwardRefValIDs.find(NameID);
1934     if (FI != ForwardRefValIDs.end()) {
1935       if (FI->second.first->getType() != Inst->getType())
1936         return P.Error(NameLoc, "instruction forward referenced with type '" +
1937                        getTypeString(FI->second.first->getType()) + "'");
1938       FI->second.first->replaceAllUsesWith(Inst);
1939       delete FI->second.first;
1940       ForwardRefValIDs.erase(FI);
1941     }
1942
1943     NumberedVals.push_back(Inst);
1944     return false;
1945   }
1946
1947   // Otherwise, the instruction had a name.  Resolve forward refs and set it.
1948   std::map<std::string, std::pair<Value*, LocTy> >::iterator
1949     FI = ForwardRefVals.find(NameStr);
1950   if (FI != ForwardRefVals.end()) {
1951     if (FI->second.first->getType() != Inst->getType())
1952       return P.Error(NameLoc, "instruction forward referenced with type '" +
1953                      getTypeString(FI->second.first->getType()) + "'");
1954     FI->second.first->replaceAllUsesWith(Inst);
1955     delete FI->second.first;
1956     ForwardRefVals.erase(FI);
1957   }
1958
1959   // Set the name on the instruction.
1960   Inst->setName(NameStr);
1961
1962   if (Inst->getName() != NameStr)
1963     return P.Error(NameLoc, "multiple definition of local value named '" +
1964                    NameStr + "'");
1965   return false;
1966 }
1967
1968 /// GetBB - Get a basic block with the specified name or ID, creating a
1969 /// forward reference record if needed.
1970 BasicBlock *LLParser::PerFunctionState::GetBB(const std::string &Name,
1971                                               LocTy Loc) {
1972   return cast_or_null<BasicBlock>(GetVal(Name,
1973                                         Type::getLabelTy(F.getContext()), Loc));
1974 }
1975
1976 BasicBlock *LLParser::PerFunctionState::GetBB(unsigned ID, LocTy Loc) {
1977   return cast_or_null<BasicBlock>(GetVal(ID,
1978                                         Type::getLabelTy(F.getContext()), Loc));
1979 }
1980
1981 /// DefineBB - Define the specified basic block, which is either named or
1982 /// unnamed.  If there is an error, this returns null otherwise it returns
1983 /// the block being defined.
1984 BasicBlock *LLParser::PerFunctionState::DefineBB(const std::string &Name,
1985                                                  LocTy Loc) {
1986   BasicBlock *BB;
1987   if (Name.empty())
1988     BB = GetBB(NumberedVals.size(), Loc);
1989   else
1990     BB = GetBB(Name, Loc);
1991   if (BB == 0) return 0; // Already diagnosed error.
1992
1993   // Move the block to the end of the function.  Forward ref'd blocks are
1994   // inserted wherever they happen to be referenced.
1995   F.getBasicBlockList().splice(F.end(), F.getBasicBlockList(), BB);
1996
1997   // Remove the block from forward ref sets.
1998   if (Name.empty()) {
1999     ForwardRefValIDs.erase(NumberedVals.size());
2000     NumberedVals.push_back(BB);
2001   } else {
2002     // BB forward references are already in the function symbol table.
2003     ForwardRefVals.erase(Name);
2004   }
2005
2006   return BB;
2007 }
2008
2009 //===----------------------------------------------------------------------===//
2010 // Constants.
2011 //===----------------------------------------------------------------------===//
2012
2013 /// ParseValID - Parse an abstract value that doesn't necessarily have a
2014 /// type implied.  For example, if we parse "4" we don't know what integer type
2015 /// it has.  The value will later be combined with its type and checked for
2016 /// sanity.  PFS is used to convert function-local operands of metadata (since
2017 /// metadata operands are not just parsed here but also converted to values).
2018 /// PFS can be null when we are not parsing metadata values inside a function.
2019 bool LLParser::ParseValID(ValID &ID, PerFunctionState *PFS) {
2020   ID.Loc = Lex.getLoc();
2021   switch (Lex.getKind()) {
2022   default: return TokError("expected value token");
2023   case lltok::GlobalID:  // @42
2024     ID.UIntVal = Lex.getUIntVal();
2025     ID.Kind = ValID::t_GlobalID;
2026     break;
2027   case lltok::GlobalVar:  // @foo
2028     ID.StrVal = Lex.getStrVal();
2029     ID.Kind = ValID::t_GlobalName;
2030     break;
2031   case lltok::LocalVarID:  // %42
2032     ID.UIntVal = Lex.getUIntVal();
2033     ID.Kind = ValID::t_LocalID;
2034     break;
2035   case lltok::LocalVar:  // %foo
2036     ID.StrVal = Lex.getStrVal();
2037     ID.Kind = ValID::t_LocalName;
2038     break;
2039   case lltok::exclaim:   // !42, !{...}, or !"foo"
2040     return ParseMetadataValue(ID, PFS);
2041   case lltok::APSInt:
2042     ID.APSIntVal = Lex.getAPSIntVal();
2043     ID.Kind = ValID::t_APSInt;
2044     break;
2045   case lltok::APFloat:
2046     ID.APFloatVal = Lex.getAPFloatVal();
2047     ID.Kind = ValID::t_APFloat;
2048     break;
2049   case lltok::kw_true:
2050     ID.ConstantVal = ConstantInt::getTrue(Context);
2051     ID.Kind = ValID::t_Constant;
2052     break;
2053   case lltok::kw_false:
2054     ID.ConstantVal = ConstantInt::getFalse(Context);
2055     ID.Kind = ValID::t_Constant;
2056     break;
2057   case lltok::kw_null: ID.Kind = ValID::t_Null; break;
2058   case lltok::kw_undef: ID.Kind = ValID::t_Undef; break;
2059   case lltok::kw_zeroinitializer: ID.Kind = ValID::t_Zero; break;
2060
2061   case lltok::lbrace: {
2062     // ValID ::= '{' ConstVector '}'
2063     Lex.Lex();
2064     SmallVector<Constant*, 16> Elts;
2065     if (ParseGlobalValueVector(Elts) ||
2066         ParseToken(lltok::rbrace, "expected end of struct constant"))
2067       return true;
2068
2069     ID.ConstantStructElts = new Constant*[Elts.size()];
2070     ID.UIntVal = Elts.size();
2071     memcpy(ID.ConstantStructElts, Elts.data(), Elts.size()*sizeof(Elts[0]));
2072     ID.Kind = ValID::t_ConstantStruct;
2073     return false;
2074   }
2075   case lltok::less: {
2076     // ValID ::= '<' ConstVector '>'         --> Vector.
2077     // ValID ::= '<' '{' ConstVector '}' '>' --> Packed Struct.
2078     Lex.Lex();
2079     bool isPackedStruct = EatIfPresent(lltok::lbrace);
2080
2081     SmallVector<Constant*, 16> Elts;
2082     LocTy FirstEltLoc = Lex.getLoc();
2083     if (ParseGlobalValueVector(Elts) ||
2084         (isPackedStruct &&
2085          ParseToken(lltok::rbrace, "expected end of packed struct")) ||
2086         ParseToken(lltok::greater, "expected end of constant"))
2087       return true;
2088
2089     if (isPackedStruct) {
2090       ID.ConstantStructElts = new Constant*[Elts.size()];
2091       memcpy(ID.ConstantStructElts, Elts.data(), Elts.size()*sizeof(Elts[0]));
2092       ID.UIntVal = Elts.size();
2093       ID.Kind = ValID::t_PackedConstantStruct;
2094       return false;
2095     }
2096
2097     if (Elts.empty())
2098       return Error(ID.Loc, "constant vector must not be empty");
2099
2100     if (!Elts[0]->getType()->isIntegerTy() &&
2101         !Elts[0]->getType()->isFloatingPointTy() &&
2102         !Elts[0]->getType()->isPointerTy())
2103       return Error(FirstEltLoc,
2104             "vector elements must have integer, pointer or floating point type");
2105
2106     // Verify that all the vector elements have the same type.
2107     for (unsigned i = 1, e = Elts.size(); i != e; ++i)
2108       if (Elts[i]->getType() != Elts[0]->getType())
2109         return Error(FirstEltLoc,
2110                      "vector element #" + Twine(i) +
2111                     " is not of type '" + getTypeString(Elts[0]->getType()));
2112
2113     ID.ConstantVal = ConstantVector::get(Elts);
2114     ID.Kind = ValID::t_Constant;
2115     return false;
2116   }
2117   case lltok::lsquare: {   // Array Constant
2118     Lex.Lex();
2119     SmallVector<Constant*, 16> Elts;
2120     LocTy FirstEltLoc = Lex.getLoc();
2121     if (ParseGlobalValueVector(Elts) ||
2122         ParseToken(lltok::rsquare, "expected end of array constant"))
2123       return true;
2124
2125     // Handle empty element.
2126     if (Elts.empty()) {
2127       // Use undef instead of an array because it's inconvenient to determine
2128       // the element type at this point, there being no elements to examine.
2129       ID.Kind = ValID::t_EmptyArray;
2130       return false;
2131     }
2132
2133     if (!Elts[0]->getType()->isFirstClassType())
2134       return Error(FirstEltLoc, "invalid array element type: " +
2135                    getTypeString(Elts[0]->getType()));
2136
2137     ArrayType *ATy = ArrayType::get(Elts[0]->getType(), Elts.size());
2138
2139     // Verify all elements are correct type!
2140     for (unsigned i = 0, e = Elts.size(); i != e; ++i) {
2141       if (Elts[i]->getType() != Elts[0]->getType())
2142         return Error(FirstEltLoc,
2143                      "array element #" + Twine(i) +
2144                      " is not of type '" + getTypeString(Elts[0]->getType()));
2145     }
2146
2147     ID.ConstantVal = ConstantArray::get(ATy, Elts);
2148     ID.Kind = ValID::t_Constant;
2149     return false;
2150   }
2151   case lltok::kw_c:  // c "foo"
2152     Lex.Lex();
2153     ID.ConstantVal = ConstantDataArray::getString(Context, Lex.getStrVal(),
2154                                                   false);
2155     if (ParseToken(lltok::StringConstant, "expected string")) return true;
2156     ID.Kind = ValID::t_Constant;
2157     return false;
2158
2159   case lltok::kw_asm: {
2160     // ValID ::= 'asm' SideEffect? AlignStack? STRINGCONSTANT ',' STRINGCONSTANT
2161     bool HasSideEffect, AlignStack, AsmDialect;
2162     Lex.Lex();
2163     if (ParseOptionalToken(lltok::kw_sideeffect, HasSideEffect) ||
2164         ParseOptionalToken(lltok::kw_alignstack, AlignStack) ||
2165         ParseOptionalToken(lltok::kw_inteldialect, AsmDialect) ||
2166         ParseStringConstant(ID.StrVal) ||
2167         ParseToken(lltok::comma, "expected comma in inline asm expression") ||
2168         ParseToken(lltok::StringConstant, "expected constraint string"))
2169       return true;
2170     ID.StrVal2 = Lex.getStrVal();
2171     ID.UIntVal = unsigned(HasSideEffect) | (unsigned(AlignStack)<<1) |
2172       (unsigned(AsmDialect)<<2);
2173     ID.Kind = ValID::t_InlineAsm;
2174     return false;
2175   }
2176
2177   case lltok::kw_blockaddress: {
2178     // ValID ::= 'blockaddress' '(' @foo ',' %bar ')'
2179     Lex.Lex();
2180
2181     ValID Fn, Label;
2182     LocTy FnLoc, LabelLoc;
2183
2184     if (ParseToken(lltok::lparen, "expected '(' in block address expression") ||
2185         ParseValID(Fn) ||
2186         ParseToken(lltok::comma, "expected comma in block address expression")||
2187         ParseValID(Label) ||
2188         ParseToken(lltok::rparen, "expected ')' in block address expression"))
2189       return true;
2190
2191     if (Fn.Kind != ValID::t_GlobalID && Fn.Kind != ValID::t_GlobalName)
2192       return Error(Fn.Loc, "expected function name in blockaddress");
2193     if (Label.Kind != ValID::t_LocalID && Label.Kind != ValID::t_LocalName)
2194       return Error(Label.Loc, "expected basic block name in blockaddress");
2195
2196     // Make a global variable as a placeholder for this reference.
2197     GlobalVariable *FwdRef = new GlobalVariable(*M, Type::getInt8Ty(Context),
2198                                            false, GlobalValue::InternalLinkage,
2199                                                 0, "");
2200     ForwardRefBlockAddresses[Fn].push_back(std::make_pair(Label, FwdRef));
2201     ID.ConstantVal = FwdRef;
2202     ID.Kind = ValID::t_Constant;
2203     return false;
2204   }
2205
2206   case lltok::kw_trunc:
2207   case lltok::kw_zext:
2208   case lltok::kw_sext:
2209   case lltok::kw_fptrunc:
2210   case lltok::kw_fpext:
2211   case lltok::kw_bitcast:
2212   case lltok::kw_uitofp:
2213   case lltok::kw_sitofp:
2214   case lltok::kw_fptoui:
2215   case lltok::kw_fptosi:
2216   case lltok::kw_inttoptr:
2217   case lltok::kw_ptrtoint: {
2218     unsigned Opc = Lex.getUIntVal();
2219     Type *DestTy = 0;
2220     Constant *SrcVal;
2221     Lex.Lex();
2222     if (ParseToken(lltok::lparen, "expected '(' after constantexpr cast") ||
2223         ParseGlobalTypeAndValue(SrcVal) ||
2224         ParseToken(lltok::kw_to, "expected 'to' in constantexpr cast") ||
2225         ParseType(DestTy) ||
2226         ParseToken(lltok::rparen, "expected ')' at end of constantexpr cast"))
2227       return true;
2228     if (!CastInst::castIsValid((Instruction::CastOps)Opc, SrcVal, DestTy))
2229       return Error(ID.Loc, "invalid cast opcode for cast from '" +
2230                    getTypeString(SrcVal->getType()) + "' to '" +
2231                    getTypeString(DestTy) + "'");
2232     ID.ConstantVal = ConstantExpr::getCast((Instruction::CastOps)Opc,
2233                                                  SrcVal, DestTy);
2234     ID.Kind = ValID::t_Constant;
2235     return false;
2236   }
2237   case lltok::kw_extractvalue: {
2238     Lex.Lex();
2239     Constant *Val;
2240     SmallVector<unsigned, 4> Indices;
2241     if (ParseToken(lltok::lparen, "expected '(' in extractvalue constantexpr")||
2242         ParseGlobalTypeAndValue(Val) ||
2243         ParseIndexList(Indices) ||
2244         ParseToken(lltok::rparen, "expected ')' in extractvalue constantexpr"))
2245       return true;
2246
2247     if (!Val->getType()->isAggregateType())
2248       return Error(ID.Loc, "extractvalue operand must be aggregate type");
2249     if (!ExtractValueInst::getIndexedType(Val->getType(), Indices))
2250       return Error(ID.Loc, "invalid indices for extractvalue");
2251     ID.ConstantVal = ConstantExpr::getExtractValue(Val, Indices);
2252     ID.Kind = ValID::t_Constant;
2253     return false;
2254   }
2255   case lltok::kw_insertvalue: {
2256     Lex.Lex();
2257     Constant *Val0, *Val1;
2258     SmallVector<unsigned, 4> Indices;
2259     if (ParseToken(lltok::lparen, "expected '(' in insertvalue constantexpr")||
2260         ParseGlobalTypeAndValue(Val0) ||
2261         ParseToken(lltok::comma, "expected comma in insertvalue constantexpr")||
2262         ParseGlobalTypeAndValue(Val1) ||
2263         ParseIndexList(Indices) ||
2264         ParseToken(lltok::rparen, "expected ')' in insertvalue constantexpr"))
2265       return true;
2266     if (!Val0->getType()->isAggregateType())
2267       return Error(ID.Loc, "insertvalue operand must be aggregate type");
2268     if (!ExtractValueInst::getIndexedType(Val0->getType(), Indices))
2269       return Error(ID.Loc, "invalid indices for insertvalue");
2270     ID.ConstantVal = ConstantExpr::getInsertValue(Val0, Val1, Indices);
2271     ID.Kind = ValID::t_Constant;
2272     return false;
2273   }
2274   case lltok::kw_icmp:
2275   case lltok::kw_fcmp: {
2276     unsigned PredVal, Opc = Lex.getUIntVal();
2277     Constant *Val0, *Val1;
2278     Lex.Lex();
2279     if (ParseCmpPredicate(PredVal, Opc) ||
2280         ParseToken(lltok::lparen, "expected '(' in compare constantexpr") ||
2281         ParseGlobalTypeAndValue(Val0) ||
2282         ParseToken(lltok::comma, "expected comma in compare constantexpr") ||
2283         ParseGlobalTypeAndValue(Val1) ||
2284         ParseToken(lltok::rparen, "expected ')' in compare constantexpr"))
2285       return true;
2286
2287     if (Val0->getType() != Val1->getType())
2288       return Error(ID.Loc, "compare operands must have the same type");
2289
2290     CmpInst::Predicate Pred = (CmpInst::Predicate)PredVal;
2291
2292     if (Opc == Instruction::FCmp) {
2293       if (!Val0->getType()->isFPOrFPVectorTy())
2294         return Error(ID.Loc, "fcmp requires floating point operands");
2295       ID.ConstantVal = ConstantExpr::getFCmp(Pred, Val0, Val1);
2296     } else {
2297       assert(Opc == Instruction::ICmp && "Unexpected opcode for CmpInst!");
2298       if (!Val0->getType()->isIntOrIntVectorTy() &&
2299           !Val0->getType()->getScalarType()->isPointerTy())
2300         return Error(ID.Loc, "icmp requires pointer or integer operands");
2301       ID.ConstantVal = ConstantExpr::getICmp(Pred, Val0, Val1);
2302     }
2303     ID.Kind = ValID::t_Constant;
2304     return false;
2305   }
2306
2307   // Binary Operators.
2308   case lltok::kw_add:
2309   case lltok::kw_fadd:
2310   case lltok::kw_sub:
2311   case lltok::kw_fsub:
2312   case lltok::kw_mul:
2313   case lltok::kw_fmul:
2314   case lltok::kw_udiv:
2315   case lltok::kw_sdiv:
2316   case lltok::kw_fdiv:
2317   case lltok::kw_urem:
2318   case lltok::kw_srem:
2319   case lltok::kw_frem:
2320   case lltok::kw_shl:
2321   case lltok::kw_lshr:
2322   case lltok::kw_ashr: {
2323     bool NUW = false;
2324     bool NSW = false;
2325     bool Exact = false;
2326     unsigned Opc = Lex.getUIntVal();
2327     Constant *Val0, *Val1;
2328     Lex.Lex();
2329     LocTy ModifierLoc = Lex.getLoc();
2330     if (Opc == Instruction::Add || Opc == Instruction::Sub ||
2331         Opc == Instruction::Mul || Opc == Instruction::Shl) {
2332       if (EatIfPresent(lltok::kw_nuw))
2333         NUW = true;
2334       if (EatIfPresent(lltok::kw_nsw)) {
2335         NSW = true;
2336         if (EatIfPresent(lltok::kw_nuw))
2337           NUW = true;
2338       }
2339     } else if (Opc == Instruction::SDiv || Opc == Instruction::UDiv ||
2340                Opc == Instruction::LShr || Opc == Instruction::AShr) {
2341       if (EatIfPresent(lltok::kw_exact))
2342         Exact = true;
2343     }
2344     if (ParseToken(lltok::lparen, "expected '(' in binary constantexpr") ||
2345         ParseGlobalTypeAndValue(Val0) ||
2346         ParseToken(lltok::comma, "expected comma in binary constantexpr") ||
2347         ParseGlobalTypeAndValue(Val1) ||
2348         ParseToken(lltok::rparen, "expected ')' in binary constantexpr"))
2349       return true;
2350     if (Val0->getType() != Val1->getType())
2351       return Error(ID.Loc, "operands of constexpr must have same type");
2352     if (!Val0->getType()->isIntOrIntVectorTy()) {
2353       if (NUW)
2354         return Error(ModifierLoc, "nuw only applies to integer operations");
2355       if (NSW)
2356         return Error(ModifierLoc, "nsw only applies to integer operations");
2357     }
2358     // Check that the type is valid for the operator.
2359     switch (Opc) {
2360     case Instruction::Add:
2361     case Instruction::Sub:
2362     case Instruction::Mul:
2363     case Instruction::UDiv:
2364     case Instruction::SDiv:
2365     case Instruction::URem:
2366     case Instruction::SRem:
2367     case Instruction::Shl:
2368     case Instruction::AShr:
2369     case Instruction::LShr:
2370       if (!Val0->getType()->isIntOrIntVectorTy())
2371         return Error(ID.Loc, "constexpr requires integer operands");
2372       break;
2373     case Instruction::FAdd:
2374     case Instruction::FSub:
2375     case Instruction::FMul:
2376     case Instruction::FDiv:
2377     case Instruction::FRem:
2378       if (!Val0->getType()->isFPOrFPVectorTy())
2379         return Error(ID.Loc, "constexpr requires fp operands");
2380       break;
2381     default: llvm_unreachable("Unknown binary operator!");
2382     }
2383     unsigned Flags = 0;
2384     if (NUW)   Flags |= OverflowingBinaryOperator::NoUnsignedWrap;
2385     if (NSW)   Flags |= OverflowingBinaryOperator::NoSignedWrap;
2386     if (Exact) Flags |= PossiblyExactOperator::IsExact;
2387     Constant *C = ConstantExpr::get(Opc, Val0, Val1, Flags);
2388     ID.ConstantVal = C;
2389     ID.Kind = ValID::t_Constant;
2390     return false;
2391   }
2392
2393   // Logical Operations
2394   case lltok::kw_and:
2395   case lltok::kw_or:
2396   case lltok::kw_xor: {
2397     unsigned Opc = Lex.getUIntVal();
2398     Constant *Val0, *Val1;
2399     Lex.Lex();
2400     if (ParseToken(lltok::lparen, "expected '(' in logical constantexpr") ||
2401         ParseGlobalTypeAndValue(Val0) ||
2402         ParseToken(lltok::comma, "expected comma in logical constantexpr") ||
2403         ParseGlobalTypeAndValue(Val1) ||
2404         ParseToken(lltok::rparen, "expected ')' in logical constantexpr"))
2405       return true;
2406     if (Val0->getType() != Val1->getType())
2407       return Error(ID.Loc, "operands of constexpr must have same type");
2408     if (!Val0->getType()->isIntOrIntVectorTy())
2409       return Error(ID.Loc,
2410                    "constexpr requires integer or integer vector operands");
2411     ID.ConstantVal = ConstantExpr::get(Opc, Val0, Val1);
2412     ID.Kind = ValID::t_Constant;
2413     return false;
2414   }
2415
2416   case lltok::kw_getelementptr:
2417   case lltok::kw_shufflevector:
2418   case lltok::kw_insertelement:
2419   case lltok::kw_extractelement:
2420   case lltok::kw_select: {
2421     unsigned Opc = Lex.getUIntVal();
2422     SmallVector<Constant*, 16> Elts;
2423     bool InBounds = false;
2424     Lex.Lex();
2425     if (Opc == Instruction::GetElementPtr)
2426       InBounds = EatIfPresent(lltok::kw_inbounds);
2427     if (ParseToken(lltok::lparen, "expected '(' in constantexpr") ||
2428         ParseGlobalValueVector(Elts) ||
2429         ParseToken(lltok::rparen, "expected ')' in constantexpr"))
2430       return true;
2431
2432     if (Opc == Instruction::GetElementPtr) {
2433       if (Elts.size() == 0 ||
2434           !Elts[0]->getType()->getScalarType()->isPointerTy())
2435         return Error(ID.Loc, "getelementptr requires pointer operand");
2436
2437       ArrayRef<Constant *> Indices(Elts.begin() + 1, Elts.end());
2438       if (!GetElementPtrInst::getIndexedType(Elts[0]->getType(), Indices))
2439         return Error(ID.Loc, "invalid indices for getelementptr");
2440       ID.ConstantVal = ConstantExpr::getGetElementPtr(Elts[0], Indices,
2441                                                       InBounds);
2442     } else if (Opc == Instruction::Select) {
2443       if (Elts.size() != 3)
2444         return Error(ID.Loc, "expected three operands to select");
2445       if (const char *Reason = SelectInst::areInvalidOperands(Elts[0], Elts[1],
2446                                                               Elts[2]))
2447         return Error(ID.Loc, Reason);
2448       ID.ConstantVal = ConstantExpr::getSelect(Elts[0], Elts[1], Elts[2]);
2449     } else if (Opc == Instruction::ShuffleVector) {
2450       if (Elts.size() != 3)
2451         return Error(ID.Loc, "expected three operands to shufflevector");
2452       if (!ShuffleVectorInst::isValidOperands(Elts[0], Elts[1], Elts[2]))
2453         return Error(ID.Loc, "invalid operands to shufflevector");
2454       ID.ConstantVal =
2455                  ConstantExpr::getShuffleVector(Elts[0], Elts[1],Elts[2]);
2456     } else if (Opc == Instruction::ExtractElement) {
2457       if (Elts.size() != 2)
2458         return Error(ID.Loc, "expected two operands to extractelement");
2459       if (!ExtractElementInst::isValidOperands(Elts[0], Elts[1]))
2460         return Error(ID.Loc, "invalid extractelement operands");
2461       ID.ConstantVal = ConstantExpr::getExtractElement(Elts[0], Elts[1]);
2462     } else {
2463       assert(Opc == Instruction::InsertElement && "Unknown opcode");
2464       if (Elts.size() != 3)
2465       return Error(ID.Loc, "expected three operands to insertelement");
2466       if (!InsertElementInst::isValidOperands(Elts[0], Elts[1], Elts[2]))
2467         return Error(ID.Loc, "invalid insertelement operands");
2468       ID.ConstantVal =
2469                  ConstantExpr::getInsertElement(Elts[0], Elts[1],Elts[2]);
2470     }
2471
2472     ID.Kind = ValID::t_Constant;
2473     return false;
2474   }
2475   }
2476
2477   Lex.Lex();
2478   return false;
2479 }
2480
2481 /// ParseGlobalValue - Parse a global value with the specified type.
2482 bool LLParser::ParseGlobalValue(Type *Ty, Constant *&C) {
2483   C = 0;
2484   ValID ID;
2485   Value *V = NULL;
2486   bool Parsed = ParseValID(ID) ||
2487                 ConvertValIDToValue(Ty, ID, V, NULL);
2488   if (V && !(C = dyn_cast<Constant>(V)))
2489     return Error(ID.Loc, "global values must be constants");
2490   return Parsed;
2491 }
2492
2493 bool LLParser::ParseGlobalTypeAndValue(Constant *&V) {
2494   Type *Ty = 0;
2495   return ParseType(Ty) ||
2496          ParseGlobalValue(Ty, V);
2497 }
2498
2499 /// ParseGlobalValueVector
2500 ///   ::= /*empty*/
2501 ///   ::= TypeAndValue (',' TypeAndValue)*
2502 bool LLParser::ParseGlobalValueVector(SmallVectorImpl<Constant*> &Elts) {
2503   // Empty list.
2504   if (Lex.getKind() == lltok::rbrace ||
2505       Lex.getKind() == lltok::rsquare ||
2506       Lex.getKind() == lltok::greater ||
2507       Lex.getKind() == lltok::rparen)
2508     return false;
2509
2510   Constant *C;
2511   if (ParseGlobalTypeAndValue(C)) return true;
2512   Elts.push_back(C);
2513
2514   while (EatIfPresent(lltok::comma)) {
2515     if (ParseGlobalTypeAndValue(C)) return true;
2516     Elts.push_back(C);
2517   }
2518
2519   return false;
2520 }
2521
2522 bool LLParser::ParseMetadataListValue(ValID &ID, PerFunctionState *PFS) {
2523   assert(Lex.getKind() == lltok::lbrace);
2524   Lex.Lex();
2525
2526   SmallVector<Value*, 16> Elts;
2527   if (ParseMDNodeVector(Elts, PFS) ||
2528       ParseToken(lltok::rbrace, "expected end of metadata node"))
2529     return true;
2530
2531   ID.MDNodeVal = MDNode::get(Context, Elts);
2532   ID.Kind = ValID::t_MDNode;
2533   return false;
2534 }
2535
2536 /// ParseMetadataValue
2537 ///  ::= !42
2538 ///  ::= !{...}
2539 ///  ::= !"string"
2540 bool LLParser::ParseMetadataValue(ValID &ID, PerFunctionState *PFS) {
2541   assert(Lex.getKind() == lltok::exclaim);
2542   Lex.Lex();
2543
2544   // MDNode:
2545   // !{ ... }
2546   if (Lex.getKind() == lltok::lbrace)
2547     return ParseMetadataListValue(ID, PFS);
2548
2549   // Standalone metadata reference
2550   // !42
2551   if (Lex.getKind() == lltok::APSInt) {
2552     if (ParseMDNodeID(ID.MDNodeVal)) return true;
2553     ID.Kind = ValID::t_MDNode;
2554     return false;
2555   }
2556
2557   // MDString:
2558   //   ::= '!' STRINGCONSTANT
2559   if (ParseMDString(ID.MDStringVal)) return true;
2560   ID.Kind = ValID::t_MDString;
2561   return false;
2562 }
2563
2564
2565 //===----------------------------------------------------------------------===//
2566 // Function Parsing.
2567 //===----------------------------------------------------------------------===//
2568
2569 bool LLParser::ConvertValIDToValue(Type *Ty, ValID &ID, Value *&V,
2570                                    PerFunctionState *PFS) {
2571   if (Ty->isFunctionTy())
2572     return Error(ID.Loc, "functions are not values, refer to them as pointers");
2573
2574   switch (ID.Kind) {
2575   case ValID::t_LocalID:
2576     if (!PFS) return Error(ID.Loc, "invalid use of function-local name");
2577     V = PFS->GetVal(ID.UIntVal, Ty, ID.Loc);
2578     return (V == 0);
2579   case ValID::t_LocalName:
2580     if (!PFS) return Error(ID.Loc, "invalid use of function-local name");
2581     V = PFS->GetVal(ID.StrVal, Ty, ID.Loc);
2582     return (V == 0);
2583   case ValID::t_InlineAsm: {
2584     PointerType *PTy = dyn_cast<PointerType>(Ty);
2585     FunctionType *FTy =
2586       PTy ? dyn_cast<FunctionType>(PTy->getElementType()) : 0;
2587     if (!FTy || !InlineAsm::Verify(FTy, ID.StrVal2))
2588       return Error(ID.Loc, "invalid type for inline asm constraint string");
2589     V = InlineAsm::get(FTy, ID.StrVal, ID.StrVal2, ID.UIntVal&1,
2590                        (ID.UIntVal>>1)&1, (InlineAsm::AsmDialect(ID.UIntVal>>2)));
2591     return false;
2592   }
2593   case ValID::t_MDNode:
2594     if (!Ty->isMetadataTy())
2595       return Error(ID.Loc, "metadata value must have metadata type");
2596     V = ID.MDNodeVal;
2597     return false;
2598   case ValID::t_MDString:
2599     if (!Ty->isMetadataTy())
2600       return Error(ID.Loc, "metadata value must have metadata type");
2601     V = ID.MDStringVal;
2602     return false;
2603   case ValID::t_GlobalName:
2604     V = GetGlobalVal(ID.StrVal, Ty, ID.Loc);
2605     return V == 0;
2606   case ValID::t_GlobalID:
2607     V = GetGlobalVal(ID.UIntVal, Ty, ID.Loc);
2608     return V == 0;
2609   case ValID::t_APSInt:
2610     if (!Ty->isIntegerTy())
2611       return Error(ID.Loc, "integer constant must have integer type");
2612     ID.APSIntVal = ID.APSIntVal.extOrTrunc(Ty->getPrimitiveSizeInBits());
2613     V = ConstantInt::get(Context, ID.APSIntVal);
2614     return false;
2615   case ValID::t_APFloat:
2616     if (!Ty->isFloatingPointTy() ||
2617         !ConstantFP::isValueValidForType(Ty, ID.APFloatVal))
2618       return Error(ID.Loc, "floating point constant invalid for type");
2619
2620     // The lexer has no type info, so builds all half, float, and double FP
2621     // constants as double.  Fix this here.  Long double does not need this.
2622     if (&ID.APFloatVal.getSemantics() == &APFloat::IEEEdouble) {
2623       bool Ignored;
2624       if (Ty->isHalfTy())
2625         ID.APFloatVal.convert(APFloat::IEEEhalf, APFloat::rmNearestTiesToEven,
2626                               &Ignored);
2627       else if (Ty->isFloatTy())
2628         ID.APFloatVal.convert(APFloat::IEEEsingle, APFloat::rmNearestTiesToEven,
2629                               &Ignored);
2630     }
2631     V = ConstantFP::get(Context, ID.APFloatVal);
2632
2633     if (V->getType() != Ty)
2634       return Error(ID.Loc, "floating point constant does not have type '" +
2635                    getTypeString(Ty) + "'");
2636
2637     return false;
2638   case ValID::t_Null:
2639     if (!Ty->isPointerTy())
2640       return Error(ID.Loc, "null must be a pointer type");
2641     V = ConstantPointerNull::get(cast<PointerType>(Ty));
2642     return false;
2643   case ValID::t_Undef:
2644     // FIXME: LabelTy should not be a first-class type.
2645     if (!Ty->isFirstClassType() || Ty->isLabelTy())
2646       return Error(ID.Loc, "invalid type for undef constant");
2647     V = UndefValue::get(Ty);
2648     return false;
2649   case ValID::t_EmptyArray:
2650     if (!Ty->isArrayTy() || cast<ArrayType>(Ty)->getNumElements() != 0)
2651       return Error(ID.Loc, "invalid empty array initializer");
2652     V = UndefValue::get(Ty);
2653     return false;
2654   case ValID::t_Zero:
2655     // FIXME: LabelTy should not be a first-class type.
2656     if (!Ty->isFirstClassType() || Ty->isLabelTy())
2657       return Error(ID.Loc, "invalid type for null constant");
2658     V = Constant::getNullValue(Ty);
2659     return false;
2660   case ValID::t_Constant:
2661     if (ID.ConstantVal->getType() != Ty)
2662       return Error(ID.Loc, "constant expression type mismatch");
2663
2664     V = ID.ConstantVal;
2665     return false;
2666   case ValID::t_ConstantStruct:
2667   case ValID::t_PackedConstantStruct:
2668     if (StructType *ST = dyn_cast<StructType>(Ty)) {
2669       if (ST->getNumElements() != ID.UIntVal)
2670         return Error(ID.Loc,
2671                      "initializer with struct type has wrong # elements");
2672       if (ST->isPacked() != (ID.Kind == ValID::t_PackedConstantStruct))
2673         return Error(ID.Loc, "packed'ness of initializer and type don't match");
2674
2675       // Verify that the elements are compatible with the structtype.
2676       for (unsigned i = 0, e = ID.UIntVal; i != e; ++i)
2677         if (ID.ConstantStructElts[i]->getType() != ST->getElementType(i))
2678           return Error(ID.Loc, "element " + Twine(i) +
2679                     " of struct initializer doesn't match struct element type");
2680
2681       V = ConstantStruct::get(ST, makeArrayRef(ID.ConstantStructElts,
2682                                                ID.UIntVal));
2683     } else
2684       return Error(ID.Loc, "constant expression type mismatch");
2685     return false;
2686   }
2687   llvm_unreachable("Invalid ValID");
2688 }
2689
2690 bool LLParser::ParseValue(Type *Ty, Value *&V, PerFunctionState *PFS) {
2691   V = 0;
2692   ValID ID;
2693   return ParseValID(ID, PFS) ||
2694          ConvertValIDToValue(Ty, ID, V, PFS);
2695 }
2696
2697 bool LLParser::ParseTypeAndValue(Value *&V, PerFunctionState *PFS) {
2698   Type *Ty = 0;
2699   return ParseType(Ty) ||
2700          ParseValue(Ty, V, PFS);
2701 }
2702
2703 bool LLParser::ParseTypeAndBasicBlock(BasicBlock *&BB, LocTy &Loc,
2704                                       PerFunctionState &PFS) {
2705   Value *V;
2706   Loc = Lex.getLoc();
2707   if (ParseTypeAndValue(V, PFS)) return true;
2708   if (!isa<BasicBlock>(V))
2709     return Error(Loc, "expected a basic block");
2710   BB = cast<BasicBlock>(V);
2711   return false;
2712 }
2713
2714
2715 /// FunctionHeader
2716 ///   ::= OptionalLinkage OptionalVisibility OptionalCallingConv OptRetAttrs
2717 ///       OptUnnamedAddr Type GlobalName '(' ArgList ')' OptFuncAttrs OptSection
2718 ///       OptionalAlign OptGC
2719 bool LLParser::ParseFunctionHeader(Function *&Fn, bool isDefine) {
2720   // Parse the linkage.
2721   LocTy LinkageLoc = Lex.getLoc();
2722   unsigned Linkage;
2723
2724   unsigned Visibility;
2725   AttrBuilder RetAttrs;
2726   CallingConv::ID CC;
2727   Type *RetType = 0;
2728   LocTy RetTypeLoc = Lex.getLoc();
2729   if (ParseOptionalLinkage(Linkage) ||
2730       ParseOptionalVisibility(Visibility) ||
2731       ParseOptionalCallingConv(CC) ||
2732       ParseOptionalReturnAttrs(RetAttrs) ||
2733       ParseType(RetType, RetTypeLoc, true /*void allowed*/))
2734     return true;
2735
2736   // Verify that the linkage is ok.
2737   switch ((GlobalValue::LinkageTypes)Linkage) {
2738   case GlobalValue::ExternalLinkage:
2739     break; // always ok.
2740   case GlobalValue::DLLImportLinkage:
2741   case GlobalValue::ExternalWeakLinkage:
2742     if (isDefine)
2743       return Error(LinkageLoc, "invalid linkage for function definition");
2744     break;
2745   case GlobalValue::PrivateLinkage:
2746   case GlobalValue::LinkerPrivateLinkage:
2747   case GlobalValue::LinkerPrivateWeakLinkage:
2748   case GlobalValue::InternalLinkage:
2749   case GlobalValue::AvailableExternallyLinkage:
2750   case GlobalValue::LinkOnceAnyLinkage:
2751   case GlobalValue::LinkOnceODRLinkage:
2752   case GlobalValue::LinkOnceODRAutoHideLinkage:
2753   case GlobalValue::WeakAnyLinkage:
2754   case GlobalValue::WeakODRLinkage:
2755   case GlobalValue::DLLExportLinkage:
2756     if (!isDefine)
2757       return Error(LinkageLoc, "invalid linkage for function declaration");
2758     break;
2759   case GlobalValue::AppendingLinkage:
2760   case GlobalValue::CommonLinkage:
2761     return Error(LinkageLoc, "invalid function linkage type");
2762   }
2763
2764   if (!FunctionType::isValidReturnType(RetType))
2765     return Error(RetTypeLoc, "invalid function return type");
2766
2767   LocTy NameLoc = Lex.getLoc();
2768
2769   std::string FunctionName;
2770   if (Lex.getKind() == lltok::GlobalVar) {
2771     FunctionName = Lex.getStrVal();
2772   } else if (Lex.getKind() == lltok::GlobalID) {     // @42 is ok.
2773     unsigned NameID = Lex.getUIntVal();
2774
2775     if (NameID != NumberedVals.size())
2776       return TokError("function expected to be numbered '%" +
2777                       Twine(NumberedVals.size()) + "'");
2778   } else {
2779     return TokError("expected function name");
2780   }
2781
2782   Lex.Lex();
2783
2784   if (Lex.getKind() != lltok::lparen)
2785     return TokError("expected '(' in function argument list");
2786
2787   SmallVector<ArgInfo, 8> ArgList;
2788   bool isVarArg;
2789   AttrBuilder FuncAttrs;
2790   std::string Section;
2791   unsigned Alignment;
2792   std::string GC;
2793   bool UnnamedAddr;
2794   LocTy UnnamedAddrLoc;
2795
2796   if (ParseArgumentList(ArgList, isVarArg) ||
2797       ParseOptionalToken(lltok::kw_unnamed_addr, UnnamedAddr,
2798                          &UnnamedAddrLoc) ||
2799       ParseOptionalFuncAttrs(FuncAttrs) ||
2800       (EatIfPresent(lltok::kw_section) &&
2801        ParseStringConstant(Section)) ||
2802       ParseOptionalAlignment(Alignment) ||
2803       (EatIfPresent(lltok::kw_gc) &&
2804        ParseStringConstant(GC)))
2805     return true;
2806
2807   // If the alignment was parsed as an attribute, move to the alignment field.
2808   if (FuncAttrs.hasAlignmentAttr()) {
2809     Alignment = FuncAttrs.getAlignment();
2810     FuncAttrs.removeAttribute(Attribute::Alignment);
2811   }
2812
2813   // Okay, if we got here, the function is syntactically valid.  Convert types
2814   // and do semantic checks.
2815   std::vector<Type*> ParamTypeList;
2816   SmallVector<AttributeWithIndex, 8> Attrs;
2817
2818   if (RetAttrs.hasAttributes())
2819     Attrs.push_back(
2820       AttributeWithIndex::get(AttributeSet::ReturnIndex,
2821                               Attribute::get(RetType->getContext(),
2822                                               RetAttrs)));
2823
2824   for (unsigned i = 0, e = ArgList.size(); i != e; ++i) {
2825     ParamTypeList.push_back(ArgList[i].Ty);
2826     if (ArgList[i].Attrs.hasAttributes())
2827       Attrs.push_back(AttributeWithIndex::get(i+1, ArgList[i].Attrs));
2828   }
2829
2830   if (FuncAttrs.hasAttributes())
2831     Attrs.push_back(
2832       AttributeWithIndex::get(AttributeSet::FunctionIndex,
2833                               Attribute::get(RetType->getContext(),
2834                                               FuncAttrs)));
2835
2836   AttributeSet PAL = AttributeSet::get(Context, Attrs);
2837
2838   if (PAL.hasAttribute(1, Attribute::StructRet) && !RetType->isVoidTy())
2839     return Error(RetTypeLoc, "functions with 'sret' argument must return void");
2840
2841   FunctionType *FT =
2842     FunctionType::get(RetType, ParamTypeList, isVarArg);
2843   PointerType *PFT = PointerType::getUnqual(FT);
2844
2845   Fn = 0;
2846   if (!FunctionName.empty()) {
2847     // If this was a definition of a forward reference, remove the definition
2848     // from the forward reference table and fill in the forward ref.
2849     std::map<std::string, std::pair<GlobalValue*, LocTy> >::iterator FRVI =
2850       ForwardRefVals.find(FunctionName);
2851     if (FRVI != ForwardRefVals.end()) {
2852       Fn = M->getFunction(FunctionName);
2853       if (!Fn)
2854         return Error(FRVI->second.second, "invalid forward reference to "
2855                      "function as global value!");
2856       if (Fn->getType() != PFT)
2857         return Error(FRVI->second.second, "invalid forward reference to "
2858                      "function '" + FunctionName + "' with wrong type!");
2859
2860       ForwardRefVals.erase(FRVI);
2861     } else if ((Fn = M->getFunction(FunctionName))) {
2862       // Reject redefinitions.
2863       return Error(NameLoc, "invalid redefinition of function '" +
2864                    FunctionName + "'");
2865     } else if (M->getNamedValue(FunctionName)) {
2866       return Error(NameLoc, "redefinition of function '@" + FunctionName + "'");
2867     }
2868
2869   } else {
2870     // If this is a definition of a forward referenced function, make sure the
2871     // types agree.
2872     std::map<unsigned, std::pair<GlobalValue*, LocTy> >::iterator I
2873       = ForwardRefValIDs.find(NumberedVals.size());
2874     if (I != ForwardRefValIDs.end()) {
2875       Fn = cast<Function>(I->second.first);
2876       if (Fn->getType() != PFT)
2877         return Error(NameLoc, "type of definition and forward reference of '@" +
2878                      Twine(NumberedVals.size()) + "' disagree");
2879       ForwardRefValIDs.erase(I);
2880     }
2881   }
2882
2883   if (Fn == 0)
2884     Fn = Function::Create(FT, GlobalValue::ExternalLinkage, FunctionName, M);
2885   else // Move the forward-reference to the correct spot in the module.
2886     M->getFunctionList().splice(M->end(), M->getFunctionList(), Fn);
2887
2888   if (FunctionName.empty())
2889     NumberedVals.push_back(Fn);
2890
2891   Fn->setLinkage((GlobalValue::LinkageTypes)Linkage);
2892   Fn->setVisibility((GlobalValue::VisibilityTypes)Visibility);
2893   Fn->setCallingConv(CC);
2894   Fn->setAttributes(PAL);
2895   Fn->setUnnamedAddr(UnnamedAddr);
2896   Fn->setAlignment(Alignment);
2897   Fn->setSection(Section);
2898   if (!GC.empty()) Fn->setGC(GC.c_str());
2899
2900   // Add all of the arguments we parsed to the function.
2901   Function::arg_iterator ArgIt = Fn->arg_begin();
2902   for (unsigned i = 0, e = ArgList.size(); i != e; ++i, ++ArgIt) {
2903     // If the argument has a name, insert it into the argument symbol table.
2904     if (ArgList[i].Name.empty()) continue;
2905
2906     // Set the name, if it conflicted, it will be auto-renamed.
2907     ArgIt->setName(ArgList[i].Name);
2908
2909     if (ArgIt->getName() != ArgList[i].Name)
2910       return Error(ArgList[i].Loc, "redefinition of argument '%" +
2911                    ArgList[i].Name + "'");
2912   }
2913
2914   return false;
2915 }
2916
2917
2918 /// ParseFunctionBody
2919 ///   ::= '{' BasicBlock+ '}'
2920 ///
2921 bool LLParser::ParseFunctionBody(Function &Fn) {
2922   if (Lex.getKind() != lltok::lbrace)
2923     return TokError("expected '{' in function body");
2924   Lex.Lex();  // eat the {.
2925
2926   int FunctionNumber = -1;
2927   if (!Fn.hasName()) FunctionNumber = NumberedVals.size()-1;
2928
2929   PerFunctionState PFS(*this, Fn, FunctionNumber);
2930
2931   // We need at least one basic block.
2932   if (Lex.getKind() == lltok::rbrace)
2933     return TokError("function body requires at least one basic block");
2934
2935   while (Lex.getKind() != lltok::rbrace)
2936     if (ParseBasicBlock(PFS)) return true;
2937
2938   // Eat the }.
2939   Lex.Lex();
2940
2941   // Verify function is ok.
2942   return PFS.FinishFunction();
2943 }
2944
2945 /// ParseBasicBlock
2946 ///   ::= LabelStr? Instruction*
2947 bool LLParser::ParseBasicBlock(PerFunctionState &PFS) {
2948   // If this basic block starts out with a name, remember it.
2949   std::string Name;
2950   LocTy NameLoc = Lex.getLoc();
2951   if (Lex.getKind() == lltok::LabelStr) {
2952     Name = Lex.getStrVal();
2953     Lex.Lex();
2954   }
2955
2956   BasicBlock *BB = PFS.DefineBB(Name, NameLoc);
2957   if (BB == 0) return true;
2958
2959   std::string NameStr;
2960
2961   // Parse the instructions in this block until we get a terminator.
2962   Instruction *Inst;
2963   SmallVector<std::pair<unsigned, MDNode *>, 4> MetadataOnInst;
2964   do {
2965     // This instruction may have three possibilities for a name: a) none
2966     // specified, b) name specified "%foo =", c) number specified: "%4 =".
2967     LocTy NameLoc = Lex.getLoc();
2968     int NameID = -1;
2969     NameStr = "";
2970
2971     if (Lex.getKind() == lltok::LocalVarID) {
2972       NameID = Lex.getUIntVal();
2973       Lex.Lex();
2974       if (ParseToken(lltok::equal, "expected '=' after instruction id"))
2975         return true;
2976     } else if (Lex.getKind() == lltok::LocalVar) {
2977       NameStr = Lex.getStrVal();
2978       Lex.Lex();
2979       if (ParseToken(lltok::equal, "expected '=' after instruction name"))
2980         return true;
2981     }
2982
2983     switch (ParseInstruction(Inst, BB, PFS)) {
2984     default: llvm_unreachable("Unknown ParseInstruction result!");
2985     case InstError: return true;
2986     case InstNormal:
2987       BB->getInstList().push_back(Inst);
2988
2989       // With a normal result, we check to see if the instruction is followed by
2990       // a comma and metadata.
2991       if (EatIfPresent(lltok::comma))
2992         if (ParseInstructionMetadata(Inst, &PFS))
2993           return true;
2994       break;
2995     case InstExtraComma:
2996       BB->getInstList().push_back(Inst);
2997
2998       // If the instruction parser ate an extra comma at the end of it, it
2999       // *must* be followed by metadata.
3000       if (ParseInstructionMetadata(Inst, &PFS))
3001         return true;
3002       break;
3003     }
3004
3005     // Set the name on the instruction.
3006     if (PFS.SetInstName(NameID, NameStr, NameLoc, Inst)) return true;
3007   } while (!isa<TerminatorInst>(Inst));
3008
3009   return false;
3010 }
3011
3012 //===----------------------------------------------------------------------===//
3013 // Instruction Parsing.
3014 //===----------------------------------------------------------------------===//
3015
3016 /// ParseInstruction - Parse one of the many different instructions.
3017 ///
3018 int LLParser::ParseInstruction(Instruction *&Inst, BasicBlock *BB,
3019                                PerFunctionState &PFS) {
3020   lltok::Kind Token = Lex.getKind();
3021   if (Token == lltok::Eof)
3022     return TokError("found end of file when expecting more instructions");
3023   LocTy Loc = Lex.getLoc();
3024   unsigned KeywordVal = Lex.getUIntVal();
3025   Lex.Lex();  // Eat the keyword.
3026
3027   switch (Token) {
3028   default:                    return Error(Loc, "expected instruction opcode");
3029   // Terminator Instructions.
3030   case lltok::kw_unreachable: Inst = new UnreachableInst(Context); return false;
3031   case lltok::kw_ret:         return ParseRet(Inst, BB, PFS);
3032   case lltok::kw_br:          return ParseBr(Inst, PFS);
3033   case lltok::kw_switch:      return ParseSwitch(Inst, PFS);
3034   case lltok::kw_indirectbr:  return ParseIndirectBr(Inst, PFS);
3035   case lltok::kw_invoke:      return ParseInvoke(Inst, PFS);
3036   case lltok::kw_resume:      return ParseResume(Inst, PFS);
3037   // Binary Operators.
3038   case lltok::kw_add:
3039   case lltok::kw_sub:
3040   case lltok::kw_mul:
3041   case lltok::kw_shl: {
3042     bool NUW = EatIfPresent(lltok::kw_nuw);
3043     bool NSW = EatIfPresent(lltok::kw_nsw);
3044     if (!NUW) NUW = EatIfPresent(lltok::kw_nuw);
3045
3046     if (ParseArithmetic(Inst, PFS, KeywordVal, 1)) return true;
3047
3048     if (NUW) cast<BinaryOperator>(Inst)->setHasNoUnsignedWrap(true);
3049     if (NSW) cast<BinaryOperator>(Inst)->setHasNoSignedWrap(true);
3050     return false;
3051   }
3052   case lltok::kw_fadd:
3053   case lltok::kw_fsub:
3054   case lltok::kw_fmul:
3055   case lltok::kw_fdiv:
3056   case lltok::kw_frem: {
3057     FastMathFlags FMF = EatFastMathFlagsIfPresent();
3058     int Res = ParseArithmetic(Inst, PFS, KeywordVal, 2);
3059     if (Res != 0)
3060       return Res;
3061     if (FMF.any())
3062       Inst->setFastMathFlags(FMF);
3063     return 0;
3064   }
3065
3066   case lltok::kw_sdiv:
3067   case lltok::kw_udiv:
3068   case lltok::kw_lshr:
3069   case lltok::kw_ashr: {
3070     bool Exact = EatIfPresent(lltok::kw_exact);
3071
3072     if (ParseArithmetic(Inst, PFS, KeywordVal, 1)) return true;
3073     if (Exact) cast<BinaryOperator>(Inst)->setIsExact(true);
3074     return false;
3075   }
3076
3077   case lltok::kw_urem:
3078   case lltok::kw_srem:   return ParseArithmetic(Inst, PFS, KeywordVal, 1);
3079   case lltok::kw_and:
3080   case lltok::kw_or:
3081   case lltok::kw_xor:    return ParseLogical(Inst, PFS, KeywordVal);
3082   case lltok::kw_icmp:
3083   case lltok::kw_fcmp:   return ParseCompare(Inst, PFS, KeywordVal);
3084   // Casts.
3085   case lltok::kw_trunc:
3086   case lltok::kw_zext:
3087   case lltok::kw_sext:
3088   case lltok::kw_fptrunc:
3089   case lltok::kw_fpext:
3090   case lltok::kw_bitcast:
3091   case lltok::kw_uitofp:
3092   case lltok::kw_sitofp:
3093   case lltok::kw_fptoui:
3094   case lltok::kw_fptosi:
3095   case lltok::kw_inttoptr:
3096   case lltok::kw_ptrtoint:       return ParseCast(Inst, PFS, KeywordVal);
3097   // Other.
3098   case lltok::kw_select:         return ParseSelect(Inst, PFS);
3099   case lltok::kw_va_arg:         return ParseVA_Arg(Inst, PFS);
3100   case lltok::kw_extractelement: return ParseExtractElement(Inst, PFS);
3101   case lltok::kw_insertelement:  return ParseInsertElement(Inst, PFS);
3102   case lltok::kw_shufflevector:  return ParseShuffleVector(Inst, PFS);
3103   case lltok::kw_phi:            return ParsePHI(Inst, PFS);
3104   case lltok::kw_landingpad:     return ParseLandingPad(Inst, PFS);
3105   case lltok::kw_call:           return ParseCall(Inst, PFS, false);
3106   case lltok::kw_tail:           return ParseCall(Inst, PFS, true);
3107   // Memory.
3108   case lltok::kw_alloca:         return ParseAlloc(Inst, PFS);
3109   case lltok::kw_load:           return ParseLoad(Inst, PFS);
3110   case lltok::kw_store:          return ParseStore(Inst, PFS);
3111   case lltok::kw_cmpxchg:        return ParseCmpXchg(Inst, PFS);
3112   case lltok::kw_atomicrmw:      return ParseAtomicRMW(Inst, PFS);
3113   case lltok::kw_fence:          return ParseFence(Inst, PFS);
3114   case lltok::kw_getelementptr: return ParseGetElementPtr(Inst, PFS);
3115   case lltok::kw_extractvalue:  return ParseExtractValue(Inst, PFS);
3116   case lltok::kw_insertvalue:   return ParseInsertValue(Inst, PFS);
3117   }
3118 }
3119
3120 /// ParseCmpPredicate - Parse an integer or fp predicate, based on Kind.
3121 bool LLParser::ParseCmpPredicate(unsigned &P, unsigned Opc) {
3122   if (Opc == Instruction::FCmp) {
3123     switch (Lex.getKind()) {
3124     default: return TokError("expected fcmp predicate (e.g. 'oeq')");
3125     case lltok::kw_oeq: P = CmpInst::FCMP_OEQ; break;
3126     case lltok::kw_one: P = CmpInst::FCMP_ONE; break;
3127     case lltok::kw_olt: P = CmpInst::FCMP_OLT; break;
3128     case lltok::kw_ogt: P = CmpInst::FCMP_OGT; break;
3129     case lltok::kw_ole: P = CmpInst::FCMP_OLE; break;
3130     case lltok::kw_oge: P = CmpInst::FCMP_OGE; break;
3131     case lltok::kw_ord: P = CmpInst::FCMP_ORD; break;
3132     case lltok::kw_uno: P = CmpInst::FCMP_UNO; break;
3133     case lltok::kw_ueq: P = CmpInst::FCMP_UEQ; break;
3134     case lltok::kw_une: P = CmpInst::FCMP_UNE; break;
3135     case lltok::kw_ult: P = CmpInst::FCMP_ULT; break;
3136     case lltok::kw_ugt: P = CmpInst::FCMP_UGT; break;
3137     case lltok::kw_ule: P = CmpInst::FCMP_ULE; break;
3138     case lltok::kw_uge: P = CmpInst::FCMP_UGE; break;
3139     case lltok::kw_true: P = CmpInst::FCMP_TRUE; break;
3140     case lltok::kw_false: P = CmpInst::FCMP_FALSE; break;
3141     }
3142   } else {
3143     switch (Lex.getKind()) {
3144     default: return TokError("expected icmp predicate (e.g. 'eq')");
3145     case lltok::kw_eq:  P = CmpInst::ICMP_EQ; break;
3146     case lltok::kw_ne:  P = CmpInst::ICMP_NE; break;
3147     case lltok::kw_slt: P = CmpInst::ICMP_SLT; break;
3148     case lltok::kw_sgt: P = CmpInst::ICMP_SGT; break;
3149     case lltok::kw_sle: P = CmpInst::ICMP_SLE; break;
3150     case lltok::kw_sge: P = CmpInst::ICMP_SGE; break;
3151     case lltok::kw_ult: P = CmpInst::ICMP_ULT; break;
3152     case lltok::kw_ugt: P = CmpInst::ICMP_UGT; break;
3153     case lltok::kw_ule: P = CmpInst::ICMP_ULE; break;
3154     case lltok::kw_uge: P = CmpInst::ICMP_UGE; break;
3155     }
3156   }
3157   Lex.Lex();
3158   return false;
3159 }
3160
3161 //===----------------------------------------------------------------------===//
3162 // Terminator Instructions.
3163 //===----------------------------------------------------------------------===//
3164
3165 /// ParseRet - Parse a return instruction.
3166 ///   ::= 'ret' void (',' !dbg, !1)*
3167 ///   ::= 'ret' TypeAndValue (',' !dbg, !1)*
3168 bool LLParser::ParseRet(Instruction *&Inst, BasicBlock *BB,
3169                         PerFunctionState &PFS) {
3170   SMLoc TypeLoc = Lex.getLoc();
3171   Type *Ty = 0;
3172   if (ParseType(Ty, true /*void allowed*/)) return true;
3173
3174   Type *ResType = PFS.getFunction().getReturnType();
3175
3176   if (Ty->isVoidTy()) {
3177     if (!ResType->isVoidTy())
3178       return Error(TypeLoc, "value doesn't match function result type '" +
3179                    getTypeString(ResType) + "'");
3180
3181     Inst = ReturnInst::Create(Context);
3182     return false;
3183   }
3184
3185   Value *RV;
3186   if (ParseValue(Ty, RV, PFS)) return true;
3187
3188   if (ResType != RV->getType())
3189     return Error(TypeLoc, "value doesn't match function result type '" +
3190                  getTypeString(ResType) + "'");
3191
3192   Inst = ReturnInst::Create(Context, RV);
3193   return false;
3194 }
3195
3196
3197 /// ParseBr
3198 ///   ::= 'br' TypeAndValue
3199 ///   ::= 'br' TypeAndValue ',' TypeAndValue ',' TypeAndValue
3200 bool LLParser::ParseBr(Instruction *&Inst, PerFunctionState &PFS) {
3201   LocTy Loc, Loc2;
3202   Value *Op0;
3203   BasicBlock *Op1, *Op2;
3204   if (ParseTypeAndValue(Op0, Loc, PFS)) return true;
3205
3206   if (BasicBlock *BB = dyn_cast<BasicBlock>(Op0)) {
3207     Inst = BranchInst::Create(BB);
3208     return false;
3209   }
3210
3211   if (Op0->getType() != Type::getInt1Ty(Context))
3212     return Error(Loc, "branch condition must have 'i1' type");
3213
3214   if (ParseToken(lltok::comma, "expected ',' after branch condition") ||
3215       ParseTypeAndBasicBlock(Op1, Loc, PFS) ||
3216       ParseToken(lltok::comma, "expected ',' after true destination") ||
3217       ParseTypeAndBasicBlock(Op2, Loc2, PFS))
3218     return true;
3219
3220   Inst = BranchInst::Create(Op1, Op2, Op0);
3221   return false;
3222 }
3223
3224 /// ParseSwitch
3225 ///  Instruction
3226 ///    ::= 'switch' TypeAndValue ',' TypeAndValue '[' JumpTable ']'
3227 ///  JumpTable
3228 ///    ::= (TypeAndValue ',' TypeAndValue)*
3229 bool LLParser::ParseSwitch(Instruction *&Inst, PerFunctionState &PFS) {
3230   LocTy CondLoc, BBLoc;
3231   Value *Cond;
3232   BasicBlock *DefaultBB;
3233   if (ParseTypeAndValue(Cond, CondLoc, PFS) ||
3234       ParseToken(lltok::comma, "expected ',' after switch condition") ||
3235       ParseTypeAndBasicBlock(DefaultBB, BBLoc, PFS) ||
3236       ParseToken(lltok::lsquare, "expected '[' with switch table"))
3237     return true;
3238
3239   if (!Cond->getType()->isIntegerTy())
3240     return Error(CondLoc, "switch condition must have integer type");
3241
3242   // Parse the jump table pairs.
3243   SmallPtrSet<Value*, 32> SeenCases;
3244   SmallVector<std::pair<ConstantInt*, BasicBlock*>, 32> Table;
3245   while (Lex.getKind() != lltok::rsquare) {
3246     Value *Constant;
3247     BasicBlock *DestBB;
3248
3249     if (ParseTypeAndValue(Constant, CondLoc, PFS) ||
3250         ParseToken(lltok::comma, "expected ',' after case value") ||
3251         ParseTypeAndBasicBlock(DestBB, PFS))
3252       return true;
3253
3254     if (!SeenCases.insert(Constant))
3255       return Error(CondLoc, "duplicate case value in switch");
3256     if (!isa<ConstantInt>(Constant))
3257       return Error(CondLoc, "case value is not a constant integer");
3258
3259     Table.push_back(std::make_pair(cast<ConstantInt>(Constant), DestBB));
3260   }
3261
3262   Lex.Lex();  // Eat the ']'.
3263
3264   SwitchInst *SI = SwitchInst::Create(Cond, DefaultBB, Table.size());
3265   for (unsigned i = 0, e = Table.size(); i != e; ++i)
3266     SI->addCase(Table[i].first, Table[i].second);
3267   Inst = SI;
3268   return false;
3269 }
3270
3271 /// ParseIndirectBr
3272 ///  Instruction
3273 ///    ::= 'indirectbr' TypeAndValue ',' '[' LabelList ']'
3274 bool LLParser::ParseIndirectBr(Instruction *&Inst, PerFunctionState &PFS) {
3275   LocTy AddrLoc;
3276   Value *Address;
3277   if (ParseTypeAndValue(Address, AddrLoc, PFS) ||
3278       ParseToken(lltok::comma, "expected ',' after indirectbr address") ||
3279       ParseToken(lltok::lsquare, "expected '[' with indirectbr"))
3280     return true;
3281
3282   if (!Address->getType()->isPointerTy())
3283     return Error(AddrLoc, "indirectbr address must have pointer type");
3284
3285   // Parse the destination list.
3286   SmallVector<BasicBlock*, 16> DestList;
3287
3288   if (Lex.getKind() != lltok::rsquare) {
3289     BasicBlock *DestBB;
3290     if (ParseTypeAndBasicBlock(DestBB, PFS))
3291       return true;
3292     DestList.push_back(DestBB);
3293
3294     while (EatIfPresent(lltok::comma)) {
3295       if (ParseTypeAndBasicBlock(DestBB, PFS))
3296         return true;
3297       DestList.push_back(DestBB);
3298     }
3299   }
3300
3301   if (ParseToken(lltok::rsquare, "expected ']' at end of block list"))
3302     return true;
3303
3304   IndirectBrInst *IBI = IndirectBrInst::Create(Address, DestList.size());
3305   for (unsigned i = 0, e = DestList.size(); i != e; ++i)
3306     IBI->addDestination(DestList[i]);
3307   Inst = IBI;
3308   return false;
3309 }
3310
3311
3312 /// ParseInvoke
3313 ///   ::= 'invoke' OptionalCallingConv OptionalAttrs Type Value ParamList
3314 ///       OptionalAttrs 'to' TypeAndValue 'unwind' TypeAndValue
3315 bool LLParser::ParseInvoke(Instruction *&Inst, PerFunctionState &PFS) {
3316   LocTy CallLoc = Lex.getLoc();
3317   AttrBuilder RetAttrs, FnAttrs;
3318   CallingConv::ID CC;
3319   Type *RetType = 0;
3320   LocTy RetTypeLoc;
3321   ValID CalleeID;
3322   SmallVector<ParamInfo, 16> ArgList;
3323
3324   BasicBlock *NormalBB, *UnwindBB;
3325   if (ParseOptionalCallingConv(CC) ||
3326       ParseOptionalReturnAttrs(RetAttrs) ||
3327       ParseType(RetType, RetTypeLoc, true /*void allowed*/) ||
3328       ParseValID(CalleeID) ||
3329       ParseParameterList(ArgList, PFS) ||
3330       ParseOptionalFuncAttrs(FnAttrs) ||
3331       ParseToken(lltok::kw_to, "expected 'to' in invoke") ||
3332       ParseTypeAndBasicBlock(NormalBB, PFS) ||
3333       ParseToken(lltok::kw_unwind, "expected 'unwind' in invoke") ||
3334       ParseTypeAndBasicBlock(UnwindBB, PFS))
3335     return true;
3336
3337   // If RetType is a non-function pointer type, then this is the short syntax
3338   // for the call, which means that RetType is just the return type.  Infer the
3339   // rest of the function argument types from the arguments that are present.
3340   PointerType *PFTy = 0;
3341   FunctionType *Ty = 0;
3342   if (!(PFTy = dyn_cast<PointerType>(RetType)) ||
3343       !(Ty = dyn_cast<FunctionType>(PFTy->getElementType()))) {
3344     // Pull out the types of all of the arguments...
3345     std::vector<Type*> ParamTypes;
3346     for (unsigned i = 0, e = ArgList.size(); i != e; ++i)
3347       ParamTypes.push_back(ArgList[i].V->getType());
3348
3349     if (!FunctionType::isValidReturnType(RetType))
3350       return Error(RetTypeLoc, "Invalid result type for LLVM function");
3351
3352     Ty = FunctionType::get(RetType, ParamTypes, false);
3353     PFTy = PointerType::getUnqual(Ty);
3354   }
3355
3356   // Look up the callee.
3357   Value *Callee;
3358   if (ConvertValIDToValue(PFTy, CalleeID, Callee, &PFS)) return true;
3359
3360   // Set up the Attribute for the function.
3361   SmallVector<AttributeWithIndex, 8> Attrs;
3362   if (RetAttrs.hasAttributes())
3363     Attrs.push_back(
3364       AttributeWithIndex::get(AttributeSet::ReturnIndex,
3365                               Attribute::get(Callee->getContext(),
3366                                               RetAttrs)));
3367
3368   SmallVector<Value*, 8> Args;
3369
3370   // Loop through FunctionType's arguments and ensure they are specified
3371   // correctly.  Also, gather any parameter attributes.
3372   FunctionType::param_iterator I = Ty->param_begin();
3373   FunctionType::param_iterator E = Ty->param_end();
3374   for (unsigned i = 0, e = ArgList.size(); i != e; ++i) {
3375     Type *ExpectedTy = 0;
3376     if (I != E) {
3377       ExpectedTy = *I++;
3378     } else if (!Ty->isVarArg()) {
3379       return Error(ArgList[i].Loc, "too many arguments specified");
3380     }
3381
3382     if (ExpectedTy && ExpectedTy != ArgList[i].V->getType())
3383       return Error(ArgList[i].Loc, "argument is not of expected type '" +
3384                    getTypeString(ExpectedTy) + "'");
3385     Args.push_back(ArgList[i].V);
3386     if (ArgList[i].Attrs.hasAttributes())
3387       Attrs.push_back(AttributeWithIndex::get(i+1, ArgList[i].Attrs));
3388   }
3389
3390   if (I != E)
3391     return Error(CallLoc, "not enough parameters specified for call");
3392
3393   if (FnAttrs.hasAttributes())
3394     Attrs.push_back(
3395       AttributeWithIndex::get(AttributeSet::FunctionIndex,
3396                               Attribute::get(Callee->getContext(),
3397                                               FnAttrs)));
3398
3399   // Finish off the Attribute and check them
3400   AttributeSet PAL = AttributeSet::get(Context, Attrs);
3401
3402   InvokeInst *II = InvokeInst::Create(Callee, NormalBB, UnwindBB, Args);
3403   II->setCallingConv(CC);
3404   II->setAttributes(PAL);
3405   Inst = II;
3406   return false;
3407 }
3408
3409 /// ParseResume
3410 ///   ::= 'resume' TypeAndValue
3411 bool LLParser::ParseResume(Instruction *&Inst, PerFunctionState &PFS) {
3412   Value *Exn; LocTy ExnLoc;
3413   if (ParseTypeAndValue(Exn, ExnLoc, PFS))
3414     return true;
3415
3416   ResumeInst *RI = ResumeInst::Create(Exn);
3417   Inst = RI;
3418   return false;
3419 }
3420
3421 //===----------------------------------------------------------------------===//
3422 // Binary Operators.
3423 //===----------------------------------------------------------------------===//
3424
3425 /// ParseArithmetic
3426 ///  ::= ArithmeticOps TypeAndValue ',' Value
3427 ///
3428 /// If OperandType is 0, then any FP or integer operand is allowed.  If it is 1,
3429 /// then any integer operand is allowed, if it is 2, any fp operand is allowed.
3430 bool LLParser::ParseArithmetic(Instruction *&Inst, PerFunctionState &PFS,
3431                                unsigned Opc, unsigned OperandType) {
3432   LocTy Loc; Value *LHS, *RHS;
3433   if (ParseTypeAndValue(LHS, Loc, PFS) ||
3434       ParseToken(lltok::comma, "expected ',' in arithmetic operation") ||
3435       ParseValue(LHS->getType(), RHS, PFS))
3436     return true;
3437
3438   bool Valid;
3439   switch (OperandType) {
3440   default: llvm_unreachable("Unknown operand type!");
3441   case 0: // int or FP.
3442     Valid = LHS->getType()->isIntOrIntVectorTy() ||
3443             LHS->getType()->isFPOrFPVectorTy();
3444     break;
3445   case 1: Valid = LHS->getType()->isIntOrIntVectorTy(); break;
3446   case 2: Valid = LHS->getType()->isFPOrFPVectorTy(); break;
3447   }
3448
3449   if (!Valid)
3450     return Error(Loc, "invalid operand type for instruction");
3451
3452   Inst = BinaryOperator::Create((Instruction::BinaryOps)Opc, LHS, RHS);
3453   return false;
3454 }
3455
3456 /// ParseLogical
3457 ///  ::= ArithmeticOps TypeAndValue ',' Value {
3458 bool LLParser::ParseLogical(Instruction *&Inst, PerFunctionState &PFS,
3459                             unsigned Opc) {
3460   LocTy Loc; Value *LHS, *RHS;
3461   if (ParseTypeAndValue(LHS, Loc, PFS) ||
3462       ParseToken(lltok::comma, "expected ',' in logical operation") ||
3463       ParseValue(LHS->getType(), RHS, PFS))
3464     return true;
3465
3466   if (!LHS->getType()->isIntOrIntVectorTy())
3467     return Error(Loc,"instruction requires integer or integer vector operands");
3468
3469   Inst = BinaryOperator::Create((Instruction::BinaryOps)Opc, LHS, RHS);
3470   return false;
3471 }
3472
3473
3474 /// ParseCompare
3475 ///  ::= 'icmp' IPredicates TypeAndValue ',' Value
3476 ///  ::= 'fcmp' FPredicates TypeAndValue ',' Value
3477 bool LLParser::ParseCompare(Instruction *&Inst, PerFunctionState &PFS,
3478                             unsigned Opc) {
3479   // Parse the integer/fp comparison predicate.
3480   LocTy Loc;
3481   unsigned Pred;
3482   Value *LHS, *RHS;
3483   if (ParseCmpPredicate(Pred, Opc) ||
3484       ParseTypeAndValue(LHS, Loc, PFS) ||
3485       ParseToken(lltok::comma, "expected ',' after compare value") ||
3486       ParseValue(LHS->getType(), RHS, PFS))
3487     return true;
3488
3489   if (Opc == Instruction::FCmp) {
3490     if (!LHS->getType()->isFPOrFPVectorTy())
3491       return Error(Loc, "fcmp requires floating point operands");
3492     Inst = new FCmpInst(CmpInst::Predicate(Pred), LHS, RHS);
3493   } else {
3494     assert(Opc == Instruction::ICmp && "Unknown opcode for CmpInst!");
3495     if (!LHS->getType()->isIntOrIntVectorTy() &&
3496         !LHS->getType()->getScalarType()->isPointerTy())
3497       return Error(Loc, "icmp requires integer operands");
3498     Inst = new ICmpInst(CmpInst::Predicate(Pred), LHS, RHS);
3499   }
3500   return false;
3501 }
3502
3503 //===----------------------------------------------------------------------===//
3504 // Other Instructions.
3505 //===----------------------------------------------------------------------===//
3506
3507
3508 /// ParseCast
3509 ///   ::= CastOpc TypeAndValue 'to' Type
3510 bool LLParser::ParseCast(Instruction *&Inst, PerFunctionState &PFS,
3511                          unsigned Opc) {
3512   LocTy Loc;
3513   Value *Op;
3514   Type *DestTy = 0;
3515   if (ParseTypeAndValue(Op, Loc, PFS) ||
3516       ParseToken(lltok::kw_to, "expected 'to' after cast value") ||
3517       ParseType(DestTy))
3518     return true;
3519
3520   if (!CastInst::castIsValid((Instruction::CastOps)Opc, Op, DestTy)) {
3521     CastInst::castIsValid((Instruction::CastOps)Opc, Op, DestTy);
3522     return Error(Loc, "invalid cast opcode for cast from '" +
3523                  getTypeString(Op->getType()) + "' to '" +
3524                  getTypeString(DestTy) + "'");
3525   }
3526   Inst = CastInst::Create((Instruction::CastOps)Opc, Op, DestTy);
3527   return false;
3528 }
3529
3530 /// ParseSelect
3531 ///   ::= 'select' TypeAndValue ',' TypeAndValue ',' TypeAndValue
3532 bool LLParser::ParseSelect(Instruction *&Inst, PerFunctionState &PFS) {
3533   LocTy Loc;
3534   Value *Op0, *Op1, *Op2;
3535   if (ParseTypeAndValue(Op0, Loc, PFS) ||
3536       ParseToken(lltok::comma, "expected ',' after select condition") ||
3537       ParseTypeAndValue(Op1, PFS) ||
3538       ParseToken(lltok::comma, "expected ',' after select value") ||
3539       ParseTypeAndValue(Op2, PFS))
3540     return true;
3541
3542   if (const char *Reason = SelectInst::areInvalidOperands(Op0, Op1, Op2))
3543     return Error(Loc, Reason);
3544
3545   Inst = SelectInst::Create(Op0, Op1, Op2);
3546   return false;
3547 }
3548
3549 /// ParseVA_Arg
3550 ///   ::= 'va_arg' TypeAndValue ',' Type
3551 bool LLParser::ParseVA_Arg(Instruction *&Inst, PerFunctionState &PFS) {
3552   Value *Op;
3553   Type *EltTy = 0;
3554   LocTy TypeLoc;
3555   if (ParseTypeAndValue(Op, PFS) ||
3556       ParseToken(lltok::comma, "expected ',' after vaarg operand") ||
3557       ParseType(EltTy, TypeLoc))
3558     return true;
3559
3560   if (!EltTy->isFirstClassType())
3561     return Error(TypeLoc, "va_arg requires operand with first class type");
3562
3563   Inst = new VAArgInst(Op, EltTy);
3564   return false;
3565 }
3566
3567 /// ParseExtractElement
3568 ///   ::= 'extractelement' TypeAndValue ',' TypeAndValue
3569 bool LLParser::ParseExtractElement(Instruction *&Inst, PerFunctionState &PFS) {
3570   LocTy Loc;
3571   Value *Op0, *Op1;
3572   if (ParseTypeAndValue(Op0, Loc, PFS) ||
3573       ParseToken(lltok::comma, "expected ',' after extract value") ||
3574       ParseTypeAndValue(Op1, PFS))
3575     return true;
3576
3577   if (!ExtractElementInst::isValidOperands(Op0, Op1))
3578     return Error(Loc, "invalid extractelement operands");
3579
3580   Inst = ExtractElementInst::Create(Op0, Op1);
3581   return false;
3582 }
3583
3584 /// ParseInsertElement
3585 ///   ::= 'insertelement' TypeAndValue ',' TypeAndValue ',' TypeAndValue
3586 bool LLParser::ParseInsertElement(Instruction *&Inst, PerFunctionState &PFS) {
3587   LocTy Loc;
3588   Value *Op0, *Op1, *Op2;
3589   if (ParseTypeAndValue(Op0, Loc, PFS) ||
3590       ParseToken(lltok::comma, "expected ',' after insertelement value") ||
3591       ParseTypeAndValue(Op1, PFS) ||
3592       ParseToken(lltok::comma, "expected ',' after insertelement value") ||
3593       ParseTypeAndValue(Op2, PFS))
3594     return true;
3595
3596   if (!InsertElementInst::isValidOperands(Op0, Op1, Op2))
3597     return Error(Loc, "invalid insertelement operands");
3598
3599   Inst = InsertElementInst::Create(Op0, Op1, Op2);
3600   return false;
3601 }
3602
3603 /// ParseShuffleVector
3604 ///   ::= 'shufflevector' TypeAndValue ',' TypeAndValue ',' TypeAndValue
3605 bool LLParser::ParseShuffleVector(Instruction *&Inst, PerFunctionState &PFS) {
3606   LocTy Loc;
3607   Value *Op0, *Op1, *Op2;
3608   if (ParseTypeAndValue(Op0, Loc, PFS) ||
3609       ParseToken(lltok::comma, "expected ',' after shuffle mask") ||
3610       ParseTypeAndValue(Op1, PFS) ||
3611       ParseToken(lltok::comma, "expected ',' after shuffle value") ||
3612       ParseTypeAndValue(Op2, PFS))
3613     return true;
3614
3615   if (!ShuffleVectorInst::isValidOperands(Op0, Op1, Op2))
3616     return Error(Loc, "invalid shufflevector operands");
3617
3618   Inst = new ShuffleVectorInst(Op0, Op1, Op2);
3619   return false;
3620 }
3621
3622 /// ParsePHI
3623 ///   ::= 'phi' Type '[' Value ',' Value ']' (',' '[' Value ',' Value ']')*
3624 int LLParser::ParsePHI(Instruction *&Inst, PerFunctionState &PFS) {
3625   Type *Ty = 0;  LocTy TypeLoc;
3626   Value *Op0, *Op1;
3627
3628   if (ParseType(Ty, TypeLoc) ||
3629       ParseToken(lltok::lsquare, "expected '[' in phi value list") ||
3630       ParseValue(Ty, Op0, PFS) ||
3631       ParseToken(lltok::comma, "expected ',' after insertelement value") ||
3632       ParseValue(Type::getLabelTy(Context), Op1, PFS) ||
3633       ParseToken(lltok::rsquare, "expected ']' in phi value list"))
3634     return true;
3635
3636   bool AteExtraComma = false;
3637   SmallVector<std::pair<Value*, BasicBlock*>, 16> PHIVals;
3638   while (1) {
3639     PHIVals.push_back(std::make_pair(Op0, cast<BasicBlock>(Op1)));
3640
3641     if (!EatIfPresent(lltok::comma))
3642       break;
3643
3644     if (Lex.getKind() == lltok::MetadataVar) {
3645       AteExtraComma = true;
3646       break;
3647     }
3648
3649     if (ParseToken(lltok::lsquare, "expected '[' in phi value list") ||
3650         ParseValue(Ty, Op0, PFS) ||
3651         ParseToken(lltok::comma, "expected ',' after insertelement value") ||
3652         ParseValue(Type::getLabelTy(Context), Op1, PFS) ||
3653         ParseToken(lltok::rsquare, "expected ']' in phi value list"))
3654       return true;
3655   }
3656
3657   if (!Ty->isFirstClassType())
3658     return Error(TypeLoc, "phi node must have first class type");
3659
3660   PHINode *PN = PHINode::Create(Ty, PHIVals.size());
3661   for (unsigned i = 0, e = PHIVals.size(); i != e; ++i)
3662     PN->addIncoming(PHIVals[i].first, PHIVals[i].second);
3663   Inst = PN;
3664   return AteExtraComma ? InstExtraComma : InstNormal;
3665 }
3666
3667 /// ParseLandingPad
3668 ///   ::= 'landingpad' Type 'personality' TypeAndValue 'cleanup'? Clause+
3669 /// Clause
3670 ///   ::= 'catch' TypeAndValue
3671 ///   ::= 'filter'
3672 ///   ::= 'filter' TypeAndValue ( ',' TypeAndValue )*
3673 bool LLParser::ParseLandingPad(Instruction *&Inst, PerFunctionState &PFS) {
3674   Type *Ty = 0; LocTy TyLoc;
3675   Value *PersFn; LocTy PersFnLoc;
3676
3677   if (ParseType(Ty, TyLoc) ||
3678       ParseToken(lltok::kw_personality, "expected 'personality'") ||
3679       ParseTypeAndValue(PersFn, PersFnLoc, PFS))
3680     return true;
3681
3682   LandingPadInst *LP = LandingPadInst::Create(Ty, PersFn, 0);
3683   LP->setCleanup(EatIfPresent(lltok::kw_cleanup));
3684
3685   while (Lex.getKind() == lltok::kw_catch || Lex.getKind() == lltok::kw_filter){
3686     LandingPadInst::ClauseType CT;
3687     if (EatIfPresent(lltok::kw_catch))
3688       CT = LandingPadInst::Catch;
3689     else if (EatIfPresent(lltok::kw_filter))
3690       CT = LandingPadInst::Filter;
3691     else
3692       return TokError("expected 'catch' or 'filter' clause type");
3693
3694     Value *V; LocTy VLoc;
3695     if (ParseTypeAndValue(V, VLoc, PFS)) {
3696       delete LP;
3697       return true;
3698     }
3699
3700     // A 'catch' type expects a non-array constant. A filter clause expects an
3701     // array constant.
3702     if (CT == LandingPadInst::Catch) {
3703       if (isa<ArrayType>(V->getType()))
3704         Error(VLoc, "'catch' clause has an invalid type");
3705     } else {
3706       if (!isa<ArrayType>(V->getType()))
3707         Error(VLoc, "'filter' clause has an invalid type");
3708     }
3709
3710     LP->addClause(V);
3711   }
3712
3713   Inst = LP;
3714   return false;
3715 }
3716
3717 /// ParseCall
3718 ///   ::= 'tail'? 'call' OptionalCallingConv OptionalAttrs Type Value
3719 ///       ParameterList OptionalAttrs
3720 bool LLParser::ParseCall(Instruction *&Inst, PerFunctionState &PFS,
3721                          bool isTail) {
3722   AttrBuilder RetAttrs, FnAttrs;
3723   CallingConv::ID CC;
3724   Type *RetType = 0;
3725   LocTy RetTypeLoc;
3726   ValID CalleeID;
3727   SmallVector<ParamInfo, 16> ArgList;
3728   LocTy CallLoc = Lex.getLoc();
3729
3730   if ((isTail && ParseToken(lltok::kw_call, "expected 'tail call'")) ||
3731       ParseOptionalCallingConv(CC) ||
3732       ParseOptionalReturnAttrs(RetAttrs) ||
3733       ParseType(RetType, RetTypeLoc, true /*void allowed*/) ||
3734       ParseValID(CalleeID) ||
3735       ParseParameterList(ArgList, PFS) ||
3736       ParseOptionalFuncAttrs(FnAttrs))
3737     return true;
3738
3739   // If RetType is a non-function pointer type, then this is the short syntax
3740   // for the call, which means that RetType is just the return type.  Infer the
3741   // rest of the function argument types from the arguments that are present.
3742   PointerType *PFTy = 0;
3743   FunctionType *Ty = 0;
3744   if (!(PFTy = dyn_cast<PointerType>(RetType)) ||
3745       !(Ty = dyn_cast<FunctionType>(PFTy->getElementType()))) {
3746     // Pull out the types of all of the arguments...
3747     std::vector<Type*> ParamTypes;
3748     for (unsigned i = 0, e = ArgList.size(); i != e; ++i)
3749       ParamTypes.push_back(ArgList[i].V->getType());
3750
3751     if (!FunctionType::isValidReturnType(RetType))
3752       return Error(RetTypeLoc, "Invalid result type for LLVM function");
3753
3754     Ty = FunctionType::get(RetType, ParamTypes, false);
3755     PFTy = PointerType::getUnqual(Ty);
3756   }
3757
3758   // Look up the callee.
3759   Value *Callee;
3760   if (ConvertValIDToValue(PFTy, CalleeID, Callee, &PFS)) return true;
3761
3762   // Set up the Attribute for the function.
3763   SmallVector<AttributeWithIndex, 8> Attrs;
3764   if (RetAttrs.hasAttributes())
3765     Attrs.push_back(
3766       AttributeWithIndex::get(AttributeSet::ReturnIndex,
3767                               Attribute::get(Callee->getContext(),
3768                                               RetAttrs)));
3769
3770   SmallVector<Value*, 8> Args;
3771
3772   // Loop through FunctionType's arguments and ensure they are specified
3773   // correctly.  Also, gather any parameter attributes.
3774   FunctionType::param_iterator I = Ty->param_begin();
3775   FunctionType::param_iterator E = Ty->param_end();
3776   for (unsigned i = 0, e = ArgList.size(); i != e; ++i) {
3777     Type *ExpectedTy = 0;
3778     if (I != E) {
3779       ExpectedTy = *I++;
3780     } else if (!Ty->isVarArg()) {
3781       return Error(ArgList[i].Loc, "too many arguments specified");
3782     }
3783
3784     if (ExpectedTy && ExpectedTy != ArgList[i].V->getType())
3785       return Error(ArgList[i].Loc, "argument is not of expected type '" +
3786                    getTypeString(ExpectedTy) + "'");
3787     Args.push_back(ArgList[i].V);
3788     if (ArgList[i].Attrs.hasAttributes())
3789       Attrs.push_back(AttributeWithIndex::get(i+1, ArgList[i].Attrs));
3790   }
3791
3792   if (I != E)
3793     return Error(CallLoc, "not enough parameters specified for call");
3794
3795   if (FnAttrs.hasAttributes())
3796     Attrs.push_back(
3797       AttributeWithIndex::get(AttributeSet::FunctionIndex,
3798                               Attribute::get(Callee->getContext(),
3799                                               FnAttrs)));
3800
3801   // Finish off the Attribute and check them
3802   AttributeSet PAL = AttributeSet::get(Context, Attrs);
3803
3804   CallInst *CI = CallInst::Create(Callee, Args);
3805   CI->setTailCall(isTail);
3806   CI->setCallingConv(CC);
3807   CI->setAttributes(PAL);
3808   Inst = CI;
3809   return false;
3810 }
3811
3812 //===----------------------------------------------------------------------===//
3813 // Memory Instructions.
3814 //===----------------------------------------------------------------------===//
3815
3816 /// ParseAlloc
3817 ///   ::= 'alloca' Type (',' TypeAndValue)? (',' OptionalInfo)?
3818 int LLParser::ParseAlloc(Instruction *&Inst, PerFunctionState &PFS) {
3819   Value *Size = 0;
3820   LocTy SizeLoc;
3821   unsigned Alignment = 0;
3822   Type *Ty = 0;
3823   if (ParseType(Ty)) return true;
3824
3825   bool AteExtraComma = false;
3826   if (EatIfPresent(lltok::comma)) {
3827     if (Lex.getKind() == lltok::kw_align) {
3828       if (ParseOptionalAlignment(Alignment)) return true;
3829     } else if (Lex.getKind() == lltok::MetadataVar) {
3830       AteExtraComma = true;
3831     } else {
3832       if (ParseTypeAndValue(Size, SizeLoc, PFS) ||
3833           ParseOptionalCommaAlign(Alignment, AteExtraComma))
3834         return true;
3835     }
3836   }
3837
3838   if (Size && !Size->getType()->isIntegerTy())
3839     return Error(SizeLoc, "element count must have integer type");
3840
3841   Inst = new AllocaInst(Ty, Size, Alignment);
3842   return AteExtraComma ? InstExtraComma : InstNormal;
3843 }
3844
3845 /// ParseLoad
3846 ///   ::= 'load' 'volatile'? TypeAndValue (',' 'align' i32)?
3847 ///   ::= 'load' 'atomic' 'volatile'? TypeAndValue
3848 ///       'singlethread'? AtomicOrdering (',' 'align' i32)?
3849 int LLParser::ParseLoad(Instruction *&Inst, PerFunctionState &PFS) {
3850   Value *Val; LocTy Loc;
3851   unsigned Alignment = 0;
3852   bool AteExtraComma = false;
3853   bool isAtomic = false;
3854   AtomicOrdering Ordering = NotAtomic;
3855   SynchronizationScope Scope = CrossThread;
3856
3857   if (Lex.getKind() == lltok::kw_atomic) {
3858     isAtomic = true;
3859     Lex.Lex();
3860   }
3861
3862   bool isVolatile = false;
3863   if (Lex.getKind() == lltok::kw_volatile) {
3864     isVolatile = true;
3865     Lex.Lex();
3866   }
3867
3868   if (ParseTypeAndValue(Val, Loc, PFS) ||
3869       ParseScopeAndOrdering(isAtomic, Scope, Ordering) ||
3870       ParseOptionalCommaAlign(Alignment, AteExtraComma))
3871     return true;
3872
3873   if (!Val->getType()->isPointerTy() ||
3874       !cast<PointerType>(Val->getType())->getElementType()->isFirstClassType())
3875     return Error(Loc, "load operand must be a pointer to a first class type");
3876   if (isAtomic && !Alignment)
3877     return Error(Loc, "atomic load must have explicit non-zero alignment");
3878   if (Ordering == Release || Ordering == AcquireRelease)
3879     return Error(Loc, "atomic load cannot use Release ordering");
3880
3881   Inst = new LoadInst(Val, "", isVolatile, Alignment, Ordering, Scope);
3882   return AteExtraComma ? InstExtraComma : InstNormal;
3883 }
3884
3885 /// ParseStore
3886
3887 ///   ::= 'store' 'volatile'? TypeAndValue ',' TypeAndValue (',' 'align' i32)?
3888 ///   ::= 'store' 'atomic' 'volatile'? TypeAndValue ',' TypeAndValue
3889 ///       'singlethread'? AtomicOrdering (',' 'align' i32)?
3890 int LLParser::ParseStore(Instruction *&Inst, PerFunctionState &PFS) {
3891   Value *Val, *Ptr; LocTy Loc, PtrLoc;
3892   unsigned Alignment = 0;
3893   bool AteExtraComma = false;
3894   bool isAtomic = false;
3895   AtomicOrdering Ordering = NotAtomic;
3896   SynchronizationScope Scope = CrossThread;
3897
3898   if (Lex.getKind() == lltok::kw_atomic) {
3899     isAtomic = true;
3900     Lex.Lex();
3901   }
3902
3903   bool isVolatile = false;
3904   if (Lex.getKind() == lltok::kw_volatile) {
3905     isVolatile = true;
3906     Lex.Lex();
3907   }
3908
3909   if (ParseTypeAndValue(Val, Loc, PFS) ||
3910       ParseToken(lltok::comma, "expected ',' after store operand") ||
3911       ParseTypeAndValue(Ptr, PtrLoc, PFS) ||
3912       ParseScopeAndOrdering(isAtomic, Scope, Ordering) ||
3913       ParseOptionalCommaAlign(Alignment, AteExtraComma))
3914     return true;
3915
3916   if (!Ptr->getType()->isPointerTy())
3917     return Error(PtrLoc, "store operand must be a pointer");
3918   if (!Val->getType()->isFirstClassType())
3919     return Error(Loc, "store operand must be a first class value");
3920   if (cast<PointerType>(Ptr->getType())->getElementType() != Val->getType())
3921     return Error(Loc, "stored value and pointer type do not match");
3922   if (isAtomic && !Alignment)
3923     return Error(Loc, "atomic store must have explicit non-zero alignment");
3924   if (Ordering == Acquire || Ordering == AcquireRelease)
3925     return Error(Loc, "atomic store cannot use Acquire ordering");
3926
3927   Inst = new StoreInst(Val, Ptr, isVolatile, Alignment, Ordering, Scope);
3928   return AteExtraComma ? InstExtraComma : InstNormal;
3929 }
3930
3931 /// ParseCmpXchg
3932 ///   ::= 'cmpxchg' 'volatile'? TypeAndValue ',' TypeAndValue ',' TypeAndValue
3933 ///       'singlethread'? AtomicOrdering
3934 int LLParser::ParseCmpXchg(Instruction *&Inst, PerFunctionState &PFS) {
3935   Value *Ptr, *Cmp, *New; LocTy PtrLoc, CmpLoc, NewLoc;
3936   bool AteExtraComma = false;
3937   AtomicOrdering Ordering = NotAtomic;
3938   SynchronizationScope Scope = CrossThread;
3939   bool isVolatile = false;
3940
3941   if (EatIfPresent(lltok::kw_volatile))
3942     isVolatile = true;
3943
3944   if (ParseTypeAndValue(Ptr, PtrLoc, PFS) ||
3945       ParseToken(lltok::comma, "expected ',' after cmpxchg address") ||
3946       ParseTypeAndValue(Cmp, CmpLoc, PFS) ||
3947       ParseToken(lltok::comma, "expected ',' after cmpxchg cmp operand") ||
3948       ParseTypeAndValue(New, NewLoc, PFS) ||
3949       ParseScopeAndOrdering(true /*Always atomic*/, Scope, Ordering))
3950     return true;
3951
3952   if (Ordering == Unordered)
3953     return TokError("cmpxchg cannot be unordered");
3954   if (!Ptr->getType()->isPointerTy())
3955     return Error(PtrLoc, "cmpxchg operand must be a pointer");
3956   if (cast<PointerType>(Ptr->getType())->getElementType() != Cmp->getType())
3957     return Error(CmpLoc, "compare value and pointer type do not match");
3958   if (cast<PointerType>(Ptr->getType())->getElementType() != New->getType())
3959     return Error(NewLoc, "new value and pointer type do not match");
3960   if (!New->getType()->isIntegerTy())
3961     return Error(NewLoc, "cmpxchg operand must be an integer");
3962   unsigned Size = New->getType()->getPrimitiveSizeInBits();
3963   if (Size < 8 || (Size & (Size - 1)))
3964     return Error(NewLoc, "cmpxchg operand must be power-of-two byte-sized"
3965                          " integer");
3966
3967   AtomicCmpXchgInst *CXI =
3968     new AtomicCmpXchgInst(Ptr, Cmp, New, Ordering, Scope);
3969   CXI->setVolatile(isVolatile);
3970   Inst = CXI;
3971   return AteExtraComma ? InstExtraComma : InstNormal;
3972 }
3973
3974 /// ParseAtomicRMW
3975 ///   ::= 'atomicrmw' 'volatile'? BinOp TypeAndValue ',' TypeAndValue
3976 ///       'singlethread'? AtomicOrdering
3977 int LLParser::ParseAtomicRMW(Instruction *&Inst, PerFunctionState &PFS) {
3978   Value *Ptr, *Val; LocTy PtrLoc, ValLoc;
3979   bool AteExtraComma = false;
3980   AtomicOrdering Ordering = NotAtomic;
3981   SynchronizationScope Scope = CrossThread;
3982   bool isVolatile = false;
3983   AtomicRMWInst::BinOp Operation;
3984
3985   if (EatIfPresent(lltok::kw_volatile))
3986     isVolatile = true;
3987
3988   switch (Lex.getKind()) {
3989   default: return TokError("expected binary operation in atomicrmw");
3990   case lltok::kw_xchg: Operation = AtomicRMWInst::Xchg; break;
3991   case lltok::kw_add: Operation = AtomicRMWInst::Add; break;
3992   case lltok::kw_sub: Operation = AtomicRMWInst::Sub; break;
3993   case lltok::kw_and: Operation = AtomicRMWInst::And; break;
3994   case lltok::kw_nand: Operation = AtomicRMWInst::Nand; break;
3995   case lltok::kw_or: Operation = AtomicRMWInst::Or; break;
3996   case lltok::kw_xor: Operation = AtomicRMWInst::Xor; break;
3997   case lltok::kw_max: Operation = AtomicRMWInst::Max; break;
3998   case lltok::kw_min: Operation = AtomicRMWInst::Min; break;
3999   case lltok::kw_umax: Operation = AtomicRMWInst::UMax; break;
4000   case lltok::kw_umin: Operation = AtomicRMWInst::UMin; break;
4001   }
4002   Lex.Lex();  // Eat the operation.
4003
4004   if (ParseTypeAndValue(Ptr, PtrLoc, PFS) ||
4005       ParseToken(lltok::comma, "expected ',' after atomicrmw address") ||
4006       ParseTypeAndValue(Val, ValLoc, PFS) ||
4007       ParseScopeAndOrdering(true /*Always atomic*/, Scope, Ordering))
4008     return true;
4009
4010   if (Ordering == Unordered)
4011     return TokError("atomicrmw cannot be unordered");
4012   if (!Ptr->getType()->isPointerTy())
4013     return Error(PtrLoc, "atomicrmw operand must be a pointer");
4014   if (cast<PointerType>(Ptr->getType())->getElementType() != Val->getType())
4015     return Error(ValLoc, "atomicrmw value and pointer type do not match");
4016   if (!Val->getType()->isIntegerTy())
4017     return Error(ValLoc, "atomicrmw operand must be an integer");
4018   unsigned Size = Val->getType()->getPrimitiveSizeInBits();
4019   if (Size < 8 || (Size & (Size - 1)))
4020     return Error(ValLoc, "atomicrmw operand must be power-of-two byte-sized"
4021                          " integer");
4022
4023   AtomicRMWInst *RMWI =
4024     new AtomicRMWInst(Operation, Ptr, Val, Ordering, Scope);
4025   RMWI->setVolatile(isVolatile);
4026   Inst = RMWI;
4027   return AteExtraComma ? InstExtraComma : InstNormal;
4028 }
4029
4030 /// ParseFence
4031 ///   ::= 'fence' 'singlethread'? AtomicOrdering
4032 int LLParser::ParseFence(Instruction *&Inst, PerFunctionState &PFS) {
4033   AtomicOrdering Ordering = NotAtomic;
4034   SynchronizationScope Scope = CrossThread;
4035   if (ParseScopeAndOrdering(true /*Always atomic*/, Scope, Ordering))
4036     return true;
4037
4038   if (Ordering == Unordered)
4039     return TokError("fence cannot be unordered");
4040   if (Ordering == Monotonic)
4041     return TokError("fence cannot be monotonic");
4042
4043   Inst = new FenceInst(Context, Ordering, Scope);
4044   return InstNormal;
4045 }
4046
4047 /// ParseGetElementPtr
4048 ///   ::= 'getelementptr' 'inbounds'? TypeAndValue (',' TypeAndValue)*
4049 int LLParser::ParseGetElementPtr(Instruction *&Inst, PerFunctionState &PFS) {
4050   Value *Ptr = 0;
4051   Value *Val = 0;
4052   LocTy Loc, EltLoc;
4053
4054   bool InBounds = EatIfPresent(lltok::kw_inbounds);
4055
4056   if (ParseTypeAndValue(Ptr, Loc, PFS)) return true;
4057
4058   if (!Ptr->getType()->getScalarType()->isPointerTy())
4059     return Error(Loc, "base of getelementptr must be a pointer");
4060
4061   SmallVector<Value*, 16> Indices;
4062   bool AteExtraComma = false;
4063   while (EatIfPresent(lltok::comma)) {
4064     if (Lex.getKind() == lltok::MetadataVar) {
4065       AteExtraComma = true;
4066       break;
4067     }
4068     if (ParseTypeAndValue(Val, EltLoc, PFS)) return true;
4069     if (!Val->getType()->getScalarType()->isIntegerTy())
4070       return Error(EltLoc, "getelementptr index must be an integer");
4071     if (Val->getType()->isVectorTy() != Ptr->getType()->isVectorTy())
4072       return Error(EltLoc, "getelementptr index type missmatch");
4073     if (Val->getType()->isVectorTy()) {
4074       unsigned ValNumEl = cast<VectorType>(Val->getType())->getNumElements();
4075       unsigned PtrNumEl = cast<VectorType>(Ptr->getType())->getNumElements();
4076       if (ValNumEl != PtrNumEl)
4077         return Error(EltLoc,
4078           "getelementptr vector index has a wrong number of elements");
4079     }
4080     Indices.push_back(Val);
4081   }
4082
4083   if (!GetElementPtrInst::getIndexedType(Ptr->getType(), Indices))
4084     return Error(Loc, "invalid getelementptr indices");
4085   Inst = GetElementPtrInst::Create(Ptr, Indices);
4086   if (InBounds)
4087     cast<GetElementPtrInst>(Inst)->setIsInBounds(true);
4088   return AteExtraComma ? InstExtraComma : InstNormal;
4089 }
4090
4091 /// ParseExtractValue
4092 ///   ::= 'extractvalue' TypeAndValue (',' uint32)+
4093 int LLParser::ParseExtractValue(Instruction *&Inst, PerFunctionState &PFS) {
4094   Value *Val; LocTy Loc;
4095   SmallVector<unsigned, 4> Indices;
4096   bool AteExtraComma;
4097   if (ParseTypeAndValue(Val, Loc, PFS) ||
4098       ParseIndexList(Indices, AteExtraComma))
4099     return true;
4100
4101   if (!Val->getType()->isAggregateType())
4102     return Error(Loc, "extractvalue operand must be aggregate type");
4103
4104   if (!ExtractValueInst::getIndexedType(Val->getType(), Indices))
4105     return Error(Loc, "invalid indices for extractvalue");
4106   Inst = ExtractValueInst::Create(Val, Indices);
4107   return AteExtraComma ? InstExtraComma : InstNormal;
4108 }
4109
4110 /// ParseInsertValue
4111 ///   ::= 'insertvalue' TypeAndValue ',' TypeAndValue (',' uint32)+
4112 int LLParser::ParseInsertValue(Instruction *&Inst, PerFunctionState &PFS) {
4113   Value *Val0, *Val1; LocTy Loc0, Loc1;
4114   SmallVector<unsigned, 4> Indices;
4115   bool AteExtraComma;
4116   if (ParseTypeAndValue(Val0, Loc0, PFS) ||
4117       ParseToken(lltok::comma, "expected comma after insertvalue operand") ||
4118       ParseTypeAndValue(Val1, Loc1, PFS) ||
4119       ParseIndexList(Indices, AteExtraComma))
4120     return true;
4121
4122   if (!Val0->getType()->isAggregateType())
4123     return Error(Loc0, "insertvalue operand must be aggregate type");
4124
4125   if (!ExtractValueInst::getIndexedType(Val0->getType(), Indices))
4126     return Error(Loc0, "invalid indices for insertvalue");
4127   Inst = InsertValueInst::Create(Val0, Val1, Indices);
4128   return AteExtraComma ? InstExtraComma : InstNormal;
4129 }
4130
4131 //===----------------------------------------------------------------------===//
4132 // Embedded metadata.
4133 //===----------------------------------------------------------------------===//
4134
4135 /// ParseMDNodeVector
4136 ///   ::= Element (',' Element)*
4137 /// Element
4138 ///   ::= 'null' | TypeAndValue
4139 bool LLParser::ParseMDNodeVector(SmallVectorImpl<Value*> &Elts,
4140                                  PerFunctionState *PFS) {
4141   // Check for an empty list.
4142   if (Lex.getKind() == lltok::rbrace)
4143     return false;
4144
4145   do {
4146     // Null is a special case since it is typeless.
4147     if (EatIfPresent(lltok::kw_null)) {
4148       Elts.push_back(0);
4149       continue;
4150     }
4151
4152     Value *V = 0;
4153     if (ParseTypeAndValue(V, PFS)) return true;
4154     Elts.push_back(V);
4155   } while (EatIfPresent(lltok::comma));
4156
4157   return false;
4158 }