src/x87/macro-assembler-x87.h

   1 // Copyright 2012 the V8 project authors. All rights reserved.
   2 // Use of this source code is governed by a BSD-style license that can be
   3 // found in the LICENSE file.
   4
   5 #ifndef V8_X87_MACRO_ASSEMBLER_X87_H_
   6 #define V8_X87_MACRO_ASSEMBLER_X87_H_
   7
   8 #include "src/assembler.h"
   9 #include "src/frames.h"
  10 #include "src/globals.h"
  11
  12 namespace v8 {
  13 namespace internal {
  14
  15 // Convenience for platform-independent signatures.  We do not normally
  16 // distinguish memory operands from other operands on ia32.
  17 typedef Operand MemOperand;
  18
  19 enum RememberedSetAction { EMIT_REMEMBERED_SET, OMIT_REMEMBERED_SET };
  20 enum SmiCheck { INLINE_SMI_CHECK, OMIT_SMI_CHECK };
  21 enum PointersToHereCheck {
  22   kPointersToHereMaybeInteresting,
  23   kPointersToHereAreAlwaysInteresting
  24 };
  25
  26
  27 enum RegisterValueType {
  28   REGISTER_VALUE_IS_SMI,
  29   REGISTER_VALUE_IS_INT32
  30 };
  31
  32
  33 bool AreAliased(Register r1, Register r2, Register r3, Register r4);
  34
  35
  36 // MacroAssembler implements a collection of frequently used macros.
  37 class MacroAssembler: public Assembler {
  38  public:
  39   // The isolate parameter can be NULL if the macro assembler should
  40   // not use isolate-dependent functionality. In this case, it's the
  41   // responsibility of the caller to never invoke such function on the
  42   // macro assembler.
  43   MacroAssembler(Isolate* isolate, void* buffer, int size);
  44
  45   void Load(Register dst, const Operand& src, Representation r);
  46   void Store(Register src, const Operand& dst, Representation r);
  47
  48   // Operations on roots in the root-array.
  49   void LoadRoot(Register destination, Heap::RootListIndex index);
  50   void StoreRoot(Register source, Register scratch, Heap::RootListIndex index);
  51   void CompareRoot(Register with, Register scratch, Heap::RootListIndex index);
  52   // These methods can only be used with constant roots (i.e. non-writable
  53   // and not in new space).
  54   void CompareRoot(Register with, Heap::RootListIndex index);
  55   void CompareRoot(const Operand& with, Heap::RootListIndex index);
  56
  57   // ---------------------------------------------------------------------------
  58   // GC Support
  59   enum RememberedSetFinalAction {
  60     kReturnAtEnd,
  61     kFallThroughAtEnd
  62   };
  63
  64   // Record in the remembered set the fact that we have a pointer to new space
  65   // at the address pointed to by the addr register.  Only works if addr is not
  66   // in new space.
  67   void RememberedSetHelper(Register object,  // Used for debug code.
  68                            Register addr,
  69                            Register scratch,
  70                            RememberedSetFinalAction and_then);
  71
  72   void CheckPageFlag(Register object,
  73                      Register scratch,
  74                      int mask,
  75                      Condition cc,
  76                      Label* condition_met,
  77                      Label::Distance condition_met_distance = Label::kFar);
  78
  79   void CheckPageFlagForMap(
  80       Handle<Map> map,
  81       int mask,
  82       Condition cc,
  83       Label* condition_met,
  84       Label::Distance condition_met_distance = Label::kFar);
  85
  86   void CheckMapDeprecated(Handle<Map> map,
  87                           Register scratch,
  88                           Label* if_deprecated);
  89
  90   // Check if object is in new space.  Jumps if the object is not in new space.
  91   // The register scratch can be object itself, but scratch will be clobbered.
  92   void JumpIfNotInNewSpace(Register object,
  93                            Register scratch,
  94                            Label* branch,
  95                            Label::Distance distance = Label::kFar) {
  96     InNewSpace(object, scratch, zero, branch, distance);
  97   }
  98
  99   // Check if object is in new space.  Jumps if the object is in new space.
 100   // The register scratch can be object itself, but it will be clobbered.
 101   void JumpIfInNewSpace(Register object,
 102                         Register scratch,
 103                         Label* branch,
 104                         Label::Distance distance = Label::kFar) {
 105     InNewSpace(object, scratch, not_zero, branch, distance);
 106   }
 107
 108   // Check if an object has a given incremental marking color.  Also uses ecx!
 109   void HasColor(Register object,
 110                 Register scratch0,
 111                 Register scratch1,
 112                 Label* has_color,
 113                 Label::Distance has_color_distance,
 114                 int first_bit,
 115                 int second_bit);
 116
 117   void JumpIfBlack(Register object,
 118                    Register scratch0,
 119                    Register scratch1,
 120                    Label* on_black,
 121                    Label::Distance on_black_distance = Label::kFar);
 122
 123   // Checks the color of an object.  If the object is already grey or black
 124   // then we just fall through, since it is already live.  If it is white and
 125   // we can determine that it doesn't need to be scanned, then we just mark it
 126   // black and fall through.  For the rest we jump to the label so the
 127   // incremental marker can fix its assumptions.
 128   void EnsureNotWhite(Register object,
 129                       Register scratch1,
 130                       Register scratch2,
 131                       Label* object_is_white_and_not_data,
 132                       Label::Distance distance);
 133
 134   // Notify the garbage collector that we wrote a pointer into an object.
 135   // |object| is the object being stored into, |value| is the object being
 136   // stored.  value and scratch registers are clobbered by the operation.
 137   // The offset is the offset from the start of the object, not the offset from
 138   // the tagged HeapObject pointer.  For use with FieldOperand(reg, off).
 139   void RecordWriteField(
 140       Register object,
 141       int offset,
 142       Register value,
 143       Register scratch,
 144       RememberedSetAction remembered_set_action = EMIT_REMEMBERED_SET,
 145       SmiCheck smi_check = INLINE_SMI_CHECK,
 146       PointersToHereCheck pointers_to_here_check_for_value =
 147           kPointersToHereMaybeInteresting);
 148
 149   // As above, but the offset has the tag presubtracted.  For use with
 150   // Operand(reg, off).
 151   void RecordWriteContextSlot(
 152       Register context,
 153       int offset,
 154       Register value,
 155       Register scratch,
 156       RememberedSetAction remembered_set_action = EMIT_REMEMBERED_SET,
 157       SmiCheck smi_check = INLINE_SMI_CHECK,
 158       PointersToHereCheck pointers_to_here_check_for_value =
 159           kPointersToHereMaybeInteresting) {
 160     RecordWriteField(context,
 161                      offset + kHeapObjectTag,
 162                      value,
 163                      scratch,
 164                      remembered_set_action,
 165                      smi_check,
 166                      pointers_to_here_check_for_value);
 167   }
 168
 169   // Notify the garbage collector that we wrote a pointer into a fixed array.
 170   // |array| is the array being stored into, |value| is the
 171   // object being stored.  |index| is the array index represented as a
 172   // Smi. All registers are clobbered by the operation RecordWriteArray
 173   // filters out smis so it does not update the write barrier if the
 174   // value is a smi.
 175   void RecordWriteArray(
 176       Register array,
 177       Register value,
 178       Register index,
 179       RememberedSetAction remembered_set_action = EMIT_REMEMBERED_SET,
 180       SmiCheck smi_check = INLINE_SMI_CHECK,
 181       PointersToHereCheck pointers_to_here_check_for_value =
 182           kPointersToHereMaybeInteresting);
 183
 184   // For page containing |object| mark region covering |address|
 185   // dirty. |object| is the object being stored into, |value| is the
 186   // object being stored. The address and value registers are clobbered by the
 187   // operation. RecordWrite filters out smis so it does not update the
 188   // write barrier if the value is a smi.
 189   void RecordWrite(
 190       Register object,
 191       Register address,
 192       Register value,
 193       RememberedSetAction remembered_set_action = EMIT_REMEMBERED_SET,
 194       SmiCheck smi_check = INLINE_SMI_CHECK,
 195       PointersToHereCheck pointers_to_here_check_for_value =
 196           kPointersToHereMaybeInteresting);
 197
 198   // For page containing |object| mark the region covering the object's map
 199   // dirty. |object| is the object being stored into, |map| is the Map object
 200   // that was stored.
 201   void RecordWriteForMap(
 202       Register object,
 203       Handle<Map> map,
 204       Register scratch1,
 205       Register scratch2);
 206
 207   // ---------------------------------------------------------------------------
 208   // Debugger Support
 209
 210   void DebugBreak();
 211
 212   // Generates function and stub prologue code.
 213   void StubPrologue();
 214   void Prologue(bool code_pre_aging);
 215
 216   // Enter specific kind of exit frame. Expects the number of
 217   // arguments in register eax and sets up the number of arguments in
 218   // register edi and the pointer to the first argument in register
 219   // esi.
 220   void EnterExitFrame();
 221
 222   void EnterApiExitFrame(int argc);
 223
 224   // Leave the current exit frame. Expects the return value in
 225   // register eax:edx (untouched) and the pointer to the first
 226   // argument in register esi.
 227   void LeaveExitFrame();
 228
 229   // Leave the current exit frame. Expects the return value in
 230   // register eax (untouched).
 231   void LeaveApiExitFrame(bool restore_context);
 232
 233   // Find the function context up the context chain.
 234   void LoadContext(Register dst, int context_chain_length);
 235
 236   // Conditionally load the cached Array transitioned map of type
 237   // transitioned_kind from the native context if the map in register
 238   // map_in_out is the cached Array map in the native context of
 239   // expected_kind.
 240   void LoadTransitionedArrayMapConditional(
 241       ElementsKind expected_kind,
 242       ElementsKind transitioned_kind,
 243       Register map_in_out,
 244       Register scratch,
 245       Label* no_map_match);
 246
 247   // Load the global function with the given index.
 248   void LoadGlobalFunction(int index, Register function);
 249
 250   // Load the initial map from the global function. The registers
 251   // function and map can be the same.
 252   void LoadGlobalFunctionInitialMap(Register function, Register map);
 253
 254   // Push and pop the registers that can hold pointers.
 255   void PushSafepointRegisters() { pushad(); }
 256   void PopSafepointRegisters() { popad(); }
 257   // Store the value in register/immediate src in the safepoint
 258   // register stack slot for register dst.
 259   void StoreToSafepointRegisterSlot(Register dst, Register src);
 260   void StoreToSafepointRegisterSlot(Register dst, Immediate src);
 261   void LoadFromSafepointRegisterSlot(Register dst, Register src);
 262
 263   void LoadHeapObject(Register result, Handle<HeapObject> object);
 264   void CmpHeapObject(Register reg, Handle<HeapObject> object);
 265   void PushHeapObject(Handle<HeapObject> object);
 266
 267   void LoadObject(Register result, Handle<Object> object) {
 268     AllowDeferredHandleDereference heap_object_check;
 269     if (object->IsHeapObject()) {
 270       LoadHeapObject(result, Handle<HeapObject>::cast(object));
 271     } else {
 272       Move(result, Immediate(object));
 273     }
 274   }
 275
 276   void CmpObject(Register reg, Handle<Object> object) {
 277     AllowDeferredHandleDereference heap_object_check;
 278     if (object->IsHeapObject()) {
 279       CmpHeapObject(reg, Handle<HeapObject>::cast(object));
 280     } else {
 281       cmp(reg, Immediate(object));
 282     }
 283   }
 284
 285   // ---------------------------------------------------------------------------
 286   // JavaScript invokes
 287
 288   // Invoke the JavaScript function code by either calling or jumping.
 289   void InvokeCode(Register code,
 290                   const ParameterCount& expected,
 291                   const ParameterCount& actual,
 292                   InvokeFlag flag,
 293                   const CallWrapper& call_wrapper) {
 294     InvokeCode(Operand(code), expected, actual, flag, call_wrapper);
 295   }
 296
 297   void InvokeCode(const Operand& code,
 298                   const ParameterCount& expected,
 299                   const ParameterCount& actual,
 300                   InvokeFlag flag,
 301                   const CallWrapper& call_wrapper);
 302
 303   // Invoke the JavaScript function in the given register. Changes the
 304   // current context to the context in the function before invoking.
 305   void InvokeFunction(Register function,
 306                       const ParameterCount& actual,
 307                       InvokeFlag flag,
 308                       const CallWrapper& call_wrapper);
 309
 310   void InvokeFunction(Register function,
 311                       const ParameterCount& expected,
 312                       const ParameterCount& actual,
 313                       InvokeFlag flag,
 314                       const CallWrapper& call_wrapper);
 315
 316   void InvokeFunction(Handle<JSFunction> function,
 317                       const ParameterCount& expected,
 318                       const ParameterCount& actual,
 319                       InvokeFlag flag,
 320                       const CallWrapper& call_wrapper);
 321
 322   // Invoke specified builtin JavaScript function. Adds an entry to
 323   // the unresolved list if the name does not resolve.
 324   void InvokeBuiltin(Builtins::JavaScript id,
 325                      InvokeFlag flag,
 326                      const CallWrapper& call_wrapper = NullCallWrapper());
 327
 328   // Store the function for the given builtin in the target register.
 329   void GetBuiltinFunction(Register target, Builtins::JavaScript id);
 330
 331   // Store the code object for the given builtin in the target register.
 332   void GetBuiltinEntry(Register target, Builtins::JavaScript id);
 333
 334   // Expression support
 335   // Support for constant splitting.
 336   bool IsUnsafeImmediate(const Immediate& x);
 337   void SafeMove(Register dst, const Immediate& x);
 338   void SafePush(const Immediate& x);
 339
 340   // Compare object type for heap object.
 341   // Incoming register is heap_object and outgoing register is map.
 342   void CmpObjectType(Register heap_object, InstanceType type, Register map);
 343
 344   // Compare instance type for map.
 345   void CmpInstanceType(Register map, InstanceType type);
 346
 347   // Check if a map for a JSObject indicates that the object has fast elements.
 348   // Jump to the specified label if it does not.
 349   void CheckFastElements(Register map,
 350                          Label* fail,
 351                          Label::Distance distance = Label::kFar);
 352
 353   // Check if a map for a JSObject indicates that the object can have both smi
 354   // and HeapObject elements.  Jump to the specified label if it does not.
 355   void CheckFastObjectElements(Register map,
 356                                Label* fail,
 357                                Label::Distance distance = Label::kFar);
 358
 359   // Check if a map for a JSObject indicates that the object has fast smi only
 360   // elements.  Jump to the specified label if it does not.
 361   void CheckFastSmiElements(Register map,
 362                             Label* fail,
 363                             Label::Distance distance = Label::kFar);
 364
 365   // Check to see if maybe_number can be stored as a double in
 366   // FastDoubleElements. If it can, store it at the index specified by key in
 367   // the FastDoubleElements array elements, otherwise jump to fail.
 368   void StoreNumberToDoubleElements(Register maybe_number,
 369                                    Register elements,
 370                                    Register key,
 371                                    Register scratch,
 372                                    Label* fail,
 373                                    int offset = 0);
 374
 375   // Compare an object's map with the specified map.
 376   void CompareMap(Register obj, Handle<Map> map);
 377
 378   // Check if the map of an object is equal to a specified map and branch to
 379   // label if not. Skip the smi check if not required (object is known to be a
 380   // heap object). If mode is ALLOW_ELEMENT_TRANSITION_MAPS, then also match
 381   // against maps that are ElementsKind transition maps of the specified map.
 382   void CheckMap(Register obj,
 383                 Handle<Map> map,
 384                 Label* fail,
 385                 SmiCheckType smi_check_type);
 386
 387   // Check if the map of an object is equal to a specified map and branch to a
 388   // specified target if equal. Skip the smi check if not required (object is
 389   // known to be a heap object)
 390   void DispatchMap(Register obj,
 391                    Register unused,
 392                    Handle<Map> map,
 393                    Handle<Code> success,
 394                    SmiCheckType smi_check_type);
 395
 396   // Check if the object in register heap_object is a string. Afterwards the
 397   // register map contains the object map and the register instance_type
 398   // contains the instance_type. The registers map and instance_type can be the
 399   // same in which case it contains the instance type afterwards. Either of the
 400   // registers map and instance_type can be the same as heap_object.
 401   Condition IsObjectStringType(Register heap_object,
 402                                Register map,
 403                                Register instance_type);
 404
 405   // Check if the object in register heap_object is a name. Afterwards the
 406   // register map contains the object map and the register instance_type
 407   // contains the instance_type. The registers map and instance_type can be the
 408   // same in which case it contains the instance type afterwards. Either of the
 409   // registers map and instance_type can be the same as heap_object.
 410   Condition IsObjectNameType(Register heap_object,
 411                              Register map,
 412                              Register instance_type);
 413
 414   // Check if a heap object's type is in the JSObject range, not including
 415   // JSFunction.  The object's map will be loaded in the map register.
 416   // Any or all of the three registers may be the same.
 417   // The contents of the scratch register will always be overwritten.
 418   void IsObjectJSObjectType(Register heap_object,
 419                             Register map,
 420                             Register scratch,
 421                             Label* fail);
 422
 423   // The contents of the scratch register will be overwritten.
 424   void IsInstanceJSObjectType(Register map, Register scratch, Label* fail);
 425
 426   // FCmp is similar to integer cmp, but requires unsigned
 427   // jcc instructions (je, ja, jae, jb, jbe, je, and jz).
 428   void FCmp();
 429
 430   void ClampUint8(Register reg);
 431
 432   void SlowTruncateToI(Register result_reg, Register input_reg,
 433       int offset = HeapNumber::kValueOffset - kHeapObjectTag);
 434
 435   void TruncateHeapNumberToI(Register result_reg, Register input_reg);
 436   void TruncateX87TOSToI(Register result_reg);
 437
 438   void X87TOSToI(Register result_reg, MinusZeroMode minus_zero_mode,
 439       Label* conversion_failed, Label::Distance dst = Label::kFar);
 440
 441   void TaggedToI(Register result_reg, Register input_reg,
 442       MinusZeroMode minus_zero_mode, Label* lost_precision);
 443
 444   // Smi tagging support.
 445   void SmiTag(Register reg) {
 446     STATIC_ASSERT(kSmiTag == 0);
 447     STATIC_ASSERT(kSmiTagSize == 1);
 448     add(reg, reg);
 449   }
 450   void SmiUntag(Register reg) {
 451     sar(reg, kSmiTagSize);
 452   }
 453
 454   // Modifies the register even if it does not contain a Smi!
 455   void SmiUntag(Register reg, Label* is_smi) {
 456     STATIC_ASSERT(kSmiTagSize == 1);
 457     sar(reg, kSmiTagSize);
 458     STATIC_ASSERT(kSmiTag == 0);
 459     j(not_carry, is_smi);
 460   }
 461
 462   void LoadUint32NoSSE2(Register src);
 463
 464   // Jump the register contains a smi.
 465   inline void JumpIfSmi(Register value,
 466                         Label* smi_label,
 467                         Label::Distance distance = Label::kFar) {
 468     test(value, Immediate(kSmiTagMask));
 469     j(zero, smi_label, distance);
 470   }
 471   // Jump if the operand is a smi.
 472   inline void JumpIfSmi(Operand value,
 473                         Label* smi_label,
 474                         Label::Distance distance = Label::kFar) {
 475     test(value, Immediate(kSmiTagMask));
 476     j(zero, smi_label, distance);
 477   }
 478   // Jump if register contain a non-smi.
 479   inline void JumpIfNotSmi(Register value,
 480                            Label* not_smi_label,
 481                            Label::Distance distance = Label::kFar) {
 482     test(value, Immediate(kSmiTagMask));
 483     j(not_zero, not_smi_label, distance);
 484   }
 485
 486   void LoadInstanceDescriptors(Register map, Register descriptors);
 487   void EnumLength(Register dst, Register map);
 488   void NumberOfOwnDescriptors(Register dst, Register map);
 489
 490   template<typename Field>
 491   void DecodeField(Register reg) {
 492     static const int shift = Field::kShift;
 493     static const int mask = Field::kMask >> Field::kShift;
 494     if (shift != 0) {
 495       sar(reg, shift);
 496     }
 497     and_(reg, Immediate(mask));
 498   }
 499
 500   template<typename Field>
 501   void DecodeFieldToSmi(Register reg) {
 502     static const int shift = Field::kShift;
 503     static const int mask = (Field::kMask >> Field::kShift) << kSmiTagSize;
 504     STATIC_ASSERT((mask & (0x80000000u >> (kSmiTagSize - 1))) == 0);
 505     STATIC_ASSERT(kSmiTag == 0);
 506     if (shift < kSmiTagSize) {
 507       shl(reg, kSmiTagSize - shift);
 508     } else if (shift > kSmiTagSize) {
 509       sar(reg, shift - kSmiTagSize);
 510     }
 511     and_(reg, Immediate(mask));
 512   }
 513
 514   // Abort execution if argument is not a number, enabled via --debug-code.
 515   void AssertNumber(Register object);
 516
 517   // Abort execution if argument is not a smi, enabled via --debug-code.
 518   void AssertSmi(Register object);
 519
 520   // Abort execution if argument is a smi, enabled via --debug-code.
 521   void AssertNotSmi(Register object);
 522
 523   // Abort execution if argument is not a string, enabled via --debug-code.
 524   void AssertString(Register object);
 525
 526   // Abort execution if argument is not a name, enabled via --debug-code.
 527   void AssertName(Register object);
 528
 529   // Abort execution if argument is not undefined or an AllocationSite, enabled
 530   // via --debug-code.
 531   void AssertUndefinedOrAllocationSite(Register object);
 532
 533   // ---------------------------------------------------------------------------
 534   // Exception handling
 535
 536   // Push a new try handler and link it into try handler chain.
 537   void PushTryHandler(StackHandler::Kind kind, int handler_index);
 538
 539   // Unlink the stack handler on top of the stack from the try handler chain.
 540   void PopTryHandler();
 541
 542   // Throw to the top handler in the try hander chain.
 543   void Throw(Register value);
 544
 545   // Throw past all JS frames to the top JS entry frame.
 546   void ThrowUncatchable(Register value);
 547
 548   // ---------------------------------------------------------------------------
 549   // Inline caching support
 550
 551   // Generate code for checking access rights - used for security checks
 552   // on access to global objects across environments. The holder register
 553   // is left untouched, but the scratch register is clobbered.
 554   void CheckAccessGlobalProxy(Register holder_reg,
 555                               Register scratch1,
 556                               Register scratch2,
 557                               Label* miss);
 558
 559   void GetNumberHash(Register r0, Register scratch);
 560
 561   void LoadFromNumberDictionary(Label* miss,
 562                                 Register elements,
 563                                 Register key,
 564                                 Register r0,
 565                                 Register r1,
 566                                 Register r2,
 567                                 Register result);
 568
 569
 570   // ---------------------------------------------------------------------------
 571   // Allocation support
 572
 573   // Allocate an object in new space or old pointer space. If the given space
 574   // is exhausted control continues at the gc_required label. The allocated
 575   // object is returned in result and end of the new object is returned in
 576   // result_end. The register scratch can be passed as no_reg in which case
 577   // an additional object reference will be added to the reloc info. The
 578   // returned pointers in result and result_end have not yet been tagged as
 579   // heap objects. If result_contains_top_on_entry is true the content of
 580   // result is known to be the allocation top on entry (could be result_end
 581   // from a previous call). If result_contains_top_on_entry is true scratch
 582   // should be no_reg as it is never used.
 583   void Allocate(int object_size,
 584                 Register result,
 585                 Register result_end,
 586                 Register scratch,
 587                 Label* gc_required,
 588                 AllocationFlags flags);
 589
 590   void Allocate(int header_size,
 591                 ScaleFactor element_size,
 592                 Register element_count,
 593                 RegisterValueType element_count_type,
 594                 Register result,
 595                 Register result_end,
 596                 Register scratch,
 597                 Label* gc_required,
 598                 AllocationFlags flags);
 599
 600   void Allocate(Register object_size,
 601                 Register result,
 602                 Register result_end,
 603                 Register scratch,
 604                 Label* gc_required,
 605                 AllocationFlags flags);
 606
 607   // Undo allocation in new space. The object passed and objects allocated after
 608   // it will no longer be allocated. Make sure that no pointers are left to the
 609   // object(s) no longer allocated as they would be invalid when allocation is
 610   // un-done.
 611   void UndoAllocationInNewSpace(Register object);
 612
 613   // Allocate a heap number in new space with undefined value. The
 614   // register scratch2 can be passed as no_reg; the others must be
 615   // valid registers. Returns tagged pointer in result register, or
 616   // jumps to gc_required if new space is full.
 617   void AllocateHeapNumber(Register result,
 618                           Register scratch1,
 619                           Register scratch2,
 620                           Label* gc_required);
 621
 622   // Allocate a sequential string. All the header fields of the string object
 623   // are initialized.
 624   void AllocateTwoByteString(Register result,
 625                              Register length,
 626                              Register scratch1,
 627                              Register scratch2,
 628                              Register scratch3,
 629                              Label* gc_required);
 630   void AllocateAsciiString(Register result,
 631                            Register length,
 632                            Register scratch1,
 633                            Register scratch2,
 634                            Register scratch3,
 635                            Label* gc_required);
 636   void AllocateAsciiString(Register result,
 637                            int length,
 638                            Register scratch1,
 639                            Register scratch2,
 640                            Label* gc_required);
 641
 642   // Allocate a raw cons string object. Only the map field of the result is
 643   // initialized.
 644   void AllocateTwoByteConsString(Register result,
 645                           Register scratch1,
 646                           Register scratch2,
 647                           Label* gc_required);
 648   void AllocateAsciiConsString(Register result,
 649                                Register scratch1,
 650                                Register scratch2,
 651                                Label* gc_required);
 652
 653   // Allocate a raw sliced string object. Only the map field of the result is
 654   // initialized.
 655   void AllocateTwoByteSlicedString(Register result,
 656                             Register scratch1,
 657                             Register scratch2,
 658                             Label* gc_required);
 659   void AllocateAsciiSlicedString(Register result,
 660                                  Register scratch1,
 661                                  Register scratch2,
 662                                  Label* gc_required);
 663
 664   // Copy memory, byte-by-byte, from source to destination.  Not optimized for
 665   // long or aligned copies.
 666   // The contents of index and scratch are destroyed.
 667   void CopyBytes(Register source,
 668                  Register destination,
 669                  Register length,
 670                  Register scratch);
 671
 672   // Initialize fields with filler values.  Fields starting at |start_offset|
 673   // not including end_offset are overwritten with the value in |filler|.  At
 674   // the end the loop, |start_offset| takes the value of |end_offset|.
 675   void InitializeFieldsWithFiller(Register start_offset,
 676                                   Register end_offset,
 677                                   Register filler);
 678
 679   // ---------------------------------------------------------------------------
 680   // Support functions.
 681
 682   // Check a boolean-bit of a Smi field.
 683   void BooleanBitTest(Register object, int field_offset, int bit_index);
 684
 685   // Check if result is zero and op is negative.
 686   void NegativeZeroTest(Register result, Register op, Label* then_label);
 687
 688   // Check if result is zero and any of op1 and op2 are negative.
 689   // Register scratch is destroyed, and it must be different from op2.
 690   void NegativeZeroTest(Register result, Register op1, Register op2,
 691                         Register scratch, Label* then_label);
 692
 693   // Try to get function prototype of a function and puts the value in
 694   // the result register. Checks that the function really is a
 695   // function and jumps to the miss label if the fast checks fail. The
 696   // function register will be untouched; the other registers may be
 697   // clobbered.
 698   void TryGetFunctionPrototype(Register function,
 699                                Register result,
 700                                Register scratch,
 701                                Label* miss,
 702                                bool miss_on_bound_function = false);
 703
 704   // Picks out an array index from the hash field.
 705   // Register use:
 706   //   hash - holds the index's hash. Clobbered.
 707   //   index - holds the overwritten index on exit.
 708   void IndexFromHash(Register hash, Register index);
 709
 710   // ---------------------------------------------------------------------------
 711   // Runtime calls
 712
 713   // Call a code stub.  Generate the code if necessary.
 714   void CallStub(CodeStub* stub, TypeFeedbackId ast_id = TypeFeedbackId::None());
 715
 716   // Tail call a code stub (jump).  Generate the code if necessary.
 717   void TailCallStub(CodeStub* stub);
 718
 719   // Return from a code stub after popping its arguments.
 720   void StubReturn(int argc);
 721
 722   // Call a runtime routine.
 723   void CallRuntime(const Runtime::Function* f, int num_arguments);
 724   // Convenience function: Same as above, but takes the fid instead.
 725   void CallRuntime(Runtime::FunctionId id) {
 726     const Runtime::Function* function = Runtime::FunctionForId(id);
 727     CallRuntime(function, function->nargs);
 728   }
 729   void CallRuntime(Runtime::FunctionId id, int num_arguments) {
 730     CallRuntime(Runtime::FunctionForId(id), num_arguments);
 731   }
 732
 733   // Convenience function: call an external reference.
 734   void CallExternalReference(ExternalReference ref, int num_arguments);
 735
 736   // Tail call of a runtime routine (jump).
 737   // Like JumpToExternalReference, but also takes care of passing the number
 738   // of parameters.
 739   void TailCallExternalReference(const ExternalReference& ext,
 740                                  int num_arguments,
 741                                  int result_size);
 742
 743   // Convenience function: tail call a runtime routine (jump).
 744   void TailCallRuntime(Runtime::FunctionId fid,
 745                        int num_arguments,
 746                        int result_size);
 747
 748   // Before calling a C-function from generated code, align arguments on stack.
 749   // After aligning the frame, arguments must be stored in esp[0], esp[4],
 750   // etc., not pushed. The argument count assumes all arguments are word sized.
 751   // Some compilers/platforms require the stack to be aligned when calling
 752   // C++ code.
 753   // Needs a scratch register to do some arithmetic. This register will be
 754   // trashed.
 755   void PrepareCallCFunction(int num_arguments, Register scratch);
 756
 757   // Calls a C function and cleans up the space for arguments allocated
 758   // by PrepareCallCFunction. The called function is not allowed to trigger a
 759   // garbage collection, since that might move the code and invalidate the
 760   // return address (unless this is somehow accounted for by the called
 761   // function).
 762   void CallCFunction(ExternalReference function, int num_arguments);
 763   void CallCFunction(Register function, int num_arguments);
 764
 765   // Prepares stack to put arguments (aligns and so on). Reserves
 766   // space for return value if needed (assumes the return value is a handle).
 767   // Arguments must be stored in ApiParameterOperand(0), ApiParameterOperand(1)
 768   // etc. Saves context (esi). If space was reserved for return value then
 769   // stores the pointer to the reserved slot into esi.
 770   void PrepareCallApiFunction(int argc);
 771
 772   // Calls an API function.  Allocates HandleScope, extracts returned value
 773   // from handle and propagates exceptions.  Clobbers ebx, edi and
 774   // caller-save registers.  Restores context.  On return removes
 775   // stack_space * kPointerSize (GCed).
 776   void CallApiFunctionAndReturn(Register function_address,
 777                                 ExternalReference thunk_ref,
 778                                 Operand thunk_last_arg,
 779                                 int stack_space,
 780                                 Operand return_value_operand,
 781                                 Operand* context_restore_operand);
 782
 783   // Jump to a runtime routine.
 784   void JumpToExternalReference(const ExternalReference& ext);
 785
 786   // ---------------------------------------------------------------------------
 787   // Utilities
 788
 789   void Ret();
 790
 791   // Return and drop arguments from stack, where the number of arguments
 792   // may be bigger than 2^16 - 1.  Requires a scratch register.
 793   void Ret(int bytes_dropped, Register scratch);
 794
 795   // Emit code to discard a non-negative number of pointer-sized elements
 796   // from the stack, clobbering only the esp register.
 797   void Drop(int element_count);
 798
 799   void Call(Label* target) { call(target); }
 800   void Push(Register src) { push(src); }
 801   void Pop(Register dst) { pop(dst); }
 802
 803   // Emit call to the code we are currently generating.
 804   void CallSelf() {
 805     Handle<Code> self(reinterpret_cast<Code**>(CodeObject().location()));
 806     call(self, RelocInfo::CODE_TARGET);
 807   }
 808
 809   // Move if the registers are not identical.
 810   void Move(Register target, Register source);
 811
 812   // Move a constant into a destination using the most efficient encoding.
 813   void Move(Register dst, const Immediate& x);
 814   void Move(const Operand& dst, const Immediate& x);
 815
 816   // Push a handle value.
 817   void Push(Handle<Object> handle) { push(Immediate(handle)); }
 818   void Push(Smi* smi) { Push(Handle<Smi>(smi, isolate())); }
 819
 820   Handle<Object> CodeObject() {
 821     ASSERT(!code_object_.is_null());
 822     return code_object_;
 823   }
 824
 825   // Insert code to verify that the x87 stack has the specified depth (0-7)
 826   void VerifyX87StackDepth(uint32_t depth);
 827
 828   // Emit code for a truncating division by a constant. The dividend register is
 829   // unchanged, the result is in edx, and eax gets clobbered.
 830   void TruncatingDiv(Register dividend, int32_t divisor);
 831
 832   // ---------------------------------------------------------------------------
 833   // StatsCounter support
 834
 835   void SetCounter(StatsCounter* counter, int value);
 836   void IncrementCounter(StatsCounter* counter, int value);
 837   void DecrementCounter(StatsCounter* counter, int value);
 838   void IncrementCounter(Condition cc, StatsCounter* counter, int value);
 839   void DecrementCounter(Condition cc, StatsCounter* counter, int value);
 840
 841
 842   // ---------------------------------------------------------------------------
 843   // Debugging
 844
 845   // Calls Abort(msg) if the condition cc is not satisfied.
 846   // Use --debug_code to enable.
 847   void Assert(Condition cc, BailoutReason reason);
 848
 849   void AssertFastElements(Register elements);
 850
 851   // Like Assert(), but always enabled.
 852   void Check(Condition cc, BailoutReason reason);
 853
 854   // Print a message to stdout and abort execution.
 855   void Abort(BailoutReason reason);
 856
 857   // Check that the stack is aligned.
 858   void CheckStackAlignment();
 859
 860   // Verify restrictions about code generated in stubs.
 861   void set_generating_stub(bool value) { generating_stub_ = value; }
 862   bool generating_stub() { return generating_stub_; }
 863   void set_has_frame(bool value) { has_frame_ = value; }
 864   bool has_frame() { return has_frame_; }
 865   inline bool AllowThisStubCall(CodeStub* stub);
 866
 867   // ---------------------------------------------------------------------------
 868   // String utilities.
 869
 870   // Generate code to do a lookup in the number string cache. If the number in
 871   // the register object is found in the cache the generated code falls through
 872   // with the result in the result register. The object and the result register
 873   // can be the same. If the number is not found in the cache the code jumps to
 874   // the label not_found with only the content of register object unchanged.
 875   void LookupNumberStringCache(Register object,
 876                                Register result,
 877                                Register scratch1,
 878                                Register scratch2,
 879                                Label* not_found);
 880
 881   // Check whether the instance type represents a flat ASCII string. Jump to the
 882   // label if not. If the instance type can be scratched specify same register
 883   // for both instance type and scratch.
 884   void JumpIfInstanceTypeIsNotSequentialAscii(Register instance_type,
 885                                               Register scratch,
 886                                               Label* on_not_flat_ascii_string);
 887
 888   // Checks if both objects are sequential ASCII strings, and jumps to label
 889   // if either is not.
 890   void JumpIfNotBothSequentialAsciiStrings(Register object1,
 891                                            Register object2,
 892                                            Register scratch1,
 893                                            Register scratch2,
 894                                            Label* on_not_flat_ascii_strings);
 895
 896   // Checks if the given register or operand is a unique name
 897   void JumpIfNotUniqueName(Register reg, Label* not_unique_name,
 898                            Label::Distance distance = Label::kFar) {
 899     JumpIfNotUniqueName(Operand(reg), not_unique_name, distance);
 900   }
 901
 902   void JumpIfNotUniqueName(Operand operand, Label* not_unique_name,
 903                            Label::Distance distance = Label::kFar);
 904
 905   void EmitSeqStringSetCharCheck(Register string,
 906                                  Register index,
 907                                  Register value,
 908                                  uint32_t encoding_mask);
 909
 910   static int SafepointRegisterStackIndex(Register reg) {
 911     return SafepointRegisterStackIndex(reg.code());
 912   }
 913
 914   // Activation support.
 915   void EnterFrame(StackFrame::Type type);
 916   void LeaveFrame(StackFrame::Type type);
 917
 918   // Expects object in eax and returns map with validated enum cache
 919   // in eax.  Assumes that any other register can be used as a scratch.
 920   void CheckEnumCache(Label* call_runtime);
 921
 922   // AllocationMemento support. Arrays may have an associated
 923   // AllocationMemento object that can be checked for in order to pretransition
 924   // to another type.
 925   // On entry, receiver_reg should point to the array object.
 926   // scratch_reg gets clobbered.
 927   // If allocation info is present, conditional code is set to equal.
 928   void TestJSArrayForAllocationMemento(Register receiver_reg,
 929                                        Register scratch_reg,
 930                                        Label* no_memento_found);
 931
 932   void JumpIfJSArrayHasAllocationMemento(Register receiver_reg,
 933                                          Register scratch_reg,
 934                                          Label* memento_found) {
 935     Label no_memento_found;
 936     TestJSArrayForAllocationMemento(receiver_reg, scratch_reg,
 937                                     &no_memento_found);
 938     j(equal, memento_found);
 939     bind(&no_memento_found);
 940   }
 941
 942   // Jumps to found label if a prototype map has dictionary elements.
 943   void JumpIfDictionaryInPrototypeChain(Register object, Register scratch0,
 944                                         Register scratch1, Label* found);
 945
 946  private:
 947   bool generating_stub_;
 948   bool has_frame_;
 949   // This handle will be patched with the code object on installation.
 950   Handle<Object> code_object_;
 951
 952   // Helper functions for generating invokes.
 953   void InvokePrologue(const ParameterCount& expected,
 954                       const ParameterCount& actual,
 955                       Handle<Code> code_constant,
 956                       const Operand& code_operand,
 957                       Label* done,
 958                       bool* definitely_mismatches,
 959                       InvokeFlag flag,
 960                       Label::Distance done_distance,
 961                       const CallWrapper& call_wrapper = NullCallWrapper());
 962
 963   void EnterExitFramePrologue();
 964   void EnterExitFrameEpilogue(int argc);
 965
 966   void LeaveExitFrameEpilogue(bool restore_context);
 967
 968   // Allocation support helpers.
 969   void LoadAllocationTopHelper(Register result,
 970                                Register scratch,
 971                                AllocationFlags flags);
 972
 973   void UpdateAllocationTopHelper(Register result_end,
 974                                  Register scratch,
 975                                  AllocationFlags flags);
 976
 977   // Helper for implementing JumpIfNotInNewSpace and JumpIfInNewSpace.
 978   void InNewSpace(Register object,
 979                   Register scratch,
 980                   Condition cc,
 981                   Label* condition_met,
 982                   Label::Distance condition_met_distance = Label::kFar);
 983
 984   // Helper for finding the mark bits for an address.  Afterwards, the
 985   // bitmap register points at the word with the mark bits and the mask
 986   // the position of the first bit.  Uses ecx as scratch and leaves addr_reg
 987   // unchanged.
 988   inline void GetMarkBits(Register addr_reg,
 989                           Register bitmap_reg,
 990                           Register mask_reg);
 991
 992   // Helper for throwing exceptions.  Compute a handler address and jump to
 993   // it.  See the implementation for register usage.
 994   void JumpToHandlerEntry();
 995
 996   // Compute memory operands for safepoint stack slots.
 997   Operand SafepointRegisterSlot(Register reg);
 998   static int SafepointRegisterStackIndex(int reg_code);
 999
1000   // Needs access to SafepointRegisterStackIndex for compiled frame
1001   // traversal.
1002   friend class StandardFrame;
1003 };
1004
1005
1006 // The code patcher is used to patch (typically) small parts of code e.g. for
1007 // debugging and other types of instrumentation. When using the code patcher
1008 // the exact number of bytes specified must be emitted. Is not legal to emit
1009 // relocation information. If any of these constraints are violated it causes
1010 // an assertion.
1011 class CodePatcher {
1012  public:
1013   CodePatcher(byte* address, int size);
1014   virtual ~CodePatcher();
1015
1016   // Macro assembler to emit code.
1017   MacroAssembler* masm() { return &masm_; }
1018
1019  private:
1020   byte* address_;  // The address of the code being patched.
1021   int size_;  // Number of bytes of the expected patch size.
1022   MacroAssembler masm_;  // Macro assembler used to generate the code.
1023 };
1024
1025
1026 // -----------------------------------------------------------------------------
1027 // Static helper functions.
1028
1029 // Generate an Operand for loading a field from an object.
1030 inline Operand FieldOperand(Register object, int offset) {
1031   return Operand(object, offset - kHeapObjectTag);
1032 }
1033
1034
1035 // Generate an Operand for loading an indexed field from an object.
1036 inline Operand FieldOperand(Register object,
1037                             Register index,
1038                             ScaleFactor scale,
1039                             int offset) {
1040   return Operand(object, index, scale, offset - kHeapObjectTag);
1041 }
1042
1043
1044 inline Operand FixedArrayElementOperand(Register array,
1045                                         Register index_as_smi,
1046                                         int additional_offset = 0) {
1047   int offset = FixedArray::kHeaderSize + additional_offset * kPointerSize;
1048   return FieldOperand(array, index_as_smi, times_half_pointer_size, offset);
1049 }
1050
1051
1052 inline Operand ContextOperand(Register context, int index) {
1053   return Operand(context, Context::SlotOffset(index));
1054 }
1055
1056
1057 inline Operand GlobalObjectOperand() {
1058   return ContextOperand(esi, Context::GLOBAL_OBJECT_INDEX);
1059 }
1060
1061
1062 // Generates an Operand for saving parameters after PrepareCallApiFunction.
1063 Operand ApiParameterOperand(int index);
1064
1065
1066 #ifdef GENERATED_CODE_COVERAGE
1067 extern void LogGeneratedCodeCoverage(const char* file_line);
1068 #define CODE_COVERAGE_STRINGIFY(x) #x
1069 #define CODE_COVERAGE_TOSTRING(x) CODE_COVERAGE_STRINGIFY(x)
1070 #define __FILE_LINE__ __FILE__ ":" CODE_COVERAGE_TOSTRING(__LINE__)
1071 #define ACCESS_MASM(masm) {                                               \
1072     byte* ia32_coverage_function =                                        \
1073         reinterpret_cast<byte*>(FUNCTION_ADDR(LogGeneratedCodeCoverage)); \
1074     masm->pushfd();                                                       \
1075     masm->pushad();                                                       \
1076     masm->push(Immediate(reinterpret_cast<int>(&__FILE_LINE__)));         \
1077     masm->call(ia32_coverage_function, RelocInfo::RUNTIME_ENTRY);         \
1078     masm->pop(eax);                                                       \
1079     masm->popad();                                                        \
1080     masm->popfd();                                                        \
1081   }                                                                       \
1082   masm->
1083 #else
1084 #define ACCESS_MASM(masm) masm->
1085 #endif
1086
1087
1088 } }  // namespace v8::internal
1089
1090 #endif  // V8_X87_MACRO_ASSEMBLER_X87_H_