src/gallium/drivers/r300/r300_context.h

   1 /*
   2  * Copyright 2008 Corbin Simpson <MostAwesomeDude@gmail.com>
   3  *
   4  * Permission is hereby granted, free of charge, to any person obtaining a
   5  * copy of this software and associated documentation files (the "Software"),
   6  * to deal in the Software without restriction, including without limitation
   7  * on the rights to use, copy, modify, merge, publish, distribute, sub
   8  * license, and/or sell copies of the Software, and to permit persons to whom
   9  * the Software is furnished to do so, subject to the following conditions:
  10  *
  11  * The above copyright notice and this permission notice (including the next
  12  * paragraph) shall be included in all copies or substantial portions of the
  13  * Software.
  14  *
  15  * THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
  16  * IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
  17  * FITNESS FOR A PARTICULAR PURPOSE AND NON-INFRINGEMENT. IN NO EVENT SHALL
  18  * THE AUTHOR(S) AND/OR THEIR SUPPLIERS BE LIABLE FOR ANY CLAIM,
  19  * DAMAGES OR OTHER LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR
  20  * OTHERWISE, ARISING FROM, OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE
  21  * USE OR OTHER DEALINGS IN THE SOFTWARE. */
  22
  23 #ifndef R300_CONTEXT_H
  24 #define R300_CONTEXT_H
  25
  26 #include "draw/draw_vertex.h"
  27
  28 #include "util/u_blitter.h"
  29
  30 #include "pipe/p_context.h"
  31 #include "util/u_inlines.h"
  32 #include "util/u_transfer.h"
  33
  34 #include "translate/translate_cache.h"
  35
  36 #include "r300_defines.h"
  37 #include "r300_screen.h"
  38
  39 struct u_upload_mgr;
  40 struct r300_context;
  41 struct r300_fragment_shader;
  42 struct r300_vertex_shader;
  43 struct r300_stencilref_context;
  44
  45 struct r300_atom {
  46     /* List pointers. */
  47     struct r300_atom *prev, *next;
  48     /* Name, for debugging. */
  49     const char* name;
  50     /* Stat counter. */
  51     uint64_t counter;
  52     /* Opaque state. */
  53     void* state;
  54     /* Emit the state to the context. */
  55     void (*emit)(struct r300_context*, unsigned, void*);
  56     /* Upper bound on number of dwords to emit. */
  57     unsigned size;
  58     /* Whether this atom should be emitted. */
  59     boolean dirty;
  60     /* Whether this atom may be emitted with state == NULL. */
  61     boolean allow_null_state;
  62 };
  63
  64 struct r300_aa_state {
  65     struct r300_surface *dest;
  66
  67     uint32_t aa_config;
  68     uint32_t aaresolve_ctl;
  69 };
  70
  71 struct r300_blend_state {
  72     uint32_t cb[8];
  73     uint32_t cb_no_readwrite[8];
  74 };
  75
  76 struct r300_blend_color_state {
  77     uint32_t cb[3];
  78 };
  79
  80 struct r300_clip_state {
  81     struct pipe_clip_state clip;
  82
  83     uint32_t cb[29];
  84 };
  85
  86 struct r300_dsa_state {
  87     struct pipe_depth_stencil_alpha_state dsa;
  88
  89     /* This is actually a command buffer with named dwords. */
  90     uint32_t cb_begin;
  91     uint32_t alpha_function;    /* R300_FG_ALPHA_FUNC: 0x4bd4 */
  92     uint32_t cb_reg_seq;
  93     uint32_t z_buffer_control;  /* R300_ZB_CNTL: 0x4f00 */
  94     uint32_t z_stencil_control; /* R300_ZB_ZSTENCILCNTL: 0x4f04 */
  95     uint32_t stencil_ref_mask;  /* R300_ZB_STENCILREFMASK: 0x4f08 */
  96     uint32_t cb_reg;
  97     uint32_t stencil_ref_bf;    /* R500_ZB_STENCILREFMASK_BF: 0x4fd4 */
  98
  99     /* The second command buffer disables zbuffer reads and writes. */
 100     uint32_t cb_no_readwrite[8];
 101
 102     /* Whether a two-sided stencil is enabled. */
 103     boolean two_sided;
 104     /* Whether a fallback should be used for a two-sided stencil ref value. */
 105     boolean two_sided_stencil_ref;
 106 };
 107
 108 struct r300_hyperz_state {
 109     int current_func; /* -1 after a clear before first op */
 110     int flush;
 111     /* This is actually a command buffer with named dwords. */
 112     uint32_t cb_flush_begin;
 113     uint32_t zb_zcache_ctlstat;     /* R300_ZB_CACHE_CNTL */
 114     uint32_t cb_begin;
 115     uint32_t zb_bw_cntl;            /* R300_ZB_BW_CNTL */
 116     uint32_t cb_reg1;
 117     uint32_t zb_depthclearvalue;    /* R300_ZB_DEPTHCLEARVALUE */
 118     uint32_t cb_reg2;
 119     uint32_t sc_hyperz;             /* R300_SC_HYPERZ */
 120     uint32_t cb_reg3;
 121     uint32_t gb_z_peq_config;       /* R300_GB_Z_PEQ_CONFIG: 0x4028 */
 122 };
 123
 124 struct r300_gpu_flush {
 125     uint32_t cb_flush_clean[6];
 126 };
 127
 128 #define RS_STATE_MAIN_SIZE 23
 129
 130 struct r300_rs_state {
 131     /* Original rasterizer state. */
 132     struct pipe_rasterizer_state rs;
 133     /* Draw-specific rasterizer state. */
 134     struct pipe_rasterizer_state rs_draw;
 135
 136     /* Command buffers. */
 137     uint32_t cb_main[RS_STATE_MAIN_SIZE];
 138     uint32_t cb_poly_offset_zb16[5];
 139     uint32_t cb_poly_offset_zb24[5];
 140
 141     /* The index to cb_main where the cull_mode register value resides. */
 142     unsigned cull_mode_index;
 143
 144     /* Whether polygon offset is enabled. */
 145     boolean polygon_offset_enable;
 146
 147     /* This is emitted in the draw function. */
 148     uint32_t color_control;         /* R300_GA_COLOR_CONTROL: 0x4278 */
 149 };
 150
 151 struct r300_rs_block {
 152     uint32_t vap_vtx_state_cntl;  /* R300_VAP_VTX_STATE_CNTL: 0x2180 */
 153     uint32_t vap_vsm_vtx_assm;    /* R300_VAP_VSM_VTX_ASSM: 0x2184 */
 154     uint32_t vap_out_vtx_fmt[2];  /* R300_VAP_OUTPUT_VTX_FMT_[0-1]: 0x2090 */
 155     uint32_t gb_enable;
 156
 157     uint32_t ip[8]; /* R300_RS_IP_[0-7], R500_RS_IP_[0-7] */
 158     uint32_t count; /* R300_RS_COUNT */
 159     uint32_t inst_count; /* R300_RS_INST_COUNT */
 160     uint32_t inst[8]; /* R300_RS_INST_[0-7] */
 161 };
 162
 163 struct r300_sampler_state {
 164     struct pipe_sampler_state state;
 165
 166     uint32_t filter0;      /* R300_TX_FILTER0: 0x4400 */
 167     uint32_t filter1;      /* R300_TX_FILTER1: 0x4440 */
 168
 169     /* Min/max LOD must be clamped to [0, last_level], thus
 170      * it's dependent on a currently bound texture */
 171     unsigned min_lod, max_lod;
 172 };
 173
 174 struct r300_texture_format_state {
 175     uint32_t format0; /* R300_TX_FORMAT0: 0x4480 */
 176     uint32_t format1; /* R300_TX_FORMAT1: 0x44c0 */
 177     uint32_t format2; /* R300_TX_FORMAT2: 0x4500 */
 178     uint32_t tile_config; /* R300_TX_OFFSET (subset thereof) */
 179 };
 180
 181 struct r300_sampler_view {
 182     struct pipe_sampler_view base;
 183
 184     /* Swizzles in the UTIL_FORMAT_SWIZZLE_* representation,
 185      * derived from base. */
 186     unsigned char swizzle[4];
 187
 188     /* Copy of r300_texture::texture_format_state with format-specific bits
 189      * added. */
 190     struct r300_texture_format_state format;
 191
 192     /* The texture cache region for this texture. */
 193     uint32_t texcache_region;
 194 };
 195
 196 struct r300_texture_fb_state {
 197     uint32_t pitch[R300_MAX_TEXTURE_LEVELS]; /* COLORPITCH or DEPTHPITCH. */
 198     uint32_t format; /* US_OUT_FMT or R300_ZB_FORMAT */
 199 };
 200
 201 struct r300_texture_sampler_state {
 202     struct r300_texture_format_state format;
 203     uint32_t filter0;      /* R300_TX_FILTER0: 0x4400 */
 204     uint32_t filter1;      /* R300_TX_FILTER1: 0x4440 */
 205     uint32_t border_color;  /* R300_TX_BORDER_COLOR: 0x45c0 */
 206 };
 207
 208 struct r300_textures_state {
 209     /* Textures. */
 210     struct r300_sampler_view *sampler_views[16];
 211     int sampler_view_count;
 212     /* Sampler states. */
 213     struct r300_sampler_state *sampler_states[16];
 214     int sampler_state_count;
 215
 216     /* This is the merge of the texture and sampler states. */
 217     unsigned count;
 218     uint32_t tx_enable;         /* R300_TX_ENABLE: 0x4101 */
 219     struct r300_texture_sampler_state regs[16];
 220 };
 221
 222 struct r300_vertex_stream_state {
 223     /* R300_VAP_PROG_STREAK_CNTL_[0-7] */
 224     uint32_t vap_prog_stream_cntl[8];
 225     /* R300_VAP_PROG_STREAK_CNTL_EXT_[0-7] */
 226     uint32_t vap_prog_stream_cntl_ext[8];
 227
 228     unsigned count;
 229 };
 230
 231 struct r300_invariant_state {
 232     uint32_t cb[20];
 233 };
 234
 235 struct r300_vap_invariant_state {
 236     uint32_t cb[9];
 237 };
 238
 239 struct r300_viewport_state {
 240     float xscale;         /* R300_VAP_VPORT_XSCALE:  0x2098 */
 241     float xoffset;        /* R300_VAP_VPORT_XOFFSET: 0x209c */
 242     float yscale;         /* R300_VAP_VPORT_YSCALE:  0x20a0 */
 243     float yoffset;        /* R300_VAP_VPORT_YOFFSET: 0x20a4 */
 244     float zscale;         /* R300_VAP_VPORT_ZSCALE:  0x20a8 */
 245     float zoffset;        /* R300_VAP_VPORT_ZOFFSET: 0x20ac */
 246     uint32_t vte_control; /* R300_VAP_VTE_CNTL:      0x20b0 */
 247 };
 248
 249 struct r300_ztop_state {
 250     uint32_t z_buffer_top;      /* R300_ZB_ZTOP: 0x4f14 */
 251 };
 252
 253 /* The next several objects are not pure Radeon state; they inherit from
 254  * various Gallium classes. */
 255
 256 struct r300_constant_buffer {
 257     /* Buffer of constants */
 258     uint32_t *ptr;
 259     /* Remapping table. */
 260     unsigned *remap_table;
 261 };
 262
 263 /* Query object.
 264  *
 265  * This is not a subclass of pipe_query because pipe_query is never
 266  * actually fully defined. So, rather than have it as a member, and do
 267  * subclass-style casting, we treat pipe_query as an opaque, and just
 268  * trust that our state tracker does not ever mess up query objects.
 269  */
 270 struct r300_query {
 271     /* The kind of query. Currently only OQ is supported. */
 272     unsigned type;
 273     /* The number of pipes where query results are stored. */
 274     unsigned num_pipes;
 275     /* How many results have been written, in dwords. It's incremented
 276      * after end_query and flush. */
 277     unsigned num_results;
 278     /* if we've flushed the query */
 279     boolean flushed;
 280     /* if begin has been emitted */
 281     boolean begin_emitted;
 282
 283     /* The buffer where query results are stored. */
 284     struct r300_winsys_buffer *buffer;
 285     /* The size of the buffer. */
 286     unsigned buffer_size;
 287     /* The domain of the buffer. */
 288     enum r300_buffer_domain domain;
 289
 290     /* Linked list members. */
 291     struct r300_query* prev;
 292     struct r300_query* next;
 293 };
 294
 295 /* Fence object.
 296  *
 297  * This is a fake fence. Instead of syncing with the fence, we sync
 298  * with the context, which is inefficient but compliant.
 299  *
 300  * This is not a subclass of pipe_fence_handle because pipe_fence_handle is
 301  * never actually fully defined. So, rather than have it as a member, and do
 302  * subclass-style casting, we treat pipe_fence_handle as an opaque, and just
 303  * trust that our state tracker does not ever mess up fence objects.
 304  */
 305 struct r300_fence {
 306     struct pipe_reference reference;
 307     struct r300_context *ctx;
 308     boolean signalled;
 309 };
 310
 311 struct r300_surface {
 312     struct pipe_surface base;
 313
 314     /* Winsys buffer backing the texture. */
 315     struct r300_winsys_buffer *buffer;
 316
 317     enum r300_buffer_domain domain;
 318
 319     uint32_t offset;    /* COLOROFFSET or DEPTHOFFSET. */
 320     uint32_t pitch;     /* COLORPITCH or DEPTHPITCH. */
 321     uint32_t format;    /* US_OUT_FMT or ZB_FORMAT. */
 322
 323     /* Parameters dedicated to the CBZB clear. */
 324     uint32_t cbzb_width;            /* Aligned width. */
 325     uint32_t cbzb_height;           /* Half of the height. */
 326     uint32_t cbzb_midpoint_offset;  /* DEPTHOFFSET. */
 327     uint32_t cbzb_pitch;            /* DEPTHPITCH. */
 328     uint32_t cbzb_format;           /* ZB_FORMAT. */
 329
 330     /* Whether the CBZB clear is allowed on the surface. */
 331     boolean cbzb_allowed;
 332
 333 };
 334
 335 struct r300_texture_desc {
 336     /* Parent class. */
 337     struct u_resource b;
 338
 339     /* Width, height, and depth.
 340      * Most of the time, these are equal to pipe_texture::width0, height0,
 341      * and depth0. However, NPOT 3D textures must have dimensions aligned
 342      * to POT, and this is the only case when these variables differ from
 343      * pipe_texture. */
 344     unsigned width0, height0, depth0;
 345
 346     /* Buffer tiling.
 347      * Macrotiling is specified per-level because small mipmaps cannot
 348      * be macrotiled. */
 349     enum r300_buffer_tiling microtile;
 350     enum r300_buffer_tiling macrotile[R300_MAX_TEXTURE_LEVELS];
 351
 352     /* Offsets into the buffer. */
 353     unsigned offset_in_bytes[R300_MAX_TEXTURE_LEVELS];
 354
 355     /* Strides for each mip-level. */
 356     unsigned stride_in_pixels[R300_MAX_TEXTURE_LEVELS];
 357     unsigned stride_in_bytes[R300_MAX_TEXTURE_LEVELS];
 358
 359     /* Size of one zslice or face or 2D image based on the texture target. */
 360     unsigned layer_size_in_bytes[R300_MAX_TEXTURE_LEVELS];
 361
 362     /* Total size of this texture, in bytes,
 363      * derived from the texture properties. */
 364     unsigned size_in_bytes;
 365
 366     /* Total size of the buffer backing this texture, in bytes.
 367      * It must be >= size. */
 368     unsigned buffer_size_in_bytes;
 369
 370     /**
 371      * If non-zero, override the natural texture layout with
 372      * a custom stride (in bytes).
 373      *
 374      * \note Mipmapping fails for textures with a non-natural layout!
 375      *
 376      * \sa r300_texture_get_stride
 377      */
 378     unsigned stride_in_bytes_override;
 379
 380     /* Whether this texture has non-power-of-two dimensions.
 381      * It can be either a regular texture or a rectangle one. */
 382     boolean is_npot;
 383
 384     /* This flag says that hardware must use the stride for addressing
 385      * instead of the width. */
 386     boolean uses_stride_addressing;
 387
 388     /* Whether CBZB fast color clear is allowed on the miplevel. */
 389     boolean cbzb_allowed[R300_MAX_TEXTURE_LEVELS];
 390 };
 391
 392 struct r300_texture {
 393     struct r300_texture_desc desc;
 394
 395     enum r300_buffer_domain domain;
 396
 397     /* Pipe buffer backing this texture. */
 398     struct r300_winsys_buffer *buffer;
 399
 400     /* Registers carrying texture format data. */
 401     /* Only format-independent bits should be filled in. */
 402     struct r300_texture_format_state tx_format;
 403     /* All bits should be filled in. */
 404     struct r300_texture_fb_state fb_state;
 405
 406     /* hyper-z memory allocs */
 407     struct mem_block *hiz_mem[R300_MAX_TEXTURE_LEVELS];
 408     struct mem_block *zmask_mem[R300_MAX_TEXTURE_LEVELS];
 409     boolean zmask_in_use[R300_MAX_TEXTURE_LEVELS];
 410     boolean hiz_in_use[R300_MAX_TEXTURE_LEVELS];
 411
 412     /* This is the level tiling flags were last time set for.
 413      * It's used to prevent redundant tiling-flags changes from happening.*/
 414     unsigned surface_level;
 415 };
 416
 417 struct r300_vertex_element_state {
 418     unsigned count;
 419     struct pipe_vertex_element velem[PIPE_MAX_ATTRIBS];
 420
 421     /* If (velem[i].src_format != hw_format[i]), the vertex buffer
 422      * referenced by this vertex element cannot be used for rendering and
 423      * its vertex data must be translated to hw_format[i]. */
 424     enum pipe_format hw_format[PIPE_MAX_ATTRIBS];
 425     unsigned hw_format_size[PIPE_MAX_ATTRIBS];
 426
 427     /* The size of the vertex, in dwords. */
 428     unsigned vertex_size_dwords;
 429
 430     /* This might mean two things:
 431      * - src_format != hw_format, as discussed above.
 432      * - src_offset % 4 != 0. */
 433     boolean incompatible_layout;
 434
 435     struct r300_vertex_stream_state vertex_stream;
 436 };
 437
 438 struct r300_translate_context {
 439     /* Translate cache for incompatible vertex offset/stride/format fallback. */
 440     struct translate_cache *translate_cache;
 441
 442     /* The vertex buffer slot containing the translated buffer. */
 443     unsigned vb_slot;
 444
 445     /* Saved and new vertex element state. */
 446     void *saved_velems, *new_velems;
 447 };
 448
 449 struct r300_context {
 450     /* Parent class */
 451     struct pipe_context context;
 452
 453     /* The interface to the windowing system, etc. */
 454     struct r300_winsys_screen *rws;
 455     /* The command stream. */
 456     struct r300_winsys_cs *cs;
 457     /* Screen. */
 458     struct r300_screen *screen;
 459
 460     /* Draw module. Used mostly for SW TCL. */
 461     struct draw_context* draw;
 462     /* Vertex buffer for SW TCL. */
 463     struct pipe_resource* vbo;
 464     /* Offset and size into the SW TCL VBO. */
 465     size_t draw_vbo_offset;
 466     size_t draw_vbo_size;
 467     /* Whether the VBO must not be flushed. */
 468     boolean draw_vbo_locked;
 469     boolean draw_first_emitted;
 470
 471     /* Accelerated blit support. */
 472     struct blitter_context* blitter;
 473     /* Stencil two-sided reference value fallback. */
 474     struct r300_stencilref_context *stencilref_fallback;
 475     /* For translating vertex buffers having incompatible vertex layout. */
 476     struct r300_translate_context tran;
 477
 478     /* The KIL opcode needs the first texture unit to be enabled
 479      * on r3xx-r4xx. In order to calm down the CS checker, we bind this
 480      * dummy texture there. */
 481     struct r300_sampler_view *texkill_sampler;
 482
 483     /* When no vertex buffer is set, this one is used instead to prevent
 484      * hardlocks. */
 485     struct pipe_resource *dummy_vb;
 486
 487     /* The currently active query. */
 488     struct r300_query *query_current;
 489     /* The saved query for blitter operations. */
 490     struct r300_query *blitter_saved_query;
 491     /* Query list. */
 492     struct r300_query query_list;
 493
 494     /* Various CSO state objects. */
 495     /* Beginning of atom list. */
 496     struct r300_atom atom_list;
 497     /* Anti-aliasing (MSAA) state. */
 498     struct r300_atom aa_state;
 499     /* Blend state. */
 500     struct r300_atom blend_state;
 501     /* Blend color state. */
 502     struct r300_atom blend_color_state;
 503     /* User clip planes. */
 504     struct r300_atom clip_state;
 505     /* Depth, stencil, and alpha state. */
 506     struct r300_atom dsa_state;
 507     /* Fragment shader. */
 508     struct r300_atom fs;
 509     /* Fragment shader RC_CONSTANT_STATE variables. */
 510     struct r300_atom fs_rc_constant_state;
 511     /* Fragment shader constant buffer. */
 512     struct r300_atom fs_constants;
 513     /* Framebuffer state. */
 514     struct r300_atom fb_state;
 515     /* Framebuffer state (pipelined regs). */
 516     struct r300_atom fb_state_pipelined;
 517     /* HyperZ state (various SC/ZB bits). */
 518     struct r300_atom hyperz_state;
 519     /* Occlusion query. */
 520     struct r300_atom query_start;
 521     /* Rasterizer state. */
 522     struct r300_atom rs_state;
 523     /* RS block state + VAP (vertex shader) output mapping state. */
 524     struct r300_atom rs_block_state;
 525     /* Scissor state. */
 526     struct r300_atom scissor_state;
 527     /* Textures state. */
 528     struct r300_atom textures_state;
 529     /* Vertex stream formatting state. */
 530     struct r300_atom vertex_stream_state;
 531     /* Vertex shader. */
 532     struct r300_atom vs_state;
 533     /* Vertex shader constant buffer. */
 534     struct r300_atom vs_constants;
 535     /* Viewport state. */
 536     struct r300_atom viewport_state;
 537     /* ZTOP state. */
 538     struct r300_atom ztop_state;
 539     /* PVS flush. */
 540     struct r300_atom pvs_flush;
 541     /* VAP invariant state. */
 542     struct r300_atom vap_invariant_state;
 543     /* Texture cache invalidate. */
 544     struct r300_atom texture_cache_inval;
 545     /* GPU flush. */
 546     struct r300_atom gpu_flush;
 547     /* HiZ clear */
 548     struct r300_atom hiz_clear;
 549     /* zmask clear */
 550     struct r300_atom zmask_clear;
 551
 552     /* Invariant state. This must be emitted to get the engine started. */
 553     struct r300_atom invariant_state;
 554
 555     /* Vertex buffers for Gallium. */
 556     struct pipe_vertex_buffer vertex_buffer[PIPE_MAX_ATTRIBS];
 557     int vertex_buffer_count;
 558     int vertex_buffer_max_index;
 559     /* Vertex elements for Gallium. */
 560     struct r300_vertex_element_state *velems;
 561     bool any_user_vbs;
 562
 563     struct pipe_index_buffer index_buffer;
 564
 565     /* Vertex info for Draw. */
 566     struct vertex_info vertex_info;
 567
 568     struct pipe_stencil_ref stencil_ref;
 569     struct pipe_viewport_state viewport;
 570
 571     /* Stream locations for SWTCL. */
 572     int stream_loc_notcl[16];
 573
 574     /* Flag indicating whether or not the HW is dirty. */
 575     uint32_t dirty_hw;
 576     /* Whether polygon offset is enabled. */
 577     boolean polygon_offset_enabled;
 578     /* Z buffer bit depth. */
 579     uint32_t zbuffer_bpp;
 580     /* Whether rendering is conditional and should be skipped. */
 581     boolean skip_rendering;
 582     /* Point sprites texcoord index,  1 bit per texcoord */
 583     int sprite_coord_enable;
 584     /* Whether two-sided color selection is enabled (AKA light_twoside). */
 585     boolean two_sided_color;
 586     /* Incompatible vertex buffer layout? (misaligned stride or buffer_offset) */
 587     boolean incompatible_vb_layout;
 588 #define R300_Z_COMPRESS_44 1
 589 #define RV350_Z_COMPRESS_88 2
 590     int z_compression;
 591     boolean cbzb_clear;
 592     boolean z_decomp_rd;
 593
 594     /* two mem block managers for hiz/zmask ram space */
 595     struct mem_block *hiz_mm;
 596     struct mem_block *zmask_mm;
 597
 598     /* upload managers */
 599     struct u_upload_mgr *upload_vb;
 600     struct u_upload_mgr *upload_ib;
 601
 602     struct util_slab_mempool pool_transfers;
 603
 604     /* Stat counter. */
 605     uint64_t flush_counter;
 606 };
 607
 608 /* Convenience cast wrappers. */
 609 static INLINE struct r300_query* r300_query(struct pipe_query* q)
 610 {
 611     return (struct r300_query*)q;
 612 }
 613
 614 static INLINE struct r300_surface* r300_surface(struct pipe_surface* surf)
 615 {
 616     return (struct r300_surface*)surf;
 617 }
 618
 619 static INLINE struct r300_texture* r300_texture(struct pipe_resource* tex)
 620 {
 621     return (struct r300_texture*)tex;
 622 }
 623
 624 static INLINE struct r300_context* r300_context(struct pipe_context* context)
 625 {
 626     return (struct r300_context*)context;
 627 }
 628
 629 static INLINE struct r300_fragment_shader *r300_fs(struct r300_context *r300)
 630 {
 631     return (struct r300_fragment_shader*)r300->fs.state;
 632 }
 633
 634 struct pipe_context* r300_create_context(struct pipe_screen* screen,
 635                                          void *priv);
 636
 637 void r300_finish(struct r300_context *r300);
 638 void r300_flush_cb(void *data);
 639
 640 /* Context initialization. */
 641 struct draw_stage* r300_draw_stage(struct r300_context* r300);
 642 void r300_init_blit_functions(struct r300_context *r300);
 643 void r300_init_flush_functions(struct r300_context* r300);
 644 void r300_init_query_functions(struct r300_context* r300);
 645 void r300_init_render_functions(struct r300_context *r300);
 646 void r300_init_state_functions(struct r300_context* r300);
 647 void r300_init_resource_functions(struct r300_context* r300);
 648
 649 /* r300_blit.c */
 650 void r300_flush_depth_stencil(struct pipe_context *pipe,
 651                               struct pipe_resource *dst,
 652                               struct pipe_subresource subdst,
 653                               unsigned zslice);
 654
 655 /* r300_query.c */
 656 void r300_resume_query(struct r300_context *r300,
 657                        struct r300_query *query);
 658 void r300_stop_query(struct r300_context *r300);
 659
 660 /* r300_render_translate.c */
 661 void r300_begin_vertex_translate(struct r300_context *r300);
 662 void r300_end_vertex_translate(struct r300_context *r300);
 663 void r300_translate_index_buffer(struct r300_context *r300,
 664                                  struct pipe_resource **index_buffer,
 665                                  unsigned *index_size, unsigned index_offset,
 666                                  unsigned *start, unsigned count);
 667
 668 /* r300_render_stencilref.c */
 669 void r300_plug_in_stencil_ref_fallback(struct r300_context *r300);
 670
 671 /* r300_render.c */
 672 void r300_draw_flush_vbuf(struct r300_context *r300);
 673 boolean r500_index_bias_supported(struct r300_context *r300);
 674 void r500_emit_index_bias(struct r300_context *r300, int index_bias);
 675
 676 /* r300_state.c */
 677 enum r300_fb_state_change {
 678     R300_CHANGED_FB_STATE = 0,
 679     R300_CHANGED_CBZB_FLAG,
 680     R300_CHANGED_ZCLEAR_FLAG
 681 };
 682
 683 void r300_mark_fb_state_dirty(struct r300_context *r300,
 684                               enum r300_fb_state_change change);
 685 void r300_mark_fs_code_dirty(struct r300_context *r300);
 686
 687 /* r300_debug.c */
 688 void r500_dump_rs_block(struct r300_rs_block *rs);
 689
 690
 691 static INLINE boolean CTX_DBG_ON(struct r300_context * ctx, unsigned flags)
 692 {
 693     return SCREEN_DBG_ON(ctx->screen, flags);
 694 }
 695
 696 static INLINE void CTX_DBG(struct r300_context * ctx, unsigned flags,
 697                        const char * fmt, ...)
 698 {
 699     if (CTX_DBG_ON(ctx, flags)) {
 700         va_list va;
 701         va_start(va, fmt);
 702         vfprintf(stderr, fmt, va);
 703         va_end(va);
 704     }
 705 }
 706
 707 #define DBG_ON  CTX_DBG_ON
 708 #define DBG     CTX_DBG
 709
 710 #endif /* R300_CONTEXT_H */