dali/internal/imaging/common/loader-png.cpp

   1 /*
   2  * Copyright (c) 2017 Samsung Electronics Co., Ltd.
   3  *
   4  * Licensed under the Apache License, Version 2.0 (the "License");
   5  * you may not use this file except in compliance with the License.
   6  * You may obtain a copy of the License at
   7  *
   8  * http://www.apache.org/licenses/LICENSE-2.0
   9  *
  10  * Unless required by applicable law or agreed to in writing, software
  11  * distributed under the License is distributed on an "AS IS" BASIS,
  12  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  13  * See the License for the specific language governing permissions and
  14  * limitations under the License.
  15  *
  16  */
  17
  18 #include <dali/internal/imaging/common/loader-png.h>
  19
  20 #include <cstring>
  21
  22 #include <zlib.h>
  23 #include <png.h>
  24
  25 #include <dali/integration-api/debug.h>
  26 #include <dali/public-api/images/image.h>
  27 #include <dali/internal/legacy/tizen/platform-capabilities.h>
  28 #include <dali/devel-api/adaptor-framework/pixel-buffer.h>
  29
  30 namespace Dali
  31 {
  32 namespace TizenPlatform
  33 {
  34
  35 namespace
  36 {
  37
  38 // simple class to enforce clean-up of PNG structures
  39 struct auto_png
  40 {
  41   auto_png(png_structp& _png, png_infop& _info)
  42   : png(_png),
  43     info(_info)
  44   {
  45   }
  46
  47   ~auto_png()
  48   {
  49     if(NULL != png)
  50     {
  51       png_destroy_read_struct(&png, &info, NULL);
  52     }
  53   }
  54
  55   png_structp& png;
  56   png_infop& info;
  57 }; // struct auto_png;
  58
  59 bool LoadPngHeader(FILE *fp, unsigned int &width, unsigned int &height, png_structp &png, png_infop &info)
  60 {
  61   png_byte header[8] = { 0 };
  62
  63   // Check header to see if it is a PNG file
  64   size_t size = fread(header, 1, 8, fp);
  65   if(size != 8)
  66   {
  67     return false;
  68   }
  69
  70   if(png_sig_cmp(header, 0, 8))
  71   {
  72     return false;
  73   }
  74
  75   png = png_create_read_struct(PNG_LIBPNG_VER_STRING, NULL, NULL, NULL);
  76
  77   if(!png)
  78   {
  79     DALI_LOG_WARNING("Can't create PNG read structure\n");
  80     return false;
  81   }
  82
  83   info = png_create_info_struct(png);
  84   if(!info)
  85   {
  86     DALI_LOG_WARNING("png_create_info_struct failed\n");
  87     return false;
  88   }
  89
  90   png_set_expand(png);
  91
  92   if(setjmp(png_jmpbuf(png)))
  93   {
  94     DALI_LOG_WARNING("error during png_init_io\n");
  95     return false;
  96   }
  97
  98   png_init_io(png, fp);
  99   png_set_sig_bytes(png, 8);
 100
 101   // read image info
 102   png_read_info(png, info);
 103
 104   // dimensions
 105   width = png_get_image_width(png, info);
 106   height = png_get_image_height(png, info);
 107
 108   return true;
 109 }
 110
 111 } // namespace - anonymous
 112
 113 bool LoadPngHeader( const Dali::ImageLoader::Input& input, unsigned int& width, unsigned int& height )
 114 {
 115   png_structp png = NULL;
 116   png_infop info = NULL;
 117   auto_png autoPng(png, info);
 118
 119   bool success = LoadPngHeader( input.file, width, height, png, info );
 120
 121   return success;
 122 }
 123
 124 bool LoadBitmapFromPng( const Dali::ImageLoader::Input& input, Dali::Devel::PixelBuffer& bitmap )
 125 {
 126   png_structp png = NULL;
 127   png_infop info = NULL;
 128   auto_png autoPng(png, info);
 129
 130   /// @todo: consider parameters
 131   unsigned int y;
 132   unsigned int width, height;
 133   png_bytep *rows;
 134   unsigned int bpp = 0; // bytes per pixel
 135   bool valid = false;
 136
 137   // Load info from the header
 138   if( !LoadPngHeader( input.file, width, height, png, info ) )
 139   {
 140     return false;
 141   }
 142
 143   Pixel::Format pixelFormat = Pixel::RGBA8888;
 144
 145   // decide pixel format
 146   unsigned int colordepth = png_get_bit_depth(png, info);
 147
 148   // Ask PNGLib to convert high precision images into something we can use:
 149   if (colordepth == 16)
 150   {
 151     png_set_strip_16(png);
 152     colordepth = 8;
 153   }
 154
 155   png_byte colortype = png_get_color_type(png, info);
 156
 157   if( colortype == PNG_COLOR_TYPE_GRAY ||
 158       colortype == PNG_COLOR_TYPE_GRAY_ALPHA )
 159   {
 160     if( colortype == PNG_COLOR_TYPE_GRAY )
 161     {
 162       pixelFormat = Pixel::L8;
 163       if( png_get_valid(png, info, PNG_INFO_tRNS) )
 164       {
 165         colortype = PNG_COLOR_TYPE_GRAY_ALPHA;
 166         /* expand transparency entry -> alpha channel if present */
 167         png_set_tRNS_to_alpha(png);
 168         pixelFormat = Pixel::LA88;
 169       }
 170     }
 171     else
 172     {
 173       pixelFormat = Pixel::LA88;
 174     }
 175
 176     if( colordepth < 8 )
 177     {
 178       /* expand gray (w/reduced bits) -> 8-bit RGB if necessary */
 179       png_set_expand_gray_1_2_4_to_8(png);
 180       /* pack all pixels to byte boundaries */
 181       png_set_packing(png);
 182     }
 183     valid = true;
 184   }
 185   else if(colortype == PNG_COLOR_TYPE_RGB )
 186   {
 187     switch(colordepth)
 188     {
 189       case 8:
 190       {
 191         pixelFormat = Pixel::RGB888;
 192         valid = true;
 193         break;
 194       }
 195       case 5:      /// @todo is this correct for RGB16 5-6-5 ?
 196       {
 197         pixelFormat = Pixel::RGB565;
 198         valid = true;
 199         break;
 200       }
 201       default:
 202       {
 203         break;
 204       }
 205     }
 206   }
 207   else if(colortype == PNG_COLOR_TYPE_RGBA)
 208   {
 209     switch(colordepth)
 210     {
 211       case 8:
 212       {
 213         pixelFormat = Pixel::RGBA8888;
 214         valid = true;
 215         break;
 216       }
 217       default:
 218       {
 219         break;
 220       }
 221     }
 222   }
 223   else if(colortype == PNG_COLOR_TYPE_PALETTE)
 224   {
 225     switch(colordepth)
 226     {
 227       case 1:
 228       {
 229         pixelFormat = Pixel::LA88;
 230         valid = true;
 231         break;
 232       }
 233
 234       case 2:
 235       case 4:
 236       case 8:
 237       {
 238         /* Expand paletted or RGB images with transparency to full alpha channels
 239          * so the data will be available as RGBA quartets. PNG_INFO_tRNS = 0x10
 240          */
 241         if(png_get_valid(png, info, PNG_INFO_tRNS) == 0x10)
 242         {
 243           pixelFormat = Pixel::RGBA8888;
 244           valid = true;
 245         }
 246         else
 247         {
 248           pixelFormat = Pixel::RGB888;
 249           png_set_packing(png);
 250           png_set_packswap(png);
 251           png_set_palette_to_rgb(png);
 252           valid = true;
 253         }
 254         break;
 255       }
 256       default:
 257       {
 258         break;
 259       }
 260     }
 261   }
 262
 263   if( !valid )
 264   {
 265     DALI_LOG_WARNING( "Unsupported png format\n" );
 266     return false;
 267   }
 268
 269   // bytes per pixel
 270   bpp = Pixel::GetBytesPerPixel(pixelFormat);
 271
 272   png_read_update_info(png, info);
 273
 274   if(setjmp(png_jmpbuf(png)))
 275   {
 276     DALI_LOG_WARNING("error during png_read_image\n");
 277     return false;
 278   }
 279
 280   unsigned int rowBytes = png_get_rowbytes(png, info);
 281
 282   unsigned int bufferWidth   = GetTextureDimension(width);
 283   unsigned int bufferHeight  = GetTextureDimension(height);
 284   unsigned int stride        = bufferWidth*bpp;
 285
 286   // not sure if this ever happens
 287   if( rowBytes > stride )
 288   {
 289     stride = GetTextureDimension(rowBytes);
 290
 291     bpp = stride / bufferWidth;
 292     switch(bpp)
 293     {
 294       case 3:
 295         pixelFormat = Pixel::RGB888;
 296         break;
 297       case 4:
 298         pixelFormat = Pixel::RGBA8888;
 299         break;
 300       default:
 301         break;
 302     }
 303
 304   }
 305
 306   // decode the whole image into bitmap buffer
 307   auto pixels = (bitmap = Dali::Devel::PixelBuffer::New(bufferWidth, bufferHeight, pixelFormat)).GetBuffer();
 308
 309   DALI_ASSERT_DEBUG(pixels);
 310   rows = reinterpret_cast< png_bytep* >( malloc(sizeof(png_bytep) * height) );
 311   for(y=0; y<height; y++)
 312   {
 313     rows[y] = pixels + y * stride;
 314   }
 315
 316   // decode image
 317   png_read_image(png, rows);
 318
 319   free(rows);
 320
 321   return true;
 322 }
 323
 324 // simple class to enforce clean-up of PNG structures
 325 struct AutoPngWrite
 326 {
 327   AutoPngWrite(png_structp& _png, png_infop& _info)
 328   : png(_png),
 329     info(_info)
 330   {
 331   }
 332
 333   ~AutoPngWrite()
 334   {
 335     if(NULL != png)
 336     {
 337       png_destroy_write_struct(&png, &info);
 338     }
 339   }
 340
 341   png_structp& png;
 342   png_infop& info;
 343 }; // struct AutoPngWrite;
 344
 345 namespace
 346 {
 347   // Custom libpng write callbacks that buffer to a vector instead of a file:
 348
 349   /**
 350    * extern "C" linkage is used because this is a callback that we pass to a C
 351    * library which is part of the underlying platform and so potentially compiled
 352    * as C rather than C++.
 353    * @see http://stackoverflow.com/a/2594222
 354    * */
 355   extern "C" void WriteData(png_structp png_ptr, png_bytep data, png_size_t length)
 356   {
 357     DALI_ASSERT_DEBUG(png_ptr && data);
 358     if(!png_ptr || !data)
 359     {
 360       return;
 361     }
 362     // Make sure we don't try to propagate a C++ exception up the call stack of a pure C library:
 363     try
 364     {
 365       // Recover our buffer for writing into:
 366       Vector<unsigned char>* const encoded_img = static_cast< Vector<unsigned char>* >( png_get_io_ptr(png_ptr) );
 367       if(encoded_img)
 368       {
 369         const Vector<unsigned char>::SizeType bufferSize = encoded_img->Count();
 370         encoded_img->Resize( bufferSize + length ); //< Can throw OOM.
 371         unsigned char* const bufferBack = encoded_img->Begin() + bufferSize;
 372         memcpy(bufferBack, data, length);
 373       }
 374       else
 375       {
 376         DALI_LOG_ERROR("PNG buffer for write to memory was passed from libpng as null.\n");
 377       }
 378     }
 379     catch(...)
 380     {
 381       DALI_LOG_ERROR("C++ Exception caught\n");
 382     }
 383   }
 384
 385   /** Override the flush with a NOP to prevent libpng trying cstdlib file io. */
 386   extern "C" void FlushData(png_structp png_ptr)
 387   {
 388 #ifdef DEBUG_ENABLED
 389     Debug::LogMessage(Debug::DebugInfo, "PNG Flush");
 390 #endif // DEBUG_ENABLED
 391   }
 392 }
 393
 394 /**
 395  * Potential improvements:
 396  * 1. Detect <= 256 colours and write in palette mode.
 397  * 2. Detect grayscale (will early-out quickly for colour images).
 398  * 3. Store colour space / gamma correction info related to the device screen?
 399  *    http://www.libpng.org/pub/png/book/chapter10.html
 400  * 4. Refactor with callers to write straight through to disk and save keeping a big buffer around.
 401  * 5. Prealloc buffer (reserve) to input size / <A number greater than 2 (expexcted few realloc but without using lots of memory) | 1 (expected zero reallocs but using a lot of memory)>.
 402  * 6. Set the modification time with png_set_tIME(png_ptr, info_ptr, mod_time);
 403  * 7. If caller asks for no compression, bypass libpng and blat raw data to
 404  *    disk, topped and tailed with header/tail blocks.
 405  */
 406 bool EncodeToPng( const unsigned char* const pixelBuffer, Vector<unsigned char>& encodedPixels, std::size_t width, std::size_t height, Pixel::Format pixelFormat )
 407 {
 408   // Translate pixel format enum:
 409   int pngPixelFormat = -1;
 410   unsigned pixelBytes = 0;
 411   bool rgbaOrder = true;
 412
 413   // Account for RGB versus BGR and presence of alpha in input pixels:
 414   switch( pixelFormat )
 415   {
 416     case Pixel::RGB888:
 417     {
 418       pngPixelFormat = PNG_COLOR_TYPE_RGB;
 419       pixelBytes = 3;
 420       break;
 421     }
 422     case Pixel::BGRA8888:
 423     {
 424       rgbaOrder = false;
 425       ///! No break: fall through:
 426     }
 427     case Pixel::RGBA8888:
 428     {
 429       pngPixelFormat = PNG_COLOR_TYPE_RGB_ALPHA;
 430       pixelBytes = 4;
 431       break;
 432     }
 433     default:
 434     {
 435       DALI_LOG_ERROR( "Unsupported pixel format for encoding to PNG.\n" );
 436       return false;
 437     }
 438   }
 439
 440   const int interlace = PNG_INTERLACE_NONE;
 441
 442   png_structp png_ptr = png_create_write_struct(PNG_LIBPNG_VER_STRING, NULL, NULL, NULL);
 443   if(!png_ptr)
 444   {
 445     return false;
 446   }
 447   /* Allocate/initialize the image information data.  REQUIRED */
 448   png_infop info_ptr = png_create_info_struct( png_ptr );
 449   if(!info_ptr)
 450   {
 451     png_destroy_write_struct(&png_ptr, NULL);
 452     return false;
 453   }
 454
 455   /* Set error handling.  REQUIRED if you aren't supplying your own
 456    * error handling functions in the png_create_write_struct() call.
 457    */
 458   if(setjmp(png_jmpbuf(png_ptr)))
 459   {
 460     png_destroy_write_struct(&png_ptr, &info_ptr);
 461     return false;
 462   }
 463
 464   // Since we are going to write to memory instead of a file, lets provide
 465   // libpng with a custom write function and ask it to pass back our
 466   // Vector buffer each time it calls back to flush data to "file":
 467   png_set_write_fn(png_ptr, &encodedPixels, WriteData, FlushData);
 468
 469   // png_set_compression_level( png_ptr, Z_BEST_COMPRESSION);
 470   png_set_compression_level(png_ptr, Z_BEST_SPEED);
 471   // png_set_compression_level( png_ptr, Z_NO_COMPRESSION); //! We could just generate png directly without libpng in this case.
 472
 473   // Explicitly limit the number of filters used per scanline to speed us up:
 474   // png_set_filter(png_ptr, 0, PNG_FILTER_NONE); ///!ToDo: Try this once baseline profile is in place.
 475        // PNG_FILTER_SUB   |
 476        // PNG_FILTER_UP    |
 477        // PNG_FILTER_AVE   |
 478        // PNG_FILTER_PAETH |
 479        // PNG_ALL_FILTERS);
 480   // Play with Zlib parameters in optimisation phase:
 481     // png_set_compression_mem_level(png_ptr, 8);
 482     // png_set_compression_strategy(png_ptr,
 483         // Z_DEFAULT_STRATEGY);
 484     // png_set_compression_window_bits(png_ptr, 15);
 485     // png_set_compression_method(png_ptr, 8);
 486     // png_set_compression_buffer_size(png_ptr, 8192)
 487
 488   // Let lib_png know if the pixel bytes are in BGR(A) order:
 489   if(!rgbaOrder)
 490   {
 491     png_set_bgr( png_ptr );
 492   }
 493
 494   // Set the image information:
 495   png_set_IHDR(png_ptr, info_ptr, width, height, 8,
 496      pngPixelFormat, interlace,
 497      PNG_COMPRESSION_TYPE_BASE, PNG_FILTER_TYPE_BASE);
 498
 499   // Start to output the PNG data to our buffer:
 500   png_write_info(png_ptr, info_ptr);
 501
 502   // Walk the rows:
 503   const unsigned row_step = width * pixelBytes;
 504   png_bytep row_ptr = const_cast<png_bytep>(pixelBuffer);
 505   const png_bytep row_end = row_ptr + height * row_step;
 506   for(; row_ptr < row_end; row_ptr += row_step)
 507   {
 508     png_write_row(png_ptr, row_ptr);
 509   }
 510
 511   /* It is REQUIRED to call this to finish writing the rest of the file */
 512   png_write_end(png_ptr, info_ptr);
 513   /* Clean up after the write, and free any memory allocated */
 514   png_destroy_write_struct(&png_ptr, &info_ptr);
 515   return true;
 516 }
 517
 518 } // namespace TizenPlatform
 519
 520 } // namespace Dali