Merge pull request #18765 from Intel-tensorflow/agramesh/String_fix

[INTEL MKL] Fix compilation failure.

Merge pull request #17556 from kbsriram/strided-slice-grad

C++ gradient for StridedSlice

Merge pull request #15354 from facaiy/ENH/scatter_nd_supports_string

CPU: Support for DT_STRING type in ScatterNd

Merge pull request #18754 from ADiegoCAlonso/fix-numerical-warning

Fix numerical warning in the Iris example

Merge pull request #18728 from jerry4897/master

Typo?

Merge pull request #18698 from imsheridan/fix_api_rendering

Fix code block rendering in several api definitions

Merge pull request #18715 from yongtang/18712-tf.count_nonzero

Support string tensors for `tf.count_nonzero`

Merge pull request #18753 from ADiegoCAlonso/fix-tutorials-directories-are-not-python-packages

Fix tutorials directories are not Python packages

Merge pull request #18766 from hedenface/patch-1

update $ source spacing

Merge pull request #18778 from yongtang/04222018-squeeze_dims

Change from squeeze_dims to axis when calling tf.squeeze

Merge pull request #18760 from yongtang/04212018-gitignore

Update .gitignore for cmake generated files

Fix warnings in tf.contrib.distributions with squeeze_dims

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Fix warnings in tf.contrib.factorization

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Fix tf.contrib.layers warnings where squeeze_dims were used with tf.squeeze

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Fix squeeze_dims warnings in tf.contrib.learn

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Fix warnings in tf.contrib.tensor_forest

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Fix tf.contrib.timeseries warnings related to squeeze_dims

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Fix warnings in reduce_join_op_test.py

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Fix warning in tf.nn ops where squeeze_dims was used with tf.squeeze

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Fix warning in image related ops.

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Change from squeeze_dims to axis when calling tf.squeeze

The `squeeze_dims` in `tf.squeeze` has been deprecated in favor
of `axis` while many places still use `squeeze_dims`. That
generates lots of warnings.

This fix switches from `squeeze_dims` to `axis` to remove those warnings.

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Update docs to add note and examples for tf.count_nonzero with string

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Merge pull request #18694 from yongtang/18692-unstack-doc

Update docs for tf.unstack with respect to numpy compatibility

Merge pull request #18713 from ManHyuk/fix_typo

Fix typo

Merge pull request #18757 from foo0x29a/master

Fix typo

Merge pull request #18168 from imsheridan/fix_adam_math

Fix adam optimizer related math equation rendering format

update $ source spacing

When viewing install_linux, the spacing was off for 'Next Steps' section.

Changed calls to the depreacted StringPiece::contains with str_util::StrContains

Update .gitignore for cmake generated files

After running cmake on Linux with:
```
tensorflow/tools/ci_build/ci_build.sh CMAKE tensorflow/tools/ci_build/builds/cmake.sh
```

the following file is left:
```
ubuntu@ubuntu:~/tensorflow$ git status
On branch master
Your branch is up-to-date with 'origin/master'.
Untracked files:
  (use "git add <file>..." to include in what will be committed)

        api_init_files_list.txt

nothing added to commit but untracked files present (use "git add" to track)
ubuntu@ubuntu:~/tensorflow$
```

This fix updates the .gitignore file so that cmake generated files
is not added with git inadvertently.

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

fix typo

Specify float32 as float type instead of float64

Add __init__py

Fix casting in Keras estimator (#18104)

MKLDNN: conv2d forward DNN primitive reuse enhancement (#17943)

* Enable conv2d fwd primitive reuse

* coding style change based on suggestions from TF team

* minor code style fix

* refactor conv2d primitive reuse class and enhance key creation utility

* refactor by introducing ConvFwdDimensions structure

* change 'Execute' method to be a template one per PR review suggestion

* Per PR review suggestion, update DnnOp class to declared related  method as abstract ones

* refactor AddAsKey method - template for scalar value and remove Execute()which is not used yet

* rename padding_l/_r/pl/pr to padding_left or padding_right as recommended

* parameter and variable renaming - to make them more explicit

[INTEL MKLDNN]: Upgrade mkldnn version to v13 (#18508)

* upgrade mkldnn version to v13

* upgrade mkldnn version to v13 for all platforms

Merge pull request #18663 from imsheridan/fix_community_render

Fix incorrect format in community/documentation.md

Merge pull request #18714 from yifeif/branch_193610264

Branch 193610264

Update c_api_test.cc

Typo

Merge remote-tracking branch 'upstream/master' into ENH/scatter_nd_supports_string

TST: byte string for python3

Update doc string for tf.count_nonzero to add string type

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Fix unwanted typo caused protobuf load failure

Revert part of tensorflow/core/grappler/optimizers/meta_optimizer.cc
from #18479.

Add n-D test cases for better coverage

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Add test cases with axis and keepdims for tf.count_nonzero and string

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Add test case for tf.string support with tf.count_nonzero

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Support string tensors for tf.count_nonzero

This fix tries to address the issue raised in 18712 where
`tf.count_nonzero` does not support string tensors.

The implementation of `tf.count_nonzero` relies on `tf.not_equal`
which actually support string tensors. The reason the string
tensor does not work is because `tf.count_nonzero` created
a numpy type `zero` which uses `input_tensor.dtype.as_numpy_dtype()`.
The numpy type `zero` is then passed to `tf.not_equal (which converts
numpy `zero` into a tensor zero). However,
`input_tensor.dtype.as_numpy_dtype()` will converts tf.string to
numpy.object thus the exception.

But that is not necessary as `zero` could be created
with `tf.zeros` directly without back and forth conversion
to numpy.

This fix fixes the issue.

This fix fixes 18712.

Signed-off-by: Yong Tang <yong.tang.github@outlook.com>

Merge commit for internal changes

Support variable parameter structure in TPU distribution strategy.

TPUStrategy is added to a few more tests.

There appears to be an issue with the batch norm test in minimize_loss_test where the moving averages stay at 0.  I'm trying to resolve that separately as the next CL.

PiperOrigin-RevId: 193610264

Automated g4 rollback of changelist 193593761

PiperOrigin-RevId: 193609407

Internal change.

PiperOrigin-RevId: 193608140

[XLA] Fix a bug in the name_uniquer.

The problem happens because the name_uniquer stripped away the numeric suffix if it <=0. The solution is, if there was a numeric suffix, the result should also have a numeric suffix.

PiperOrigin-RevId: 193606838

Fix the error looking for libhdfs.so, Mac OS using libhdfs.dylib (#18486)

Fix incorrect math equation renderings broken by backtick (#18386)

* Fix incorrect `` typo format

* Remove breaking ``` for math equations

* fix one more typo

* fix more math equation broken ` typos in py

Optimize Graph function library.

PiperOrigin-RevId: 193605910

Respect any device filters in {Create,Delete}WorkerSessions().

This is another step towards enabling us to turn on explicit worker
sessions for all master sessions.

PiperOrigin-RevId: 193605565

internal
END_PUBLIC

BEGIN_PUBLIC
Automated g4 rollback of changelist 193571934

PiperOrigin-RevId: 193602050

Merge pull request #18707 from joel-shor/master

[tf.data] Allow `sample_from_datasets` to accept a tf.Dataset object …

Internal testing changes

PiperOrigin-RevId: 193601134

Update DecodeProtoOp so that it returns explicitly specified default values for missing fields.

PiperOrigin-RevId: 193600735

Add support for non-Tensor args in recompute_grad

Previously, the function decorated by recompute_grad had to have a signature that contained only positional arguments, and all those arguments had to be Tensors. Most "layers" users define however have non-Tensor arguments (for example, various hyperparameters) and often have keyword arguments as well. This change allows a user to use whatever function signature they wish while being explicit about which arguments are Tensors.

PiperOrigin-RevId: 193600682

fix typo

fix typo

Minor code refactoring.

PiperOrigin-RevId: 193600173

[XLA] De-unique_ptr-ify ShapedBuffer and ScopedShapedBuffer.

These are already notionally equivalent to T* and unique_ptr<T>, so
having a unique_ptr of a {Scoped,}ShapedBuffer is pretty redundant.

Also clean up the ScopedShapedBuffer API a bit.

PiperOrigin-RevId: 193599773

Removed deprecated methods from tensorflow::StringPiece.

This will allow tensorflow::StringPiece to be more easily replaced with absl::string_view as absl::string_view does not contain those methods.

PiperOrigin-RevId: 193599651

Merge pull request #18582 from ntenenz/master

Remove conditional scope logic now that "current_arg_scope" exists in contrib

Merge pull request #18686 from ManHyuk/fix_typo

fix typo

Merge pull request #18646 from joeyearsley/patch-4

Update debugger.md

Merge pull request #18616 from dcirne/batch_size

QueueOptions var data types to size_t

Run EvaluateNodes for ModelPruner test except for NoPruning.

PiperOrigin-RevId: 193596812

Merge pull request #18605 from imsheridan/improve_deprecated_argument

Improve deprecation assignment with deprecated_argument_lookup

[tf.data] Correct / clarify docstring for `weights` as a dataset.

This is a noop.

Improve error messages for LiteralTestUtil::Near.
Previously error messages for mismatches were difficult to read with much of the space taken by useless stack traces. This CL cleans up the message considerably and adds additional information including statistics about the values and mismatches.

PiperOrigin-RevId: 193594593

Cleaned up the handling of merge nodes

PiperOrigin-RevId: 193593810

Make xla/service:cpu_plugin depend on the StreamExecutor host platform.

PiperOrigin-RevId: 193593761

Automated g4 rollback of changelist 193564222

PiperOrigin-RevId: 193588935

Internal-only change.

PiperOrigin-RevId: 193588868

[tf.data] Allow `sample_from_datasets` to accept a tf.Dataset object for `weights`.

Tested:
bazel test :interleave_dataset_op_test

Simplifying cols_to_vars update

PiperOrigin-RevId: 193585237

Prevent a bool field from being accessed when uninitialized.

PiperOrigin-RevId: 193584746

Convert a local variable and mutex to a struct so GUARDED_BY annotation works correctly.

PiperOrigin-RevId: 193584438

Only generate floating points that are fractions like n / 256, since they are RGB pixels. This fixes RGBToHSVTest.testBatch on low-precision dtypes like bfloat16.

PiperOrigin-RevId: 193581652

disabling opensource testing for failing xla test

PiperOrigin-RevId: 193579805

Replaced calls to deprecated tensorflow::StringPiece methods with their
tensorflow::str_util equivalents.

This will allow the deprecated methods to be removed.

PiperOrigin-RevId: 193575992

The HLO element type converter must remove side effecting instructions like Rng

The CPU backend does not know how to lower bf16 typed RNG nodes so even unused
instances of these can't remain in the HLO IR.
HloComputation::ReplaceInstruction keeps these Rng nodes around since it doesn't
remove side effecting nodes.
PiperOrigin-RevId: 193575183

RecordReader: Simplify interface contract and implementation.

Prior to this change, RecordReader had the following contract:
- Records can be read in any order, EXCEPT if compression or buffering was
  enabled.
- If the underlying file is being concurrently written to
  then calls to ReadRecord() may fail (because of an incomplete
  record near the end of a file), but a retry may succeed (once the
  record is written), EXCEPT if compression or buffering is enabled
  (in which case the failure will be terminal).

  This "retry-may-succeed" behavior is relied upon by tensorboard
  (https://github.com/tensorflow/tensorboard/blob/1.7/tensorboard/backend/event_processing/event_file_loader.py#L55)
  where one process (typically the model training process) is writing
  tf.summary events to an event file and another process (tensorboard)
  is concurrently reading it.

With this change, the intent is to remove the EXCEPTions and have the
same behavior irrespective of compression/buffering.

Additionally, fix a memory leak when ZlibInputStream::Reset() is invoked.

PiperOrigin-RevId: 193571934

Make flat_transforms_to_matrices and matrices_to_flat_transforms public available.

PiperOrigin-RevId: 193571089

tools/lib_package: Fix typo in README

PiperOrigin-RevId: 193566850

Merge pull request #18701 from tensorflow/yifeif-patch-3

Fix doc gen error

Allow output has a different shape from input in the image.transform (#17011).

PiperOrigin-RevId: 193564222

Support various shapes in TPU DistributionStrategy.

PiperOrigin-RevId: 193563912

Collective Ops Part 4

Add Broadcaster.
A few minor adjustments to CollectiveParams and RMA.

This change is part of a series of changes introducing infrastructure
for collective ops and initial implementations of reduction and broadcast.

PiperOrigin-RevId: 193562391

Update adam.py

Update api_def_ResourceApplyAdam.pbtxt

Update api_def_ApplyAdam.pbtxt

Update adam.py

Make PmfToQuantizedCdf op to make adjustments if the sum of quantized pmf is
less than 2**precision.

Prior to the change, the op did nothing when the sum of quantized pmf was less
than 2**precision. While the produced CDF was valid for range coders,
adjustments to CDF could be made to achieve better compression rate.

PiperOrigin-RevId: 193558740

Fix bug in ring_reducer.cc abort handling.

PiperOrigin-RevId: 193557334

Merge pull request #18655 from langner/patch-1

Remove over-indentation