web-dev-qa-db-fra.com

Recherche de dictionnaire Tensorflow avec tenseur de chaîne

Existe-t-il un moyen d'effectuer une recherche de dictionnaire basée sur un tenseur de chaîne dans Tensorflow?

En simple Python, je ferais quelque chose comme

value = dictionary[key]

. Maintenant, j'aimerais faire la même chose lors de l'exécution de Tensorflow, lorsque j'ai mon key comme tenseur de chaîne. Quelque chose comme

value_tensor = tf.dict_lookup(string_tensor)

serait bien.

22
mackcmillion

Vous pourriez trouver tensorflow.contrib.lookup utile: https://github.com/tensorflow/tensorflow/blob/master/tensorflow/contrib/lookup/lookup_ops.py

https://www.tensorflow.org/api_docs/python/tf/contrib/lookup/HashTable

En particulier, vous pouvez faire:

table = tf.contrib.lookup.HashTable(
  tf.contrib.lookup.KeyValueTensorInitializer(keys, values), -1
)
out = table.lookup(input_tensor)
table.init.run()
print out.eval()
24
Saurfang

Si vous souhaitez l'exécuter avec le nouveau code TF 2.0 avec une exécution rapide activée par défaut. Voici l'extrait de code rapide.

import tensorflow as tf

# build a lookup table
table = tf.lookup.StaticHashTable(
    initializer=tf.lookup.KeyValueTensorInitializer(
        keys=tf.constant([0, 1, 2, 3]),
        values=tf.constant([10, 11, 12, 13]),
    ),
    default_value=tf.constant(-1),
    name="class_weight"
)

# now let us do a lookup
input_tensor = tf.constant([0, 0, 1, 1, 2, 2, 3, 3])
out = table.lookup(input_tensor)
print(out)

Production:

tf.Tensor([10 10 11 11 12 12 13 13], shape=(8,), dtype=int32)
4

tf.gather peut vous aider, mais il n'obtient que les valeurs de liste. Vous pouvez convertir le dictionnaire en listes de clés et de valeurs, puis appliquer tf.gather. Exemple:

# Your dict
dict_ = {'a': 1.12, 'b': 5.86, 'c': 68.}
# concrete query
query_list = ['a', 'c']

# unpack key and value lists
key, value = list(Zip(*dict_.items()))
# map query list to list -> [0, 2]
query_list = [i for i, s in enumerate(key) if s in query_list]

# query as tensor
query = tf.placeholder(tf.int32, shape=[None])
# convert value list to tensor
vl_tf = tf.constant(value)
# get value
my_vl = tf.gather(vl_tf, query)

# session run
sess = tf.InteractiveSession()
sess.run(my_vl, feed_dict={query:query_list})
0