当前位置: 首页>>代码示例 >>用法及示例精选 >>正文


Python tf.estimator.DNNLinearCombinedEstimator用法及代码示例


用于 TensorFlow 线性和 DNN 的估计器加入了带有自定义头部的模型。

警告:不建议将估算器用于新代码。估算器运行tf.compat.v1.Session-style 代码更难正确编写,并且可能出现意外行为,尤其是与 TF 2 代码结合使用时。估算器确实属于我们的兼容性保证,但不会收到除安全漏洞以外的任何修复。见迁移指南详情。

继承自:EstimatorEstimator

用法

tf.estimator.DNNLinearCombinedEstimator(
    head, model_dir=None, linear_feature_columns=None,
    linear_optimizer='Ftrl', dnn_feature_columns=None,
    dnn_optimizer='Adagrad', dnn_hidden_units=None,
    dnn_activation_fn=tf.nn.relu, dnn_dropout=None, config=None, batch_norm=False,
    linear_sparse_combiner='sum'
)

参数

  • head 使用 tf.estimator.MultiLabelHead 等方法构造的 Head 实例。
  • model_dir 保存模型参数、图形等的目录。这也可用于将检查点从目录加载到估计器中,以继续训练先前保存的模型。
  • linear_feature_columns 一个包含模型线性部分使用的所有特征列的迭代。集合中的所有项目都必须是派生自 FeatureColumn 的类的实例。
  • linear_optimizer tf.keras.optimizers.* 的一个实例,用于将渐变应用于模型的线性部分。也可以是字符串('Adagrad'、'Adam'、'Ftrl'、'RMSProp'、'SGD' 之一)或可调用的。默认为 FTRL 优化器。
  • dnn_feature_columns 一个包含模型深层部分使用的所有特征列的迭代。集合中的所有项目都必须是派生自 FeatureColumn 的类的实例。
  • dnn_optimizer tf.keras.optimizers.* 的一个实例,用于将渐变应用到模型的深层。也可以是字符串('Adagrad'、'Adam'、'Ftrl'、'RMSProp'、'SGD' 之一)或可调用的。默认为 Adagrad 优化器。
  • dnn_hidden_units 每层隐藏单元的列表。所有层都是完全连接的。
  • dnn_activation_fn 应用于每一层的激活函数。如果没有,将使用 tf.nn.relu
  • dnn_dropout 当不是 None 时,我们将丢弃给定坐标的概率。
  • config RunConfig 对象来配置运行时设置。
  • batch_norm 是否在每个隐藏层之后使用批量归一化。
  • linear_sparse_combiner 如果分类列是多价的,则指定如何减少线性模型的字符串。 "mean"、"sqrtn" 和 "sum" 之一——这些是进行 example-level 归一化的有效不同方法,这对于 bag-of-words 函数很有用。有关详细信息,请参阅 tf.feature_column.linear_model

抛出

  • ValueError 如果 linear_feature_columns 和 dnn_features_columns 同时为空。

属性

  • config
  • export_savedmodel
  • model_dir
  • model_fn 返回绑定到 self.paramsmodel_fn
  • params

注意:此估计器也称为wide-n-deep。

例子:

numeric_feature = numeric_column(...)
categorical_column_a = categorical_column_with_hash_bucket(...)
categorical_column_b = categorical_column_with_hash_bucket(...)

categorical_feature_a_x_categorical_feature_b = crossed_column(...)
categorical_feature_a_emb = embedding_column(
    categorical_column=categorical_feature_a, ...)
categorical_feature_b_emb = embedding_column(
    categorical_column=categorical_feature_b, ...)

estimator = tf.estimator.DNNLinearCombinedEstimator(
    head=tf.estimator.MultiLabelHead(n_classes=3),
    # wide settings
    linear_feature_columns=[categorical_feature_a_x_categorical_feature_b],
    linear_optimizer=tf.keras.optimizers.Ftrl(...),
    # deep settings
    dnn_feature_columns=[
        categorical_feature_a_emb, categorical_feature_b_emb,
        numeric_feature],
    dnn_hidden_units=[1000, 500, 100],
    dnn_optimizer=tf.keras.optimizers.Adagrad(...))

# To apply L1 and L2 regularization, you can set dnn_optimizer to:
tf.compat.v1.train.ProximalAdagradOptimizer(
    learning_rate=0.1,
    l1_regularization_strength=0.001,
    l2_regularization_strength=0.001)
# To apply learning rate decay, you can set dnn_optimizer to a callable:
lambda:tf.keras.optimizers.Adam(
    learning_rate=tf.compat.v1.train.exponential_decay(
        learning_rate=0.1,
        global_step=tf.compat.v1.train.get_global_step(),
        decay_steps=10000,
        decay_rate=0.96)
# It is the same for linear_optimizer.

# Input builders
def input_fn_train:
  # Returns tf.data.Dataset of (x, y) tuple where y represents label's class
  # index.
  pass
def input_fn_eval:
  # Returns tf.data.Dataset of (x, y) tuple where y represents label's class
  # index.
  pass
def input_fn_predict:
  # Returns tf.data.Dataset of (x, None) tuple.
  pass
estimator.train(input_fn=input_fn_train, steps=100)
metrics = estimator.evaluate(input_fn=input_fn_eval, steps=10)
predictions = estimator.predict(input_fn=input_fn_predict)

trainevaluate 的输入应具有以下特征,否则会出现 KeyError

  • 对于每个columndnn_feature_columns+linear_feature_columns
    • 如果 columnCategoricalColumn ,则具有 key=column.name 的特征,其 valueSparseTensor
    • 如果 columnWeightedCategoricalColumn ,则有两个特征:第一个具有 key id 列名,第二个具有 key 权重列名。两个函数的 value 必须是 SparseTensor
    • 如果 columnDenseColumn ,则具有 key=column.name 的特征,其 valueTensor

损失是使用均方误差计算的。

相关用法


注:本文由纯净天空筛选整理自tensorflow.org大神的英文原创作品 tf.estimator.DNNLinearCombinedEstimator。非经特殊声明,原始代码版权归原作者所有,本译文未经允许或授权,请勿转载或复制。