Python PyTorch SparseArch用法及代碼示例

本文簡要介紹python語言中 torchrec.models.deepfm.SparseArch 的用法。

用法:

class torchrec.models.deepfm.SparseArch(embedding_bag_collection: torchrec.modules.embedding_modules.EmbeddingBagCollection)

參數：

embedding_bag_collection(torchrec.modules.embedding_modules.EmbeddingBagCollection) -表示池化嵌入的集合

基礎：torch.nn.modules.module.Module

處理DeepFMNN模型的稀疏特征。對所有 EmbeddingBag 進行嵌入查找並嵌入每個集合的特征。

例子：

eb1_config = EmbeddingBagConfig(
    name="t1", embedding_dim=3, num_embeddings=10, feature_names=["f1"]
)
eb2_config = EmbeddingBagConfig(
    name="t2", embedding_dim=4, num_embeddings=10, feature_names=["f2"]
)
ebc_config = EmbeddingBagCollectionConfig(tables=[eb1_config, eb2_config])

ebc = EmbeddingBagCollection(config=ebc_config)

#     0       1        2  <-- batch
# 0   [0,1] None    [2]
# 1   [3]    [4]    [5,6,7]
# ^
# feature
features = KeyedJaggedTensor.from_offsets_sync(
    keys=["f1", "f2"],
    values=torch.tensor([0, 1, 2, 3, 4, 5, 6, 7]),
    offsets=torch.tensor([0, 2, 2, 3, 4, 5, 8]),
)

sparse_arch(features)