當前位置: 首頁>>代碼示例>>Python>>正文


Python StringIndexer.setHandleInvalid方法代碼示例

本文整理匯總了Python中pyspark.ml.feature.StringIndexer.setHandleInvalid方法的典型用法代碼示例。如果您正苦於以下問題:Python StringIndexer.setHandleInvalid方法的具體用法?Python StringIndexer.setHandleInvalid怎麽用?Python StringIndexer.setHandleInvalid使用的例子?那麽, 這裏精選的方法代碼示例或許可以為您提供幫助。您也可以進一步了解該方法所在pyspark.ml.feature.StringIndexer的用法示例。


在下文中一共展示了StringIndexer.setHandleInvalid方法的1個代碼示例,這些例子默認根據受歡迎程度排序。您可以為喜歡或者感覺有用的代碼點讚,您的評價將有助於係統推薦出更棒的Python代碼示例。

示例1: test_string_indexer_handle_invalid

# 需要導入模塊: from pyspark.ml.feature import StringIndexer [as 別名]
# 或者: from pyspark.ml.feature.StringIndexer import setHandleInvalid [as 別名]
    def test_string_indexer_handle_invalid(self):
        df = self.spark.createDataFrame([
            (0, "a"),
            (1, "d"),
            (2, None)], ["id", "label"])

        si1 = StringIndexer(inputCol="label", outputCol="indexed", handleInvalid="keep",
                            stringOrderType="alphabetAsc")
        model1 = si1.fit(df)
        td1 = model1.transform(df)
        actual1 = td1.select("id", "indexed").collect()
        expected1 = [Row(id=0, indexed=0.0), Row(id=1, indexed=1.0), Row(id=2, indexed=2.0)]
        self.assertEqual(actual1, expected1)

        si2 = si1.setHandleInvalid("skip")
        model2 = si2.fit(df)
        td2 = model2.transform(df)
        actual2 = td2.select("id", "indexed").collect()
        expected2 = [Row(id=0, indexed=0.0), Row(id=1, indexed=1.0)]
        self.assertEqual(actual2, expected2)
開發者ID:Brett-A,項目名稱:spark,代碼行數:22,代碼來源:test_feature.py


注:本文中的pyspark.ml.feature.StringIndexer.setHandleInvalid方法示例由純淨天空整理自Github/MSDocs等開源代碼及文檔管理平台,相關代碼片段篩選自各路編程大神貢獻的開源項目,源碼版權歸原作者所有,傳播和使用請參考對應項目的License;未經允許,請勿轉載。