对 Cloud Storage 进行排序

用于对 Cloud Storage 中的文本文件内容进行排序的 PySpark 作业示例

代码示例

在试用此示例之前，请按照使用客户端库的 Dataproc 快速入门中的 Python 设置说明进行操作。如需了解详情，请参阅 Dataproc Python API 参考文档。

要向 Dataproc 进行身份验证，请设置应用默认凭据。如需了解详情，请参阅为本地开发环境设置身份验证。

import pyspark

sc = pyspark.SparkContext()
rdd = sc.textFile("gs://path-to-your-GCS-file")
print(sorted(rdd.collect()))

如需搜索和过滤其他 Google Cloud 产品的代码示例，请参阅 Google Cloud 示例浏览器。

如未另行说明，那么本页面中的内容已根据知识共享署名 4.0 许可获得了许可，并且代码示例已根据 Apache 2.0 许可获得了许可。有关详情，请参阅 Google 开发者网站政策。Java 是 Oracle 和/或其关联公司的注册商标。