Databricks のサンプルデータセットの１つである TPC-H のデータからSpark データフレームを作成する方法 - Qiita

filepath = "dbfs:/databricks-datasets/tpch/data-001/customer/customer.tbl" schema = """ c_custkey long, c_name string, c_address string, c_nationkey long, c_phone string, c_acctbal decimal(12, 2), c_mktsegment string, c_comment string """ df = (spark .read .format("csv") .schema(schema) .option("sep", "|") .load(filepath) ) filepath = "dbfs:/databricks-datasets/tpch/data-001/lineitem/lineitem.tbl"