Language คอลัมน์ต้อง dataframe เป็นภาษาไพธออลสปาร์ค

dataframe คอลัมน์ language ตัวกระจายคำไฟ language

import org.apache.spark.sql.functions.{lit, schema_of_json, from_json}
import collection.JavaConverters._

val schema = schema_of_json(lit(df.select($"jsonData").as[String].first))
df.withColumn("jsonData", from_json($"jsonData", schema, Map[String, String]().asJava))