学习 Spark 2(四):Spark 读写 Hive

启用 Hive 在使用 Builder 模式 SparkSession.Builder 创建 SparkSession 实例,通过调用 enableHiveSupport() 即可启用 Hive: SparkSession.builder() .master("yarn") .appName(appName) .enableHiveSupport() .getOrCreate() 在使用 Oozie 运行 Spark »

Spark SQL 通过 JDBC 连接 SQL 数据库

连接配置 读数据: val df = spark.read .format("jdbc") .option("url", url) .option("username", username) .option("password", password) .option("driver", "com.mysql.jdbc.Driver") .option("dbtable", table) »

iTerm2 配置 SSH 登录 Linux 服务器

准备脚本 首先,安装依赖的软件包。使用 HomeBrew 安装 expect: brew install expect expect 命令通常用于运行需要交互的程序,更多:https://linux.die.net/man/1/expect 然后,准备 SSH 登录脚本: #!/usr/bin/ »

学习 Cassandra(五):踩坑

问题一:读超时 Cassandra Driver 抛异常 Cassandra timeout during read query at consistency ONE (1 responses were required but only 0 replica responded) 查看 Cassandra 日志,看到 »

《一本书读懂财报》书摘

资产负债表——企业的单反相机 资产负债表 资产 负债 流动资产 流动负债 货币资金 短期借款 应收账款 应付账款 其它应收款 其它应付款 预付账款 预收账款 存货 其他应付款 待摊费用 其它流动资产 非流动资产 非流动负债 长期投资 长期借款 固定资产 应付债券 无形资产及其他非流动资产 »