Hive Tables
将HIVE_HOME/conf/hive-site.xml
文件copy到SPARK_HOME/conf/下
When not configured by the hive-site.xml, the context automatically creates metastore_db
and warehouse
in the current directory.
// sc is an existing SparkContext.
val sqlContext = new org.apache.spark.sql.hive.HiveContext(sc)
sqlContext.sql("CREATE TABLE IF NOT EXISTS src (key INT, value STRING)")
sqlContext.sql("LOAD DATA LOCAL INPATH 'examples/src/main/resources/kv1.txt' INTO TABLE src")
// Queries are expressed in HiveQL
sqlContext.sql("FROM src SELECT key, value").collect().foreach(println)
JDBC To Other Databases
加载mysql数据库:test,表:t_user_new返回DataFrame
查询数据:
Performance Tuning
spark 程序操作JDBC:
未完待续~~~
相关推荐
linux\windows中搭建spark环境使用的spark-1.3.1-bin-hadoop2.6.tgz安装包
robo3t-1.3.1-windows-x86_64-7419c406.zip
修改XStream源码,解决SAE不支持XStream的问题。
文件上传两个jar包commons-fileupload-1.3.1和commons-io-2.4,也是现在用的最多的两个jar包。
Linux 盘分区小助手 gparted-live-1.3.1-1-amd64.iso
开发工具 mybatis-spring-1.3.1开发工具 mybatis-spring-1.3.1开发工具 mybatis-spring-1.3.1开发工具 mybatis-spring-1.3.1开发工具 mybatis-spring-1.3.1开发工具 mybatis-spring-1.3.1开发工具 mybatis-spring-...
mongoDB数据库专属的可视化工具,直接下载安装,Windows系统使用,有需要下载即可。
spark-1.2.0-bin-hadoop2.4.tgz,用于hadoop2.4的spark1.2.0
赠送jar包:mapstruct-1.3.1.Final.jar; 赠送原API文档:mapstruct-1.3.1.Final-javadoc.jar; 赠送源代码:mapstruct-1.3.1.Final-sources.jar; 赠送Maven依赖信息文件:mapstruct-1.3.1.Final.pom; 包含翻译后...
资源分类:Python库 所属语言:Python 资源全名:mkl_fft-1.3.1-5-cp39-cp39-win_amd64.whl 资源来源:官方 安装方法:https://lanzao.blog.csdn.net/article/details/101784059
赠送jar包:mapstruct-1.3.1.Final.jar; 赠送原API文档:mapstruct-1.3.1.Final-javadoc.jar; 赠送源代码:mapstruct-1.3.1.Final-sources.jar; 赠送Maven依赖信息文件:mapstruct-1.3.1.Final.pom; 包含翻译后...
互联网大数据程序员
赠送原API文档:mybatis-spring-1.3.1-javadoc.jar; 赠送源代码:mybatis-spring-1.3.1-sources.jar; 包含翻译后的API文档:mybatis-spring-1.3.1-javadoc-API文档-中文(简体)版.zip 对应Maven信息:groupId:...
mybatis-spring-1.3.1 和mybatis-3.4.4所有jar包mybatis-spring-1.3.1 和mybatis-3.4.4所有jar包mybatis-spring-1.3.1 和mybatis-3.4.4所有jar包mybatis-spring-1.3.1 和mybatis-3.4.4所有jar包
matplotlib-1.3.1.win-amd64-py2.7.exe
docker-compose 1.3.1版,适用于Linux centos,utuntu。 Compose是用于定义和运行多容器Docker应用程序的工具。 使用compose,可以使用yaml文件配置应用程序的服务。 然后,通过一个命令,可以从配置中创建和启动所有...