技术标签： hive
hive数据库是hdfs上的文件夹，表也是文件夹，表里的数据是文件
hive建表
create table 表名(字段1 类型1,字段2 类型2……)
row format delimited fields terminated by '字段分隔符';
为一键启动集群中的zookeeper，以下提供参考脚本：
#vim my-zkServer.sh 添加如下内容：
/opt/zookeeper-3.4.10/bin/zkServer.sh $1
ssh hdp2 "source /etc/profile;/opt/zookeeper-3.4.10/bin/zkServer.sh $1"
ssh hdp3 "source /etc/profile;/opt/zookeeper-3.4.10/bin/zkServer.sh $1"
#source /etc/profile 的目的是将profile中的JAVA_HOME路径提升为全局变量才能到相应的服务器启动具体操作：
#赋予权限 chmod +x my-zkServer.sh
#一键启动zookeeper集群：./my-zkServer.sh start
#一键停止zookeeper集群：./my-zkServer.sh stop
<!-- vim mapred-site.xml -->
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>local</value>
</property>
</configuration>
<!-- 则之后提交job运行mr不需要启动yarn -->
mapreduce.framework.name设置为local，则不会使用YARN集群来分配资源，在本地节点执行。在本地模式运行的任务，无法发挥集群的优势。注：在web UI是查看不到本地模式运行的任务。
启动服务：./hive --service hiveserver2 &
查看端口：netstat -tunl
hiveserver端口：10000
bin/beeline
!connect jdbc:hive2://hdp1:10000
root
回车(hive的默认不认证用户名密码)
hive建表语句
建内部表
create table t_student(id string,name string,age int,classNo string)
row format delimited
fields terminated by ',';
建外部表
create external table t_a(id string,name string)
row format delimited fields terminated by ','
location '/ainput';
删除表
drop table xx
删除内部表是连同表结构和数据一起删除
删除外部表只删除表结构，不删除存储在hdfs上的数据
hive导入数据的语句
从hiverserver本地导入，注意不是beeline客户端的本地
load data local inpath '/root/b.dat' into table t_b;
从hdfs上导入数据(移动)
load data inpath '/datafromhdfs/a.dat' into table t_a;
笛卡尔积定义：
设A和B是两个集合，存在一个集合，它的元素是用A中元素为第一个元素，B中元素为第二个元素构成的有序二元组。称它为集合A和B的笛卡尔积集，记为A×B。即
A×B = {（a,b）|a∈A,b∈B}
例 A={1,2}
B={a,b,c}
A×B = {(1,a),(1,b),(1,c),(2,a),(2,b),(2,c)}
join例子：
a.dat
a,1
b,2
c,3
d,4
b.dat
a,xx
b,yy
d,zz
e,pp
创建表t_a ，t_b与以上数据对应并导入数据。
create table t_a(id string,name string)
row format delimited fields terminated by ',';
create table t_b(id string,name string)
row format delimited fields terminated by ',';
load data local inpath '/root/a.dat' into table t_a文章浏览阅读651次。在vscode中是用模块化的时候会出现报错，提示如下Access to script at ‘file:///F:/%E5%AD%A6%E4%B9%A0/%E7%BA%BF%E4%B8%8BJS/test/js./modul.js’ from origin ‘null’ has been blocked by CORS policy: Cross origin requests are only supported for protocol schemes: http, data, chrome, ch_indesssss.html:1 access to script at 'file:///i:/vscode/cheshi/tesss.js' fro
文章浏览阅读218次。为什么80%的码农都做不了架构师？>>> ..._h3c virtual converged framework切片
文章浏览阅读1.9w次，点赞44次，收藏268次。AndroidIOSHarmonyOS （鸿蒙）文档概览-HarmonyOS应用开发官网2.1.1 系统的定位搭载该操作系统的设备在系统层⾯融为⼀体、形成超级终端，让设备的硬件能⼒可以弹性 扩展，实现设备之间 硬件互助，资源共享。对消费者⽽⾔，HarmonyOS能够将⽣活场景中的各类终端进⾏能⼒整合，实现不同终端 设备之间的快速连接、能⼒互助、资源共享，匹配合适的设备、提供流畅的全场景体验。⾯向开发者，实现⼀次开发，多端部署。_鸿蒙移动应用开发
文章浏览阅读2.8k次。AndroidStudio 升级到 4.2.2 版本后，没有代码高亮了，很蛋疼。解决办法是：点开上方的 File，先勾选 Power Save Mode 再取消就可以了。_android studio 高亮
文章浏览阅读1k次。使用swift4.0整合Unity出现[ valueForUndefinedKey:]: this class is not key value coding-compliant for the key unity.'在对应属性前加@objc 即可。或者调回swift3.2版本_forundefinedkey swift4
文章浏览阅读1.3k次。http auto-config="true" access-denied-page="/common/403.htm"> intercept-url pattern="/login.**" access="IS_AUTHENTICATED_ANONYMOUSLY"/> form-login login-page="/login.jsp" defau_springsecurity 设置cookie失效时间
文章浏览阅读47次。定义：允许将对象组成树形结构来表现 “整体/部分” 层次结构。组合能让客户以一致的方式处理个别对象及对象组合。说白了，就是类似于树形结构。 只是它要求子节点和父节点都具备统一的接口。类图如下：示例如下：比如我们常见的电脑上的目录，目录下面有文件夹，也有文件，然后文件夹里面还有文件及文件夹。这样一层层形成了树形结构。示例代码如下：#include <iostream>#include <stdio.h>#include "string"#includ..
文章浏览阅读1.9w次，点赞26次，收藏185次。目录一.请简述下什么是kotlin？它有什么特性？二.Kotlin 中注解 @JvmOverloads 的作用？三.Kotlin中的MutableList与List有什么区别？四.kotlin实现单例的几种方式？五. kotlin中关键字data的理解？相对于普通的类有哪些特点？六.什么是委托属性？简单说一下应用场景？七.kotlin中with、run、apply、let函数的区别？一般用于什么场景？八.kotlin中Unit的应用以及和Java中void的区别？九.Ko_kotlin面试题
文章浏览阅读2.8k次。有这个想法一方面是确实很多时候会记不得一些缩写是什么意思。另外也是受 http://blog.csdn.net/lin453701006/article/details/52797415这篇博客的启发，本文主要用于自己记忆 内容主要整理自http://blog.sina.com.cn/s/blog_520811730101hmj9.html http://blog.csdn.net/feix_反量化 英文缩写
文章浏览阅读7.3k次，点赞6次，收藏36次。超级简单的Python爬虫入门教程(非常详细)，通俗易懂，看一遍就会了_爬虫python入门
文章浏览阅读1.2k次。您的代码存在一些问题。首先，您在此处显示的两个模型是not等效的：尽管您将scikit-learn LogisticRegression设置为fit_intercept=True(这是默认设置)，但您并没有这样做statsmodels一；来自statsmodels docs：默认情况下不包括拦截器，用户应添加。参见statsmodels.tools.add_constant。另一个问题是，尽管您处..._sm fit(method
文章浏览阅读518次。一、sfml官网下载32位的版本 一样的设置，64位的版本我没有成功，用不了。二、三、四以下这些内容拷贝过去：sfml-graphics-d.libsfml-window-d.libsfml-system-d.libsfml-audio-d.lib..._vsllfqm