首页 > 其他分享 >10.17每日总结

10.17每日总结

时间:2023-10-17 17:14:56浏览次数:49  
标签:总结 count word ## docs 每日 hive table 10.17

今天完成了大型数据库的第二个作业,也就是在hive下用hiveql去分析数据,

具体流程跟前半部分跟上一次我的做法一样,(大数据作业避坑 - 风·华正茂 - 博客园 (cnblogs.com)),

只需要改文件名和文件路径,不一样的是最后一步,就是要先进到hive文件夹下:

执行:

bin/hive

然后分行执行如下命令:

##第一行执行
create table docs(line string);
##第二行执行
load data inpath 'hdfs中文件的路径,一般在根目录下' overwrite into table docs;
##第三行执行
create table word_count as 
select word, count(1) as count from
(select explode(split(line,' '))as word from docs) w
group by word
order by word;

 

标签:总结,count,word,##,docs,每日,hive,table,10.17
From: https://www.cnblogs.com/2351920019xin/p/17770150.html

相关文章

  • 2023年石门中学NOIP模拟测试(2023.10.17)
    原题大战,还是\(4\)道计数...放个头图:一蓝一紫两黑,简单且原题0.o?出模拟赛搬原题演都不演了,他真的我哭死。那这总结不写也罢T1\(n\leq10^3\)。简单来说,要选出子序列满足相同颜色连续的方案数。签到题,但写了\(\text{1h}\)的我是sb。直接大力状压,设\(dp_{i,s,c}\)表......
  • 2023.10.14 总结
    T1题面:给\(n\)个数染色,要求使\(|i-j|\)为质数的两个数染的色不能一样,求任意一种染色方法。\(n\le6\)时直接打表,之后模拟一下。容易发现,\(2\)是质数中唯一一个偶数,所以我们可以\(1234\)连续染色,由于\(4\)是偶数且大于\(2\),所以差为质数的颜色不会相等。最后输出......
  • ecshop | php接入支付宝申报海关接口的总结【避坑】
    第一次对接支付宝的报关接口,害!不明白这个流程是很难接上的,搞了一天半,终于给搞出来了。在这里留下一点文字吧。代码前工作:用支付宝的密钥生成工具生成一对2048的公私钥,这对公私钥用来完成支付宝支付的加签和验签。把公钥上传到开放平台密钥中对应使用的应用接口加签方式中,私钥......
  • 【GJOI 2023.10.17 T4】 莫队
    莫队今天,接触信息学不久的小A刚刚学习了莫队。莫队可以解决一类难以合并,但方便插入的信息维护。比如,给定一个序列,支持单点修改,每次询问一个区间出现了多少种数字。再比如,给定一个序列,支持单点修改,每次询问区间众数。诸如此类。小A觉得这样的情况太平凡了。于是,他定义了一个......
  • MounRiver工程配置讲解总结
    MRS配置汇总:1.MounRiver工程配置讲解一(添加全局宏定义)2.MounRiver工程配置讲解二(将灰色库的文件参与或排除编译)3.MounRiver工程配置讲解三(打印转行符和浮点数)4.MounRiver工程配置讲解四(报警告thereisahole)5.MounRiver工程配置讲解五(const变量地址不在flash中)6.......
  • javaweb-jsp脚本总结笔记
    1什么是JSPjsp又叫JavaserveltPage这门技术最大的特点就是,写jsp就像是再写html但是不仅可以写静态页面,而且可以内置Java代码写出动态页面,也就是说可以为用户提供动态数据。总的来说jsp=java+HTML2.JSP快速入门2.1提供对应的驱动包2.1创建对应jsp文件2.2写对应代码......
  • go 包总结
    (3).总结:编译语言,不像其它脚本语言(边解析边执行).go中所有的代码要进行编译.必须要有一个入口函数,在这个函数中去执行代码.int在赋值的时候没有函数入口,就只是在一个全局的区域里面.任何执行的语句,都要在函数以内执行.而varAgeint=10表示在编译的时候,就直接声明变量再......
  • 谷歌浏览器个版本下载——总结
    1、下载最新离线版本安装包方法:以“ChromeStandaloneSetup64”版本为例https://www.google.cn/chrome/?standalone=1&platform=win64方法解释:打开Chrome浏览器主页,地址栏最后的网址是这样的:http://www.google.cn/chrome在网址最后加上:?standalone=1&platform=win64,回车键后......
  • 大模型微调方法总结
    大模型微调方法总结参考链接:https://blog.csdn.net/v_JULY_v/article/details/132116949前言:随着chatGPT的备受欢迎,大模型异常火爆,各大厂商相继推出自己的大模型。二级公司和用户需要根据自身的垂直领域微调这些具有语义理解能力的大模型,以满足特定领域的业务需求,如医疗,法......
  • 10月14日例会总结
    目录例会总结代码以及知识点例会总结代码以及知识点"""类和对象在程序中先有类,再有对象"""#类classlei:#定义一个类需要用class关键字#类属性school='fuyang'#对象的绑定方法def__init__(self,name,age):#初始化方法self.n......