当前位置: 首页 > news >正文

专业 网站设计网页设计素材推荐

专业 网站设计,网页设计素材推荐,淘宝网站代理怎么做的,公司管理流程背景假设有一个学生各门课的成绩的表单#xff0c;应用hive取出每科成绩前100名的学生成绩。这个就是典型在分组取Top N的需求。解决思路对于取出每科成绩前100名的学生成绩#xff0c;针对学生成绩表#xff0c;根据学科#xff0c;成绩做orderby排序,然后对排序后的成绩应用hive取出每科成绩前100名的学生成绩。这个就是典型在分组取Top N的需求。解决思路对于取出每科成绩前100名的学生成绩针对学生成绩表根据学科成绩做orderby排序,然后对排序后的成绩执行自定义函数row_number(),必须带一个或者多个列参数如ROW_NUMBER(col1,....)它的作用是按指定的列进行分组生成行序列。在ROW_NUMBER(a,b)时若两条记录的ab列相同则行序列1否则重新计数。只要返回row_number()返回值小于100的的成绩记录就可以返回每个单科成绩前一百的学生Sql代码  create table score_table (subject string,student string,score int)partitioned by (date string);如果要查询2012年每科成绩前100的学生成绩sql如下Java代码  create temporary function row_number as com.blue.hive.udf.RowNumber;select subject,score,student from(select subject,score,student from score where dt2012 order by subject,socre desc) order_scorewhere row_number(subject)  100;com.blue.hive.udf.RowNumber是自定义函数函数的作用是按指定的列进行分组生成行序列。这里根据每个科目的所有成绩生成序列序列值从1开始自增。执行row_number函数返回值如下科目 成绩 学生 row_number物理 100 张一 1物理 90 张二 2物理 80 张三 3.....数学 100 李一 1数学 90 李二 2数学 80 李三 3....row_number的源码函数row_number(),必须带一个或者多个列参数如ROW_NUMBER(col1,....)它的作用是按指定的列进行分组生成行序列。在ROW_NUMBER(a,b)时若两条记录的ab列相同则行序列1否则重新计数。package com.blue.hive.udf;import org.apache.hadoop.hive.ql.exec.UDF;public class RowNumber extends UDF {private static int MAX_VALUE 50;private static String comparedColumn[] new String[MAX_VALUE];private static int rowNum 1;public int evaluate(Object... args) {String columnValue[] new String[args.length];for (int i 0; i args.length; i) 『columnValue[i] args[i].toString();}if (rowNum 1) {for (int i 0; i columnValue.length; i)comparedColumn[i] columnValue[i];}for (int i 0; i columnValue.length; i) {if (!comparedColumn[i].equals(columnValue[i])) {for (int j 0; j columnValue.length; j) {comparedColumn[j] columnValue[j];}rowNum 1;return rowNum;}}return rowNum;}}编译后打包成一个jar包如/usr/local/hive/udf/blueudf.jar然后在hive shell下使用如下:add jar /usr/local/hive/udf/blueudf.jar;create temporary function row_number as com.blue.hive.udf.RowNumber;select subject,score,student from(select subject,score,student from score where dt2012 order by subject,socre desc) order_scorewhere row_number(subject) 100;同样这个函数可以用作去重操作。可以替代大批量数据的DISTINCT通过执行如select * from(select type,value,row_number() as rnfromlog_table distribute by type,valuesort by type,value)where rn 1;注意但是使用row_number()函数需要注意一点必须使用sortby。测试的时候必须使用order by。row_number()函数会假设数据有序的基础上进行的。
http://www.sadfv.cn/news/72535/

相关文章:

  • 做网站购买虚拟主机送模板吗这样建立网站
  • 专业网站建设推荐北京做网站优化的公司
  • 福州响应式网站建设山东营销型网站
  • 手机网站建设方案书建站教程的特点
  • 海南教育学会网站建设人防pc网站开发计划书
  • 服装网站建设前期规划方案上海网站建设免费推荐
  • 做网站杭州大连百姓网
  • 怎么做二维码让别人扫码进入网站seo双标题软件
  • 免费图片制作网站模板做单屏网站 高度是多少
  • 织梦手机网站有广告位高端建站什么意思
  • 如何管理网站文件wordpress编辑器修改
  • 阿坝县建设局网站网站编辑工作好做吗
  • 济宁网站建设只要500元网络组建设计与方案
  • 嘉兴学网站建设免费一级域名和空间
  • 网站 二级域名需要备案吗做化妆品的网站有哪些
  • p2p理财网站开发流程图二级域名对于英文网站推广有什么影响
  • 黄岩建设局网站手机如何建设网站
  • 做个企业网网站怎么做酒店管理系统
  • 芜湖网站网站建设微信wordpress登录
  • 做网站怎么插音乐界面设计1+x证书考什么
  • 广东网站建设系统在线玩小游戏网页版
  • 长沙做网站工作室网页欢迎页面设计
  • 超炫网站app在线制作平台有哪些
  • 微信 微网站开发宠物网站建设方案书
  • 网站开发运行环境有哪些设计方案文本
  • 手机网站框架修改wordpress文章发布页
  • freenom怎么做网站企业管理系统多少钱
  • 虚拟机做网站推动高质量发展的最终目的是什么
  • 尚品中国多年专注于高端网站建设东方城乡与住房建设部网站
  • 有哪些网站可以做图片打赏网页制作的专业