K1

首页 > TAG信息列表 > K1

延迟物化

物化我的理解就是获取某一个结果(或是这中间结果) 比如我有一个表 table: k1,k2,v1,v2,v3 如果我执行一个简单的SQL select k1,k2 from table 如果我们的数据存储格式是按列组织的(列存)，那么我们只需要物化k1,k2 (只需要扫描k1,k2所在的列)，而v1,v2,v3在这个查询中不需要物化(这样

Flume实例分析

需求1：从指定网络端口（44444）采集数据输出到控制台需求2：监控一个文件实时采集新增的数据输出到控制台需求3：将A服务器上的日志实时采集到B服务器一、需求1：从指定网络端口（44444）采集数据输出到控制台 1.建立一个test.conf(简单的节点flume的配置) (1)使用flume的关键在于写配置文件 a)

Mybatis将两个返回值封装为map 摘自 https://blog.csdn.net/baidu_28858901/article/details/119803804

一、问题直接用map接收mybatis返回的两个参数（id，name），不能直接将id作为key，name作为value，会将id作为key，查询到的id值作为value；name作为key，查询到的name值作为value。 <select id="getNameMap" resultType="java.util.HashMap"> select id , name from student</s

异或的4种堪称神奇的运用场景

原创：扣钉日记（微信公众号ID：codelogs），欢迎分享，转载请保留出处。简介众所周知，编程语言一般都内置了3种位运算符&(AND)、|(OR)、~(NOT)，用来实现位运算，但其实还有一种非常常用的位运算，即异或^(XOR)，数学中常用⊕表示。异或的运算逻辑如下： 1 ⊕ 1 = 0 1 ⊕ 0 = 1 0 ⊕ 1 = 1 0 ⊕ 0 =

【Virt.Contest】CF1215(div.2)

第二次打虚拟赛。 CF 传送门 T1：Yellow Cards 黄色卡片中规中矩的 \(T1\)。首先可以算出一个人也不罚下时发出的最多黄牌数： \(sum=a1*(k1-1)+a2*(k2-1)\) 此时，若 \(sum>=n\)，则最少罚下 \(0\) 人，否则最少罚下 \(n-sum\) 人。然后看最多。优先考虑全部发给所需黄牌数少就能下场的

基础数据类型之字典

1.字典的定义使用{}定义字典，括号内用逗号分隔开多个key：value，其中value可以是任意类型，但是key必须是不可变类型且不能重复，是无序的！ info=[ ['name','zhang'], ('age',19) ['gender','男'] ] d={} # 第一种方式定义 d=dict(x=1,y=2) #第二种，dict里面也可以穿一个info d

常用sink

HDFS Sink # sink1 a3.sinks.k1.type = hdfs a3.sinks.k1.hdfs.path = /origin_data/gmall/db/business_db/inc/%{tableName}_inc/%Y-%m-%d a3.sinks.k1.hdfs.filePrefix = db a3.sinks.k1.hdfs.useLocalTimeStamp=false a3.sinks.k1.hdfs.round = false # 解决hdfs中小文件问题

redis day2

持久化机制 client redis[内存] -----> 内存数据- 数据持久化-->磁盘 Redis官方提供了两种不同的持久化方法来将内存的数据存储到硬盘里面分别是: 快照(Snapshot) AOF (Append Only File) 只追加日志文件快照（Snapshot）特点：这种方式可以将某一时刻的所有数据都写入硬盘

PAT Advanced 1009 Product of Polynomials（25）

题目描述： This time, you are supposed to find A×B where A and B are two polynomials. Input Specification: K N1 aN1 N2 aN2 ... NK aNK where K is the number of nonzero terms in the polynomial, Ni and aNi (i=1,2,⋯,K) are the expo

1018 一个小问题扩展中国剩余定理

链接：https://ac.nowcoder.com/acm/problem/15068来源：牛客网题目描述 uu遇到了一个小问题，可是他不想答。你能替他解决这个问题吗？问题：给你k对a和r是否存在一个正整数x使每队a和r都满足：x mod a=r，求最小正解x或无解。输入描述: 第一行是正整数k(k<=1

树形结构

可持久化线段树可持久化线段树其实就是，在更新后仍然可以保留历史版本。是多棵线段树，但是它们有共同的枝干。倍增求LCA LCA：两个点的最近公共祖先首先，先用dfs求出每个点的深度，然后往上跳，直到找到LCA 不过，一个点一个点的往上跳太慢了，可以每次跳2^k步，不断枚举k，直到两个点的深度

7.27

1、字典中获取所有的键　　for i in info.keys(): 2、字典中获取所有的键和值　　for k v in info.items(): 　　for i in info.items(): i就是个元组 3、字典的添加　　存在就是修改不存在就是添加　　info[name] = "alex" 4、字典和列表不可哈希即不可以作为字典中的键

bzoj#2656. [Zjoi2012]数列(sequence)

https://darkbzoj.cc/problem/2656 https://www.luogu.com.cn/problem/P2609 \[A[i]=A[\frac{i}{2}],2\mid i \]\[A[i]=A[\frac{i}{2}]+A[\frac{i}{2}+1],2 \not\mid i \]考虑递归转递推，这种一定能转化为 \(k_1A_0+k_2A_1\) 的形式。考虑当前有 \(ans=k_1A_i+k_2A_{i+1}\) 若 \(i

如何将Excel表格中的两列内容合并成一列

工作中我们会遇到，很多两列的内容需要合并到一块方便查看（起讫点桩号合并。起点桩号0，讫点桩号1.111，需要合并成起讫点桩号K0+000-K1+111）要想完成目标，首先要将整数部分提取出来：用公式=INT（number），第二行完成后双击格子右下角进行填充就将整数部分全部提取出来了。 =int(num

Abaqus用户子程序umat的学习

转载于：https://blog.csdn.net/weixin_30245867/article/details/98776949 说明：在文件中，！后面的内容为注释内容。本文为学习心得，很多注释是自己摸索得到。如有不正确的地方，敬请指正。 ! —————————————————————————— ! 1、为何需要使用用户材料子程序（ User

Redis学习笔记二（常用五大数据类型）

1. 键（key）命令 keys * 查看key exists key 判断是否存在 type key key的类型 del key 删除key unlink key 根据value选择非阻塞删除(异步删除) expire key time[s] 设置key的过期时间 ttl key 查看还有多少秒过期，-1表示你永不过期，-2表示已过期（过期则直接丢弃） select <dbid>

Flume-day02_基础案例

1 、基础案例案例一：在使用之前，提供一个大致思想，使用Flume的过程是确定scource类型，channel类型和sink类型，编写conf文件并开启服务，在数据捕获端进行传入数据流入到目的地。案例一、从控制台打入数据，在控制台显示 1、确定scource类型，channel类型和sink类型确定的使用类型分别

POJ3280 Cheapest Palindrome （区间DP）

dp[i][j]表示将字符串子区间[i,j]转化为回文字符串的最小成本。 1 #include<cstdio> 2 #include<algorithm> 3 #include<cstring> 4 #include<cmath> 5 #include<string> 6 #include<iostream> 7 using namespace std; 8 const int maxn=2010; 9 int n

【中国剩余定理/扩展欧几里得定理】AcWing204.表达整数的奇怪方式——题解顺带中国剩余定理模板

AcWing204.表达整数的奇怪方式题解模板根据题目变形 #include <iostream> using namespace std; typedef long long LL; LL exgcd(LL a, LL b, LL &x, LL &y) { if(!b) { x = 1, y = 0; return a; } LL d = exgcd(b, a % b, y, x);

HDU3507 print article （斜率优化DP）

状态表示：dp[i]表示打印前i个单词的最小成本；s[i]维护前缀和。状态转移：dp[i]=min(dp[j]+(s[i]-s[j])2)+m , 0<=j<i。换成y=kx+b的形式：dp[j]+s[j]2=2*s[i]*s[j]+dp[i]-s[i]2-m。算法步骤：1.枚举i=1...n，k=2*s[i]。 2.检查单调队列队头，排除决策.。 3.此时队头就是最优决策j，根据方程计

Flume

Flume Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。他有一个简单、灵活的基于流的数据结构具有负载均衡机制和

大数据技术之Flume 第2章 Flume入门

第2章 Flume入门 2.1 Flume安装部署 2.1.1 安装地址 Flume官网地址：http://flume.apache.org/ 文档查看地址：http://flume.apache.org/FlumeUserGuide.html 下载地址：http://archive.apache.org/dist/flume/ 2.1.2 安装部署将apache-flume-1.9.0-bin.tar.gz上传到linux的/

opencv 去畸变

import cv2 import numpy as np # 相机坐标系到像素坐标系的转换矩阵 fx = 831.514230246688 fy = 831.972596866759 cx = 327.324903206150 cy = 262.347092547845 K = np.array([[fx, 0., cx], [0., fy, cy], [0., 0., 1.0]]) #畸变系

大数据技术之Kafka 第6章 Flume对接Kafka

第6章 Flume对接Kafka 6.1 简单实现 1）配置flume # define a1.sources = r1 a1.sinks = k1 a1.channels = c1 # source a1.sources.r1.type = exec a1.sources.r1.command = tail -F /opt/module/data/flume.log # sink a1.sinks.k1.type = org.apache.flume.sink.kafka.KafkaSi