14亿条有格式的数据怎么实现复杂条件下秒级查询 5C

现在在mysql 有 14亿 行数据,我现在是这么做的,将数据导出到hdfs,将数据根据一个
字段hash分区 分成1000个小文件,用spark+kafka+redis ,web端发送条件到kafka
spark程序消费数据(条件),从hdfs读取对应的hash文件,条件判断之后将数据保存
到redis。有什么更好的解决方案吗,前提是机器内存有限16-32g左右。

3个回答

先建立映射表,通过映射表进行条件查询hash 速度本来就很快,建立好映射了查询就快了。

请问建立映射表是啥意思,是建立一个所需返回字段的新表,导入数据到新表,通过新表进行条件查询?

14亿数据量, MongoDB/hbase/ES 都是毫秒级响应

Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
其他相关推荐
Mac分析数据中,AddressBook.customPropertyDamageDetected表示什么? 是数据损坏吗?具体是哪方面的数据?
Mac分析数据中,AddressBook.customPropertyDamageDetected表示什么? 是数据损坏吗?具体是哪方面的数据? ![图片说明](https://img-ask.csdn.net/upload/202001/14/1578997962_301276.jpg)
X亿级数据检索速度优化难题,高手进
各位高手,目前碰到一个X亿级数据检索速度优化的难题,大家帮看看怎么解决。 涉及到的表有: KeywordIndex:2.7亿条记录 Original:1014万条记录 KeywordIndex表包括四个字段,ID(PK,int)、KeywordID(int)、OriginalID(int)、ColumnID(int) 建立的索引: PK_KeywordIndex([ID] ASC) IX_KeywordIndex_KeywordID([KeywordID] ASC,包含[OriginalID]列) 业务需求是从KeywordIndex表中查找到同时符合多个KeywordID的记录(交集),然后根据这个交集从Original表中取出相应记录、排序后取出前X条 基本的语句如下SELECT * FROM ( SELECT OuterID AS ResultID, ROW_NUMBER() OVER(Order by Weights Desc, ProAddtime Desc) AS RowNum FROM Original Where ID IN ( SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 1933 INTERSECT SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 1932 INTERSECT SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 1934 INTERSECT SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 1935 INTERSECT SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 1931 INTERSECT SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 14 INTERSECT SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 21 INTERSECT SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 20 INTERSECT SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 23 INTERSECT SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 22 INTERSECT SELECT OriginalID FROM KeywordIndex WHERE KeywordID = 24 ) ) AS T WHERE RowNum > 0 AND RowNum < 21 现在的问题是,上面的语句包含11个KeywordID ,查询速度需要18秒,怎样能够优化到3秒以内? 测试发现,如果符合某一个KeywordID记录数较少的话(比如几万条),查询可以再1秒内完成 如果减少KeywordID 数量,能较少一定的时间(去掉几个KeywordID ,时间在13秒左右),但并不明显 感觉主要的耗时在INTERSECT上。 我试过对KeywordIndex 分区,每5000万一个分区,按ID左右分区依据,没有效果 上面的SQL语句中,已经是按照KeywordID记录数从少到多拼接的KeywordID = 1933(346613条记录) , KeywordID = 24(10080873条记录) 执行计划如下: SQL Server 分析和编译时间: CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。 SQL Server 执行时间: CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。 SQL Server 分析和编译时间: CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。 (20 行受影响) 表 'Worktable'。扫描计数 0,逻辑读取 0 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。 表 'KeywordIndex'。扫描计数 11,逻辑读取 121615 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。 表 'Original'。扫描计数 1,逻辑读取 350977 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。 (31 行受影响) (1 行受影响) SQL Server 执行时间: CPU 时间 = 15366 毫秒,占用时间 = 15479 毫秒。 SQL Server 执行时间: CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。 SQL Server 分析和编译时间: CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。 希望各位高手帮忙指点一下,方向不限,优化SQL,更改表结构、索引,更改实现方式,换数据库都可以,非常感谢
请问下怎么设置滚动条的优先级???
![图片说明](https://img-ask.csdn.net/upload/201910/14/1571035296_539570.png) 当鼠停在laydate中的时候,应当滚动的是laydate时间中的滚动条。 当鼠标停在外部的时候应当滚动的是mCustomScrollbar框架。 实际情况是全部优先于滚动mCustomScrollbar滚动条。 请问下怎么设置滚动条的优先级???
类的定义和它的成员函数的实现分开放会报错
为什么将类的定义和它的成员函数的实现分别放在.h和.cpp中就会报错: LNK2019: 无法解析的外部符号 "public: void __cdecl YtPlc_Mitsubishi_Mc::InitParam(void)" (?InitParam@YtPlc_Mitsubishi_Mc@@QEAAXXZ),该符号在函数 main 中被引用 PLC_test D:\zhoujy\prj\PLC_test\PLC_test\PLC_test.obj .h中的代码如下: ``` class YtPlc_Mitsubishi_Mc // : public YtPlc { public: YtPlc_Mitsubishi_Mc(); //初始化参数 void InitParam(); }; ``` .cpp中的实现如下: ``` #include "ytplc_mitsubishi_mc.h" YtPlc_Mitsubishi_Mc::YtPlc_Mitsubishi_Mc() { } void YtPlc_Mitsubishi_Mc::InitParam() { //发送命令 write_buff_[0] = 0x50; // 副头部 write_buff_[1] = 0x00; // 副头部 write_buff_[2] = 0x00; // 网络编号 write_buff_[3] = (char)0xff; // 可编程控制器编号 write_buff_[4] = (char)0xff; // 请求目标模块I/O编号L write_buff_[5] = 0x03; // 请求目标模块I/O编号H write_buff_[6] = 0x00; // 请求目标模块站号 // 长度从CPU监视定时器L到指令结束 write_buff_[7] = 0x00; //请求数据长度L write_buff_[8] = 0x00; //请求数据长度H //CPU 监视定时器 0:无限等待 0001~FFFF H (1~65535): 等待时间(单位 250ms) @《三菱Q_L系列通信协议参考》3.1.3 P73 write_buff_[9] = 0x01; // CPU监视定时器L write_buff_[10] = 0x00; // CPU监视定时器H // 指令1401 @《三菱Q_L系列通信协议参考》3.3.7 P154 write_buff_[11] = 0x01; // 指令L write_buff_[12] = 0x14; // 指令H write_buff_[13] = 0x00; // 子指令L write_buff_[14] = 0x00; // 子指令H // 字单位的批量写入 write_buff_[15] = 0x00; // 起始软元件 write_buff_[16] = 0x00; // 起始软元件 write_buff_[17] = 0x00; // 起始软元件 write_buff_[18] = 0x00; // 软元件代码 write_buff_[19] = 0x00; // 软元件点数 write_buff_[20] = 0x00; // 软元件点数 // 软元件点数的范围 // e.g 1995H 1202H 1130H -> {95H 19H 02H 12H 30H 12H} for (int i = 0; i < 20; i++) { write_buff_[21 + i * 2] = 0x00; write_buff_[21 + i * 2 + 1] = 0x00; } //读取命令 read_buff_[0] = 0x50; // 副头部 read_buff_[1] = 0x00; // 副头部 read_buff_[2] = 0x00; // 网络编号 read_buff_[3] = (char)0xff; // 可编程控制器编号 read_buff_[4] = (char)0xff; // 请求目标模块I/O编号L read_buff_[5] = 0x03; // 请求目标模块I/O编号H read_buff_[6] = 0x00; // 请求目标模块站号 read_buff_[7] = 0x0c; //请求数据长度L read_buff_[8] = 0x00; //请求数据长度H //CPU 监视定时器 0:无限等待 0001~FFFF H (1~65535): 等待时间(单位 250ms) @《三菱Q_L系列通信协议参考》3.1.3 P73 read_buff_[9] = 0x01; // CPU监视定时器L read_buff_[10] = 0x00; // CPU监视定时器H // 0401 T寄存器读取 @《三菱Q_L系列通信协议参考》3.3.6 P150 // WARNING: M寄存器读取 send_buff_[18] = 0x90 待确认 read_buff_[11] = 0x01; // 指令L read_buff_[12] = 0x04; // 指令H read_buff_[13] = 0x00; // 子指令L read_buff_[14] = 0x00; // 子指令H // 字单位的批量写入 read_buff_[15] = 0x00; // 起始软元件 read_buff_[16] = 0x00; // 起始软元件 read_buff_[17] = 0x00; // 起始软元件 read_buff_[18] = 0x00; // 软元件代码 read_buff_[19] = 0x00; // 软元件点数 read_buff_[20] = 0x00; // 软元件点数 } ``` 但如果把它们都放到头文件中,即把成员函数和构造函数的实现和类的定义放到一起,就不会有这个问题了
用数据结构实现商品检索
Problem Description 沃尔玛公司由美国零售业的传奇人物山姆&#8226;沃尔顿先生于1962年在阿肯色州成立。经过四十多年的发展,沃尔玛公司已经成为美国最大的私人雇主和世界上最大 的连锁最大零售企业目前,沃尔玛在全球开设了7500家商场,员工总数210万人,分布在全球14个国家。每周光临沃尔玛的顾客1.75亿人次。 当然,每天卖出去的东西也是挺多的。那么就需要一个强大的商品检索系统了,能够快速的找到想找的商品,并且能够准确的给出此件商品的数目。假若,山姆先生找到了身为程序员的你,让你帮忙写个程序来完成这个--------人很难完成的任务。任务书如下: 任务名称 商品检索系统 任务提交方式 程序源码 任务输入 商品条形码 | 输入误差 5% 任务输出 对应商品数目 | 输出允许误差 0% Input 输入包括若干组测试数据,每组测试数据第一行两个正整数N,M。N代表所有商品的总件数,M代表要查询的商品件数。接下来N行,每行一个字符串S[ i ],代表第i个商品的名称。之后是M组条形码,每组条形码第一行一个数字n,代表条形码的条数,接下来n行,每行一条条形码,代表了一个字符,每组条形码代表了要查询的一种商品的名称。正确的商品名称中仅包含大写字母,小写字母以及数字。 Output 每组测试数据中,对于每个输入的条形码,输出一行数字,代表以查询的商品名称为前缀的商品的总件数,如果输入的条形码是错误的,则输出“wrong barcode!” 数据范围说明: N [1 , 10^5] 整数 M[1 , 10^6] 整数 Length(S[i]) [1 , 30] 整数 条形码条数[10 , 10^5] 实数 条形码输入说明: 输入的条形码,由两部分组成,第一部分是一个数字n,代表每组条形码的条数,接下来n行,每行由宽度不等的多个黑条和白条组成,黑条和白条的宽度与其标准值的误差不会超过5%,黑条代表1,白条代表0,白条标准条的宽度是黑条标准条宽度的一半。每8个黑白条占一行组成一个2进制的ASCII码,表示其所对应的字符。描述一个商品名称的正确条形码总是从“begin”开始,然后以“end”结束。 Sample Input 4 1 Onepiece Chair Plant Pen 16 10 20 20 10 10 10 20 10 10 20 20 10 10 20 10 20 10 20 20 10 10 20 20 20 10 20 20 10 20 10 10 20 10 20 20 10 20 20 20 10 10 20 10 10 20 20 20 20 10 20 20 10 20 20 20 10 10 20 20 10 10 20 10 20 10 20 20 20 10 10 10 10 10 20 20 10 20 10 10 20 10 20 20 10 10 20 10 20 10 20 20 10 10 10 20 20 10 20 20 10 10 20 10 20 10 20 20 10 10 20 10 20 10 20 20 10 20 20 20 10 10 20 20 10 10 20 10 10 Sample Output 1
oracle查询速度会因具体的条件变慢
select语句的结构完全一样,只是把其中一条where条件由='TCP14'改为='TCP17', 查询速度就由原来的瞬间变成3秒。我查看了TCP14下数据量和TCP17下数据量是差不多的。 请问原因和解决办法
用MATLAB实现BP神经网络对二手车价格的预测误差很大
基于BP神经网络建立了二手车价格预测模型,建立的双隐层结构。 思路为根据二手的品牌、里程、车龄等信息预测二手车价格。共3500条数据,3000训练,500调试。 但是不管怎么调试一直误差很大。求大神帮忙调试一下,怎么降低误差。 ``` clear; clc; % 清空环境变量 % 原始数据 %名字 name = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','A1:A3000'); %新车指导价 new_price = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','B1:B3000'); %表现里程 mileage = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','C1:C3000'); %排放标准 discharge = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','D1:D3000'); %变速箱类型 transmission_case = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','E1:E3000'); %排量 displacement = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','F1:F3000'); %过户次数 transfer = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','G1:G3000'); %车龄 age = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','H1:H3000'); %二手车价格 price = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','I1:I3000'); %目标数据 ptest = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','A3001:H3475'); ptest = ptest'; ttest = xlsread('E:\毕业论文\Data\瓜子二手车数据处理.xlsx','I3001:I3475'); ttest = ttest'; % 输入数据矩阵 p = [name';new_price';mileage';discharge';transmission_case';displacement';transfer';age']; %输入目标矩阵 t = [price']; %数据归一化 [pn, minp, maxp, tn, mint, maxt] = premnmx(p, t); %隐含层节点数 NodeNum1 = 20; NodeNum2 = 20; %输出维数 TypeNum = 1; TF1 = 'tansig'; TF2 = 'tansig'; TF3 = 'tansig'; net = newff(minmax(pn),[NodeNum1,NodeNum2,TypeNum],{TF1 TF2 TF3},'traingdx'); %网络创建traingdm %每间隔50步显示一次训练 net.trainParam.show = 50; %最大训练次数 net.trainParam.epochs = 50000; %训练所要达到的精度 net.trainParam.goal = 1e-4; %学习速率 net.trainParam.lr = 0.0001; %最小梯度 net.trainParam.min_grad = 1e-15; net = train(net,pn,tn); %测试数据的归一化 p2n = tramnmx(ptest,minp,maxp); an = sim(net,p2n); %数据的反归一化,即最终想得到的预测结果 [a] = postmnmx(an,mint,maxt); plot(1:length(ttest),ttest,'o',1:length(ttest),a,'+'); title('o表示预测值--- *表示实际值'); grid on m = length(a); t1 = [ttest]; error = (t1-a)./a; figure plot(1:length(error),error,'o'); title('误差变化图'); grid on ``` 结果图片是: ![图片说明](https://img-ask.csdn.net/upload/202001/14/1578988212_623706.jpg) ![图片说明](https://img-ask.csdn.net/upload/202001/14/1578988228_219711.jpg) 数据截图![图片说明](https://img-ask.csdn.net/upload/202001/14/1578988287_246300.png)
iReport detail数据横向循环输出
iReport 数据正常是纵向输出,怎么能让数据横向输出 ![图片说明](https://img-ask.csdn.net/upload/202001/14/1578966528_80045.png)
sql 如何把三个不同的查询数据合并为一条
![图片说明](https://img-ask.csdn.net/upload/201609/14/1473834658_437346.png) ![图片说明](https://img-ask.csdn.net/upload/201609/14/1473834670_516240.png) # 上图是查询语句 # 下图是查询后数据 # 如何按同一天时间 合并为一条数据
Mybatis 数据库查询 时间格式
使用的是oracle数据库,数据查找时间显示如下: ![图片说明](https://img-ask.csdn.net/upload/201611/15/1479180154_993971.jpg) 数据库存储的时间为 存的是 date ![图片说明](https://img-ask.csdn.net/upload/201611/15/1479180284_899675.jpg) 怎样把时间格式显示成 2016/11/14 12:20:33 这种的
商品检索 具体的思路
Problem Description 沃尔玛公司由美国零售业的传奇人物山姆&#8226;沃尔顿先生于1962年在阿肯色州成立。经过四十多年的发展,沃尔玛公司已经成为美国最大的私人雇主和世界上最大 的连锁最大零售企业目前,沃尔玛在全球开设了7500家商场,员工总数210万人,分布在全球14个国家。每周光临沃尔玛的顾客1.75亿人次。 当然,每天卖出去的东西也是挺多的。那么就需要一个强大的商品检索系统了,能够快速的找到想找的商品,并且能够准确的给出此件商品的数目。假若,山姆先生找到了身为程序员的你,让你帮忙写个程序来完成这个--------人很难完成的任务。任务书如下: 任务名称 商品检索系统 任务提交方式 程序源码 任务输入 商品条形码 | 输入误差 5% 任务输出 对应商品数目 | 输出允许误差 0% Input 输入包括若干组测试数据,每组测试数据第一行两个正整数N,M。N代表所有商品的总件数,M代表要查询的商品件数。接下来N行,每行一个字符串S[ i ],代表第i个商品的名称。之后是M组条形码,每组条形码第一行一个数字n,代表条形码的条数,接下来n行,每行一条条形码,代表了一个字符,每组条形码代表了要查询的一种商品的名称。正确的商品名称中仅包含大写字母,小写字母以及数字。 Output 每组测试数据中,对于每个输入的条形码,输出一行数字,代表以查询的商品名称为前缀的商品的总件数,如果输入的条形码是错误的,则输出“wrong barcode!” 数据范围说明: N [1 , 10^5] 整数 M[1 , 10^6] 整数 Length(S[i]) [1 , 30] 整数 条形码条数[10 , 10^5] 实数 条形码输入说明: 输入的条形码,由两部分组成,第一部分是一个数字n,代表每组条形码的条数,接下来n行,每行由宽度不等的多个黑条和白条组成,黑条和白条的宽度与其标准值的误差不会超过5%,黑条代表1,白条代表0,白条标准条的宽度是黑条标准条宽度的一半。每8个黑白条占一行组成一个2进制的ASCII码,表示其所对应的字符。描述一个商品名称的正确条形码总是从“begin”开始,然后以“end”结束。 Sample Input 4 1 Onepiece Chair Plant Pen 16 10 20 20 10 10 10 20 10 10 20 20 10 10 20 10 20 10 20 20 10 10 20 20 20 10 20 20 10 20 10 10 20 10 20 20 10 20 20 20 10 10 20 10 10 20 20 20 20 10 20 20 10 20 20 20 10 10 20 20 10 10 20 10 20 10 20 20 20 10 10 10 10 10 20 20 10 20 10 10 20 10 20 20 10 10 20 10 20 10 20 20 10 10 10 20 20 10 20 20 10 10 20 10 20 10 20 20 10 10 20 10 20 10 20 20 10 20 20 20 10 10 20 20 10 10 20 10 10 Sample Output 1
MFC怎么读取TXT中自己想要的数据
![图片说明](https://img-ask.csdn.net/upload/202001/14/1578977304_128472.png)![图片说明](https://img-ask.csdn.net/upload/202001/14/1578977315_361489.png) 我想要把初始化文件的数值填入到程序对应的EDIT控件中,现在只会读取文件但不会提取重要信息,求解答,谢谢
数据库拿到时间数据,页面上不会回显上来
![图片说明](https://img-ask.csdn.net/upload/202001/14/1578971864_287023.jpg) ![图片说明](https://img-ask.csdn.net/upload/202001/14/1578971870_734259.jpg) ``` <td class="td-inputtitle" style="width: 15%; text-align: center"><label>计划处理时间</label></td> <td class="td-input"> <input type="hidden" id="planProTimeHide" value="${planProTime}" pattern="yyyy-MM-dd" > <input id="planProTime" name="planProTime" editable="false" showSeconds="false" class="easyui-datebox" style="width: 135px;"/> </td> ``` 页面不会显示拿到的数据, 这是JS代码 ``` $("#planProTime").datetimebox({ value: $("#planProTimeHide").val(), onChange: function (newdate, olddate) { initShiftList(newdate,"planProShift","planProShiftId") } }); ```
关于orale数据库的sql查询
要查询以两个字段为查询条件的语句,设为a字段和b字段,条件值为c,d,结果想 查出a>=c 和<=c 并且b>=d 和b<=d 分别的第一条数据。 如 a b 3 6 5 8 9 14 2 3 10 5 11 4 c,d值为6,7查询结果为 10,5 5,8 确实说的不是很明白,这样吧,数据路有两个字段分别为经纬度,给出已知的经纬度查询数据库的最相近经纬度的数据,这样能明白吗,加在一起去比较肯定 是不行的
Data Structure? 数据结构的问题
Problem Description Data structure is one of the basic skills for Computer Science students, which is a particular way of storing and organizing data in a computer so that it can be used efficiently. Today let me introduce a data-structure-like problem for you. Original, there are N numbers, namely 1, 2, 3...N. Each round, iSea find out the Ki-th smallest number and take it away, your task is reporting him the total sum of the numbers he has taken away. Input The first line contains a single integer T, indicating the number of test cases. Each test case includes two integers N, K, K indicates the round numbers. Then a line with K numbers following, indicating in i (1-based) round, iSea take away the Ki-th smallest away. Technical Specification 1. 1 <= T <= 128 2. 1 <= K <= N <= 262 144 3. 1 <= Ki <= N - i + 1 Output For each test case, output the case number first, then the sum. Sample Input 2 3 2 1 1 10 3 3 9 1 Sample Output Case 1: 3 Case 2: 14
C++网络编程问题,附部分代码
/*下边实现tcp数据包分析的函数定义tcp_protocol_packet_callback*/ void tcp_protocol_packet_callback(u_char *argument,const struct pcap_pkthdr* packet_header,const u_char* packet_content) { struct tcp_header *tcp_protocol ; /*tcp协议变量*/ u_char flags; /*标记*/ int header_length; /*头长度*/ u_short source_port; /*源端口*/ u_short destination_port; /*目的端口*/ u_short windows; /*窗口大小*/ u_short urgent_pointer; /*紧急指针*/ u_int sequence; /*序列号*/ u_int acknowledgement; /*确认号*/ u_int16_t checksum; /*检验和*/ tcp_protocol=(struct tcp_header *) (packet_content+14+20); /*获得tcp首部内容*/ 为什么这里tcp_protocol=(struct tcp_header *) (packet_content+14+20)是14+20啊
java 怎么连接内网服务器上面的oracle数据库
1、 private static String url = "jdbc:oracle:thin:@172.16.xx.x:1521:ZYH"; private static String user = "users"; private static String password = "123456"; 2、 // 初始化驱动包 Class.forName("oracle.jdbc.driver.OracleDriver"); 我查看了百度这些 语法这些都没有错吧,但是就不成功 ![图片说明](https://img-ask.csdn.net/upload/202001/14/1578963334_196314.png) 注释掉的那段是能连接上的 ![图片说明](https://img-ask.csdn.net/upload/202001/14/1578963569_993029.png) ZYHIS = (DESCRIPTION = (ADDRESS_LIST = (ADDRESS = (PROTOCOL = TCP)(HOST = 172.16.xx.x)(PORT = 1521)) ) (CONNECT_DATA = (SERVICE_NAME = zyhis) ) ) 该配置的都配置 了,就不知道为什么不成功,请各位大佬多多指教
商品检索 程序的设计
Problem Description 沃尔玛公司由美国零售业的传奇人物山姆&#8226;沃尔顿先生于1962年在阿肯色州成立。经过四十多年的发展,沃尔玛公司已经成为美国最大的私人雇主和世界上最大 的连锁最大零售企业目前,沃尔玛在全球开设了7500家商场,员工总数210万人,分布在全球14个国家。每周光临沃尔玛的顾客1.75亿人次。 当然,每天卖出去的东西也是挺多的。那么就需要一个强大的商品检索系统了,能够快速的找到想找的商品,并且能够准确的给出此件商品的数目。假若,山姆先生找到了身为程序员的你,让你帮忙写个程序来完成这个--------人很难完成的任务。任务书如下: 任务名称 商品检索系统 任务提交方式 程序源码 任务输入 商品条形码 | 输入误差 5% 任务输出 对应商品数目 | 输出允许误差 0% Input 输入包括若干组测试数据,每组测试数据第一行两个正整数N,M。N代表所有商品的总件数,M代表要查询的商品件数。接下来N行,每行一个字符串S[ i ],代表第i个商品的名称。之后是M组条形码,每组条形码第一行一个数字n,代表条形码的条数,接下来n行,每行一条条形码,代表了一个字符,每组条形码代表了要查询的一种商品的名称。正确的商品名称中仅包含大写字母,小写字母以及数字。 Output 每组测试数据中,对于每个输入的条形码,输出一行数字,代表以查询的商品名称为前缀的商品的总件数,如果输入的条形码是错误的,则输出“wrong barcode!” 数据范围说明: N [1 , 10^5] 整数 M[1 , 10^6] 整数 Length(S[i]) [1 , 30] 整数 条形码条数[10 , 10^5] 实数 条形码输入说明: 输入的条形码,由两部分组成,第一部分是一个数字n,代表每组条形码的条数,接下来n行,每行由宽度不等的多个黑条和白条组成,黑条和白条的宽度与其标准值的误差不会超过5%,黑条代表1,白条代表0,白条标准条的宽度是黑条标准条宽度的一半。每8个黑白条占一行组成一个2进制的ASCII码,表示其所对应的字符。描述一个商品名称的正确条形码总是从“begin”开始,然后以“end”结束。 Sample Input 4 1 Onepiece Chair Plant Pen 16 10 20 20 10 10 10 20 10 10 20 20 10 10 20 10 20 10 20 20 10 10 20 20 20 10 20 20 10 20 10 10 20 10 20 20 10 20 20 20 10 10 20 10 10 20 20 20 20 10 20 20 10 20 20 20 10 10 20 20 10 10 20 10 20 10 20 20 20 10 10 10 10 10 20 20 10 20 10 10 20 10 20 20 10 10 20 10 20 10 20 20 10 10 10 20 20 10 20 20 10 10 20 10 20 10 20 20 10 10 20 10 20 10 20 20 10 20 20 20 10 10 20 20 10 10 20 10 10 Sample Output 1
struts标签实现上一周下一周数据对应显示的问题
<p>刚毕业找到工作,遇到一问题。我要做一个下面这样的东西。</p> <p>点击上一周,下一周,可以显示对应周的数据。对应的星期几下面的日期也会跟着改变。</p> <p>我先用JavaScript实现了点击上一周,下一周改变日期值。然后实现了查询列表的功能(列出所有数据,没有查询条件)。然后我要把查询结果分类到对应的日期里面。</p> <p>数据库中有相应的日期列(页面中没有让其显示出来,但是可以在页面中把日期拿出来)。就在判断左边日期和从数据获取出来的日期是否相等时,不知道怎么做了。因为左边的值是javascript生成的值,右边对应数据是java通过SQL得到的(虽然页面中没有显示日期)。没办法比较啊。javascript日期值怎么能和struts标签得到的日期值比较呢?不知道我这样想是不是我的思路有问题。请大牛给指点一下思路。</p> <p>我说的再清楚一些,例如:星期日的三条数据在数据库中对应的日期字段都是3.13日。星期一的一条数据对应的日期字段是3.14日。</p> <p>我一直在怀疑是不是我的思路有问题。</p> <p>下图是.NET还是别的什么实现的我忘了(带我的人说的),然后让我实现这么一功能。(按月,周,天)显示出数据,并且可以增删改查。增删改查都做好了。就这个给难住了。<br><img src="http://dl.iteye.com/upload/attachment/440338/989d6f42-11cc-3aed-a334-c325ffcbb25c.jpg" alt=""></p>
Java学习的正确打开方式
在博主认为,对于入门级学习java的最佳学习方法莫过于视频+博客+书籍+总结,前三者博主将淋漓尽致地挥毫于这篇博客文章中,至于总结在于个人,实际上越到后面你会发现学习的最好方式就是阅读参考官方文档其次就是国内的书籍,博客次之,这又是一个层次了,这里暂时不提后面再谈。博主将为各位入门java保驾护航,各位只管冲鸭!!!上天是公平的,只要不辜负时间,时间自然不会辜负你。 何谓学习?博主所理解的学习,它
大学四年自学走来,这些私藏的实用工具/学习网站我贡献出来了
大学四年,看课本是不可能一直看课本的了,对于学习,特别是自学,善于搜索网上的一些资源来辅助,还是非常有必要的,下面我就把这几年私藏的各种资源,网站贡献出来给你们。主要有:电子书搜索、实用工具、在线视频学习网站、非视频学习网站、软件下载、面试/求职必备网站。 注意:文中提到的所有资源,文末我都给你整理好了,你们只管拿去,如果觉得不错,转发、分享就是最大的支持了。 一、PDF搜索网站推荐 对于大部
linux系列之常用运维命令整理笔录
本博客记录工作中需要的linux运维命令,大学时候开始接触linux,会一些基本操作,可是都没有整理起来,加上是做开发,不做运维,有些命令忘记了,所以现在整理成博客,当然vi,文件操作等就不介绍了,慢慢积累一些其它拓展的命令,博客不定时更新 顺便拉下票,我在参加csdn博客之星竞选,欢迎投票支持,每个QQ或者微信每天都可以投5票,扫二维码即可,http://m234140.nofollow.ax.
Vue + Spring Boot 项目实战(十四):用户认证方案与完善的访问拦截
本篇文章主要讲解 token、session 等用户认证方案的区别并分析常见误区,以及如何通过前后端的配合实现完善的访问拦截,为下一步权限控制的实现打下基础。
比特币原理详解
一、什么是比特币 比特币是一种电子货币,是一种基于密码学的货币,在2008年11月1日由中本聪发表比特币白皮书,文中提出了一种去中心化的电子记账系统,我们平时的电子现金是银行来记账,因为银行的背后是国家信用。去中心化电子记账系统是参与者共同记账。比特币可以防止主权危机、信用风险。其好处不多做赘述,这一层面介绍的文章很多,本文主要从更深层的技术原理角度进行介绍。 二、问题引入  假设现有4个人
程序员接私活怎样防止做完了不给钱?
首先跟大家说明一点,我们做 IT 类的外包开发,是非标品开发,所以很有可能在开发过程中会有这样那样的需求修改,而这种需求修改很容易造成扯皮,进而影响到费用支付,甚至出现做完了项目收不到钱的情况。 那么,怎么保证自己的薪酬安全呢? 我们在开工前,一定要做好一些证据方面的准备(也就是“讨薪”的理论依据),这其中最重要的就是需求文档和验收标准。一定要让需求方提供这两个文档资料作为开发的基础。之后开发
网页实现一个简单的音乐播放器(大佬别看。(⊙﹏⊙))
今天闲着无事,就想写点东西。然后听了下歌,就打算写个播放器。 于是乎用h5 audio的加上js简单的播放器完工了。 欢迎 改进 留言。 演示地点跳到演示地点 html代码如下`&lt;!DOCTYPE html&gt; &lt;html&gt; &lt;head&gt; &lt;title&gt;music&lt;/title&gt; &lt;meta charset="utf-8"&gt
Python十大装B语法
Python 是一种代表简单思想的语言,其语法相对简单,很容易上手。不过,如果就此小视 Python 语法的精妙和深邃,那就大错特错了。本文精心筛选了最能展现 Python 语法之精妙的十个知识点,并附上详细的实例代码。如能在实战中融会贯通、灵活使用,必将使代码更为精炼、高效,同时也会极大提升代码B格,使之看上去更老练,读起来更优雅。 1. for - else 什么?不是 if 和 else 才
数据库优化 - SQL优化
前面一篇文章从实例的角度进行数据库优化,通过配置一些参数让数据库性能达到最优。但是一些“不好”的SQL也会导致数据库查询变慢,影响业务流程。本文从SQL角度进行数据库优化,提升SQL运行效率。 判断问题SQL 判断SQL是否有问题时可以通过两个表象进行判断: 系统级别表象 CPU消耗严重 IO等待严重 页面响应时间过长
2019年11月中国大陆编程语言排行榜
2019年11月2日,我统计了某招聘网站,获得有效程序员招聘数据9万条。针对招聘信息,提取编程语言关键字,并统计如下: 编程语言比例 rank pl_ percentage 1 java 33.62% 2 c/c++ 16.42% 3 c_sharp 12.82% 4 javascript 12.31% 5 python 7.93% 6 go 7.25% 7
通俗易懂地给女朋友讲:线程池的内部原理
餐厅的约会 餐盘在灯光的照耀下格外晶莹洁白,女朋友拿起红酒杯轻轻地抿了一小口,对我说:“经常听你说线程池,到底线程池到底是个什么原理?”我楞了一下,心里想女朋友今天是怎么了,怎么突然问出这么专业的问题,但做为一个专业人士在女朋友面前也不能露怯啊,想了一下便说:“我先给你讲讲我前同事老王的故事吧!” 大龄程序员老王 老王是一个已经北漂十多年的程序员,岁数大了,加班加不动了,升迁也无望,于是拿着手里
经典算法(5)杨辉三角
写在前面: 我是 扬帆向海,这个昵称来源于我的名字以及女朋友的名字。我热爱技术、热爱开源、热爱编程。技术是开源的、知识是共享的。 这博客是对自己学习的一点点总结及记录,如果您对 Java、算法 感兴趣,可以关注我的动态,我们一起学习。 用知识改变命运,让我们的家人过上更好的生活。 目录一、杨辉三角的介绍二、杨辉三角的算法思想三、代码实现1.第一种写法2.第二种写法 一、杨辉三角的介绍 百度
腾讯算法面试题:64匹马8个跑道需要多少轮才能选出最快的四匹?
昨天,有网友私信我,说去阿里面试,彻底的被打击到了。问了为什么网上大量使用ThreadLocal的源码都会加上private static?他被难住了,因为他从来都没有考虑过这个问题。无独有偶,今天笔者又发现有网友吐槽了一道腾讯的面试题,我们一起来看看。 腾讯算法面试题:64匹马8个跑道需要多少轮才能选出最快的四匹? 在互联网职场论坛,一名程序员发帖求助到。二面腾讯,其中一个算法题:64匹
面试官:你连RESTful都不知道我怎么敢要你?
面试官:了解RESTful吗? 我:听说过。 面试官:那什么是RESTful? 我:就是用起来很规范,挺好的 面试官:是RESTful挺好的,还是自我感觉挺好的 我:都挺好的。 面试官:… 把门关上。 我:… 要干嘛?先关上再说。 面试官:我说出去把门关上。 我:what ?,夺门而去 文章目录01 前言02 RESTful的来源03 RESTful6大原则1. C-S架构2. 无状态3.统一的接
SQL-小白最佳入门sql查询一
一 说明 如果是初学者,建议去网上寻找安装Mysql的文章安装,以及使用navicat连接数据库,以后的示例基本是使用mysql数据库管理系统; 二 准备前提 需要建立一张学生表,列分别是id,名称,年龄,学生信息;本示例中文章篇幅原因SQL注释略; 建表语句: CREATE TABLE `student` ( `id` int(11) NOT NULL AUTO_INCREMENT, `
项目中的if else太多了,该怎么重构?
介绍 最近跟着公司的大佬开发了一款IM系统,类似QQ和微信哈,就是聊天软件。我们有一部分业务逻辑是这样的 if (msgType = "文本") { // dosomething } else if(msgType = "图片") { // doshomething } else if(msgType = "视频") { // doshomething } else { // dosho
漫话:什么是平衡(AVL)树?这应该是把AVL树讲的最好的文章了
这篇文章通过对话的形式,由浅入深带你读懂 AVL 树,看完让你保证理解 AVL 树的各种操作,如果觉得不错,别吝啬你的赞哦。 1、若它的左子树不为空,则左子树上所有的节点值都小于它的根节点值。 2、若它的右子树不为空,则右子树上所有的节点值均大于它的根节点值。 3、它的左右子树也分别可以充当为二叉查找树。 例如: 例如,我现在想要查找数值为14的节点。由于二叉查找树的特性,我们可...
“狗屁不通文章生成器”登顶GitHub热榜,分分钟写出万字形式主义大作
一、垃圾文字生成器介绍 最近在浏览GitHub的时候,发现了这样一个骨骼清奇的雷人项目,而且热度还特别高。 项目中文名:狗屁不通文章生成器 项目英文名:BullshitGenerator 根据作者的介绍,他是偶尔需要一些中文文字用于GUI开发时测试文本渲染,因此开发了这个废话生成器。但由于生成的废话实在是太过富于哲理,所以最近已经被小伙伴们给玩坏了。 他的文风可能是这样的: 你发现,
程序员:我终于知道post和get的区别
IT界知名的程序员曾说:对于那些月薪三万以下,自称IT工程师的码农们,其实我们从来没有把他们归为我们IT工程师的队伍。他们虽然总是以IT工程师自居,但只是他们一厢情愿罢了。 此话一出,不知激起了多少(码农)程序员的愤怒,却又无可奈何,于是码农问程序员。 码农:你知道get和post请求到底有什么区别? 程序员:你看这篇就知道了。 码农:你月薪三万了? 程序员:嗯。 码农:你是怎么做到的? 程序员:
《程序人生》系列-这个程序员只用了20行代码就拿了冠军
你知道的越多,你不知道的越多 点赞再看,养成习惯GitHub上已经开源https://github.com/JavaFamily,有一线大厂面试点脑图,欢迎Star和完善 前言 这一期不算《吊打面试官》系列的,所有没前言我直接开始。 絮叨 本来应该是没有这期的,看过我上期的小伙伴应该是知道的嘛,双十一比较忙嘛,要值班又要去帮忙拍摄年会的视频素材,还得搞个程序员一天的Vlog,还要写BU
开源并不是你认为的那些事
点击上方蓝字 关注我们开源之道导读所以 ————想要理清开源是什么?先要厘清开源不是什么,名正言顺是句中国的古代成语,概念本身的理解非常之重要。大部分生物多样性的起源,...
加快推动区块链技术和产业创新发展,2019可信区块链峰会在京召开
      11月8日,由中国信息通信研究院、中国通信标准化协会、中国互联网协会、可信区块链推进计划联合主办,科技行者协办的2019可信区块链峰会将在北京悠唐皇冠假日酒店开幕。   区块链技术被认为是继蒸汽机、电力、互联网之后,下一代颠覆性的核心技术。如果说蒸汽机释放了人类的生产力,电力解决了人类基本的生活需求,互联网彻底改变了信息传递的方式,区块链作为构造信任的技术有重要的价值。   1
程序员把地府后台管理系统做出来了,还有3.0版本!12月7号最新消息:已在开发中有github地址
第一幕:缘起 听说阎王爷要做个生死簿后台管理系统,我们派去了一个程序员…… 996程序员做的梦: 第一场:团队招募 为了应对地府管理危机,阎王打算找“人”开发一套地府后台管理系统,于是就在地府总经办群中发了项目需求。 话说还是中国电信的信号好,地府都是满格,哈哈!!! 经常会有外行朋友问:看某网站做的不错,功能也简单,你帮忙做一下? 而这次,面对这样的需求,这个程序员
网易云6亿用户音乐推荐算法
网易云音乐是音乐爱好者的集聚地,云音乐推荐系统致力于通过 AI 算法的落地,实现用户千人千面的个性化推荐,为用户带来不一样的听歌体验。 本次分享重点介绍 AI 算法在音乐推荐中的应用实践,以及在算法落地过程中遇到的挑战和解决方案。 将从如下两个部分展开: AI 算法在音乐推荐中的应用 音乐场景下的 AI 思考 从 2013 年 4 月正式上线至今,网易云音乐平台持续提供着:乐屏社区、UGC
【技巧总结】位运算装逼指南
位算法的效率有多快我就不说,不信你可以去用 10 亿个数据模拟一下,今天给大家讲一讲位运算的一些经典例子。不过,最重要的不是看懂了这些例子就好,而是要在以后多去运用位运算这些技巧,当然,采用位运算,也是可以装逼的,不信,你往下看。我会从最简单的讲起,一道比一道难度递增,不过居然是讲技巧,那么也不会太难,相信你分分钟看懂。 判断奇偶数 判断一个数是基于还是偶数,相信很多人都做过,一般的做法的代码如下
《C++ Primer》学习笔记(六):C++模块设计——函数
专栏C++学习笔记 《C++ Primer》学习笔记/习题答案 总目录 https://blog.csdn.net/TeFuirnever/article/details/100700212 —————————————————————————————————————————————————————— 《C++ Primer》习题参考答案:第6章 - C++模块设计——函数 文章目录专栏C+...
8年经验面试官详解 Java 面试秘诀
    作者 | 胡书敏 责编 | 刘静 出品 | CSDN(ID:CSDNnews) 本人目前在一家知名外企担任架构师,而且最近八年来,在多家外企和互联网公司担任Java技术面试官,前后累计面试了有两三百位候选人。在本文里,就将结合本人的面试经验,针对Java初学者、Java初级开发和Java开发,给出若干准备简历和准备面试的建议。   Java程序员准备和投递简历的实
面试官如何考察你的思维方式?
1.两种思维方式在求职面试中,经常会考察这种问题:北京有多少量特斯拉汽车? 某胡同口的煎饼摊一年能卖出多少个煎饼? 深圳有多少个产品经理? 一辆公交车里能装下多少个乒乓球? 一
so easy! 10行代码写个"狗屁不通"文章生成器
前几天,GitHub 有个开源项目特别火,只要输入标题就可以生成一篇长长的文章。背后实现代码一定很复杂吧,里面一定有很多高深莫测的机器学习等复杂算法不过,当我看了源代码之后这程序不到50
知乎高赞:中国有什么拿得出手的开源软件产品?(整理自本人原创回答)
知乎高赞:中国有什么拿得出手的开源软件产品? 在知乎上,有个问题问“中国有什么拿得出手的开源软件产品(在 GitHub 等社区受欢迎度较好的)?” 事实上,还不少呢~ 本人于2019.7.6进行了较为全面的 回答 - Bravo Yeung,获得该问题下回答中得最高赞(236赞和1枚专业勋章),对这些受欢迎的 Github 开源项目分类整理如下: 分布式计算、云平台相关工具类 1.SkyWalk
相关热词 c# clr dll c# 如何orm c# 固定大小的字符数组 c#框架设计 c# 删除数据库 c# 中文文字 图片转 c# 成员属性 接口 c#如何将程序封装 16进制负数转换 c# c#练手项目
立即提问