002面试题_Switch...case的数据

面试题：获取大量数据中某一条的index

提问: 群里分享了一个面试题:页面里有很多条数据,怎么知道这条数据的index,并且不使用循环? 分析: 如果在数组里,直接用indexOf,但对于对象会比较麻烦. 在页面上,不使用循环的话,可以用定位来查询. 比如一个很整齐的列表: <!doctype html> <html lang="en"> <head> <meta charset="UTF-8"> <title>getIndex</titl…

[SQL]CASE用户数据统计

create table tb(id int ,class varchar)--class种类就只有三种,如果不固定就需要存储过程来实现 insert tb ,'a' union all ,'a' union all ,'b' union all ,'c' union all ,'a' union all ,'b' union all ,'b' select * from tb --想查找出按id分组得到的 a ,b ,c 的数量 -- 如下 --id a b c -- -- select id…

Spark面试题（五）——数据倾斜调优

1.数据倾斜数据倾斜指的是,并行处理的数据集中,某一部分(如Spark或Kafka的一个Partition)的数据显著多于其它部分,从而使得该部分的处理速度成为整个数据集处理的瓶颈. 数据倾斜俩大直接致命后果. 1.数据倾斜直接会导致一种情况:Out Of Memory. 2.运行速度慢. 主要是发生在Shuffle阶段.同样Key的数据条数太多了.导致了某个key(下图中的80亿条)所在的Task数据量太大了.远远超过其他Task所处理的数据量. 一个经验结论是:一般情况下,OOM的原因都是…

李洪强iOS经典面试题144-数据存储

李洪强iOS经典面试题144-数据存储数据存储 sqlite中插入特殊字符的方法和接收到处理方法. 除'其他的都是在特殊字符前面加"/",而 ' -> '' .方法:keyWord = keyWord.replace("/","//"); 什么是NSManagedObject模型? NSManagedObjcet是NSObject的子类,Core Date的重要组成部分.是一个通用类,实现了Core Date模型层所需的基本功能,用户…

TCP头分析+面试题

一.测试程序我们先用python来写两个测试脚本,非常简单,看代码: 服务端: from socket import * def accept(): sock = socket(AF_INET, SOCK_STREAM, 0) sock.bind(("127.0.0.1", 5000)) sock.listen(5) while True: pass if __name__ == "__main__": accept() 客户端: from socket impo…

走向DBA[MSSQL篇] 面试官最喜欢的问题 ----索引+C#面试题客串

原文:走向DBA[MSSQL篇] 面试官最喜欢的问题 ----索引+C#面试题客串对大量数据进行查询时,可以应用到索引技术.索引是一种特殊类型的数据库对象,它保存着数据表中一列或者多列的排序结果,有效地使用索引可以提高数据的查询效率.大家面试初级.中级或者高级程序员的时候应该大部分都会被问到这样一些问题,你了解索引吗?你知道索引的分类吗?你知道这些索引的区别吗?你如何去创建有效的索引.本章让大家学会反问面试官 hold住全场. --_____-- 友情客串最近面试的文章比较火客串一下我只…

使用kettle来根据时间戳或者批次号来批量导入数据，达到增量的效果。

1.Kettle是一款国外开源的ETL工具,纯java编写,可以在Window.Linux.Unix上运行,数据抽取高效稳定.下载图形化界面的zip包格式的,直接解压缩使用即可.安装部署模式这里不说了,自己可以根据自己的需求安装为单机模式或者集群模式. Kettle的社区官网:https://community.hitachivantara.com/docs/DOC-1009855 Kettle的下载地址:https://sourceforge.net/projects/pentaho/f…

ElasticSearch写入数据的工作原理是什么？

面试题 es 写入数据的工作原理是什么啊?es 查询数据的工作原理是什么啊?底层的 lucene 介绍一下呗?倒排索引了解吗? 面试官心理分析问这个,其实面试官就是要看看你了解不了解 es 的一些基本原理,因为用 es 无非就是写入数据,搜索数据.你要是不明白你发起一个写入和搜索请求的时候,es 在干什么,那你真的是...... 对 es 基本就是个黑盒,你还能干啥?你唯一能干的就是用 es 的 api 读写数据了.要是出点什么问题,你啥都不知道,那还能指望你什么呢? 面试题剖析 es 写数据…

简单的sql server->bs或cs数据交互模式

主要记录工作当中遇到的一些问题和总结的一些经验客户端请求-->web服务接口-->sql 语句执行(存储在数据库中)-->web服务(客户端通过调用web服务接口)-->返回DataTable或Dataset(sql server)--> 统一的DataTable或Dataset转换成对象-->提交给客户端(xml.json等等其他的) 1.首先通过sql语句返回结果,返回的结果一般都以Dataset的形式和DataTable的形式返回. 2.统一的DataTable…

【数据库】SQL经典面试题 - 数据库查询 - 子查询应用二

上节课我们通过子查询,完成了查询的最高分学生的需求,今天我们来学习子查询的分类,以及通过子查询来完成工作中经常遇到一些个性化需求. 子查询概念: 一个SELECT语句嵌套在另一个SELECT语句中,子查询也叫做内部查询,而包含子查询的语句又称为外部查询或主查询,子查询自身可以包含一个或多个子查询,一个查询语句中可以嵌套任意数量的子查询子查询可分类: 非相关子查询:独立于外部查询,子查询只执行一次,执行完将结果传递给外部查询相关子查询:依赖于外部查询的数据,外部查询每执行一次,子查询就执行一次…

HBase 入门笔记-数据落地篇

一.前言关于数据落地方面,HBase官网也有相关介绍.本文主要介绍一下实际工作中涉及的数据存储方面的一些经验和技巧,主要涉及表rowkey设计.数据落地方案二.表设计相对于MySQL等关系型数据库而言,HBase也有相应的类似库和表的概念,其中MySQL的库对应于HBase的NameSpace (0.95以上版本才支持), 表对应于HBase的表.对于NameSpace来说,HBase默认有两类:default和hbase, default中存放的实际数据的表,hbase中存放的是系统内建…

Java面试题(全)--视频系列

此系列为面试笔试题的视频讲解,以下均为超链接,点击即可进入每个知识点的讲解. Java面试题01.面试的整体流程 Java面试题02.java的垮平台原理 Java面试题03.搭建一个java的开发环境 Java面试题04.java中int占几个字节 Java面试题05.java面向对象的特征 Java面试题06.装箱和拆箱 Java面试题07.==和equals的区别 Java面试题08.String Java面试题09.讲一下java中的集合 Java面试题10.ArrayList 和Lin…

python后端面试题

1. 果壳电话面试: 说一下TCP的三次握手,四次挥手,为什么会这样? http安全的性的了解,说一下对cookie和session的了解: 对mysql的了解,说一下你常用的数据类型,char和varchar的区别? 说一下对线程.进程和协程的了解?协程的实现原理? 如果实现一个聊天室,不同的人发消息怎么所有人都看到?需要http长链接. 说一下对redis的简单了解. 2. 头条一面: 直接一个手写算法题,n个病人的看病时间,尽量平均的分给m个医生,求每个医生分的时间是多少: 一个数据库…

HDFS源码分析数据块汇报之损坏数据块检测checkReplicaCorrupt()

无论是第一次,还是之后的每次数据块汇报,名字名字节点都会对汇报上来的数据块进行检测,看看其是否为损坏的数据块.那么,损坏数据块是如何被检测的呢?本文,我们将研究下损坏数据块检测的checkReplicaCorrupt()方法. 关于数据块及其副本的状态,请阅读<HDFS源码分析之数据块及副本状态BlockUCState.ReplicaState>一文. checkReplicaCorrupt()方法专门用于损坏数据块检测,代码如下: /** * The next two methods tes…

Lily HBase Indexer同步HBase二级索引到Solr丢失数据的问题分析

一.问题描述二.分析步骤2.1 查看日志2.2 修改Solr的硬提交2.3 寻求StackOverFlow帮助2.4 修改了read-row="never"后,丢失部分字段2.5 修改代码2.6 重新打包分发三.结果四.思考一.问题描述部分业务需要使用HBase的数据进行多维度分析,我们采用了将部分数据同步到Solr,通过Solr进行多维度查询返回对应的Rowkey,再从HBase批量获取数据.因此我们使用了一个比较成熟的方案Lily HBase Indexer来同步二级索引到So…

C#--线程存储数据的机制

面试题:线程存储数据的机制 Local variables 局部变量临时存储栈 Instance class fields 对象存储堆 (堆的大小只有硬件的限制) Static local variables 多实例共享 (放在高频访问区) Vaiables [ ThreadStatic ](线程相关的静态变量) 单线程所有,只初始化一次 CallContext 跨应用程序域,会克隆传递 ThreadLocalStorage 每个线程初始化一次(用到的是数据槽的机制,这个存储的地方不一定在…

MySQL经常使用的面试题

1.怎样登陆mysql数据库 MySQL -u username -p 2.怎样开启/关闭mysql服务 service mysql start/stop 3.查看mysql的状态 service mysql status 4.怎样显示数全部数据库 show databases 5.怎样获取表内全部字段对象的名称和类型 describe table_name; 6.MYSQL支持事务吗? 在缺省模式下,MYSQL是autocommit模式的,全部的数据库更新操作都会即时提交,所以在缺省情况下.m…

Kafka数据安全性、运行原理、存储

直接贴面试题: 怎么保证数据 kafka 里的数据安全? 答: 生产者数据的不丢失kafka 的 ack 机制: 在 kafka 发送数据的时候,每次发送消息都会有一个确认反馈机制,确保消息正常的能够被收到. 如果是同步模式:ack 机制能够保证数据的不丢失,如果 ack 设置为 0,风险很大,一般不建议设置为 0 如果是异步模式:通过 buffer 来进行控制数据的发送,有两个值来进行控制,时间阈值与消息的数量阈值,如果 buffer 满了数据还没有发送出去,如果设置的是立即清理模式,风险很大…

ORA-01578: ORACLE 数据块损坏 (文件号 10, 块号 57896)ORA-01110: 数据文件 10: '/data/oradata/prod35.dbf'

https://community.oracle.com/thread/3540795 概述 ------------- 数据库坏块(corruption) 的类型可以按照坏块所属对象的不同,分为用户数据坏块,数据字典坏块,Undo坏块,控制文件坏块,Redo坏块,Lob坏块,index坏块等等:也可以按照坏块产生的原因,分为物理坏块(physical corruption)和逻辑坏块(logical corruption ). 本文主要讨论用户数据发生物理坏块(physical corrupt…

NKOJ3485 【2015多校联训4】数据

问题描述 Mr_H 出了一道信息学竞赛题,就是给 n 个数排序.输入格式是这样的:试题有若干组数据.每组数据的第一个是一个整数 n,表示总共有 n 个数待排序:接下来 n 个整数,分别表示这n 个待排序的数.例如:3 4 2 –1 4 1 2 3 4,就表示有两组数据.第一组有3 个数(4,2,-1),第二组有4个数(1,2,3,4).可是现在Mr_H 做的输入数据出了一些问题.例如:2 1 9 3 2 按理说第一组数据有2 个数(1,9),第二组数据有3 个数,可是“3”后面并没有出现三个数,…

在 Fabric 中使用私有数据

本教程将演示收集器(collection)的使用,收集器为区块链网络上已授权的组织节点提供私有数据的存储和检索. 本教程假设您已了解私有数据的存储和他们的用例.更多的信息请参阅私有数据 . 本教程将带你通过以下步骤练习在 Fabric 中定义.配置和使用私有数据: 创建一个收集器的 JSON 定义文件使用链码 API 读写私有数据安装和初始化带有收集器的链码存储私有数据使用一个授权节点查询私有数据以授权节点的身份查询私有数据清除私有数据使用私有数据索引其他资源本教程将使用 …

MOOC（7）- case依赖、读取json配置文件进行多个接口请求-解决用例间依赖问题（17）

最最重要,处理case依赖.字段依赖 # -*- coding: utf-8 -*- # @Time : 2020/2/13 21:14 # @File : data_depend_17.py # @Author: Hero Liu from day_20200208_mooc.tools.do_excel_openpyxl_14 import DoExcel from day_20200208_mooc.base.interface_request_class_5 import RunMain…

Spark面试题（七）——Spark程序开发调优

Spark系列面试题 Spark面试题(一) Spark面试题(二) Spark面试题(三) Spark面试题(四) Spark面试题(五)--数据倾斜调优 Spark面试题(六)--Spark资源调优 Spark面试题(七)--Spark程序开发调优 Spark面试题(八)--Spark的Shuffle配置调优 1.程序开发调优 :避免创建重复的RDD 需要对名为"hello.txt"的HDFS文件进行一次map操作,再进行一次reduce操作.也就是说,需要对一份数据执行两次算子操…

Spark面试题（八）——Spark的Shuffle配置调优

Spark系列面试题 Spark面试题(一) Spark面试题(二) Spark面试题(三) Spark面试题(四) Spark面试题(五)--数据倾斜调优 Spark面试题(六)--Spark资源调优 Spark面试题(七)--Spark程序开发调优 Spark面试题(八)--Spark的Shuffle配置调优 1.Shuffle优化配置 -spark.shuffle.file.buffer 默认值:32k 参数说明:该参数用于设置shuffle write task的BufferedOutp…