杂记

idea回撤过度使用：ctrl+shift+z提取变量为成员属性：ctrl+alt+f提取变量为方法参数：ctrl+alt+pctrl+shift+alt+n，查找类中的方法或变量

java8中map-reduce:@testpublicvoidtest2(){optionalsum=emps.stream().map(employee::getname).flatmap(teststreamapi1::filtercharacter).map((ch)->{if(ch.equals('六'))return1;elsereturn0;}).reduce(integer::sum);system.out.println(sum.get());}

collectors.tolist/toset/tocollection(hashset::new)将元素抓换到集合中collectors工具类中还有很多方法：groupingby(可以多级分组,在一级分组的前提下在分组)分区：partitioningby连接：join聚合：reducing

tcc分布式事务jxls实现报表rpc调用的返回结果一定要进行npe检查

在代码中使用“抛异常”还是“返回错误码”，对于公司外的http/api开放接口必须使用“错误码”；而应用内部推荐异常抛出；跨应用间rpc调用优先考虑使用result方式，封装issuccess、“错误码”、“错误简短信息”。说明：关于rpc方法返回方式使用result方式的理由：1）使用抛异常返回方式，调用方如果没有捕获到就会产生运行时错误。2）如果不加栈信息，只是new自定义异常，加入自己的理解的errormessage，对于调用端解决问题的帮助不会太多。如果加了栈信息，在频繁调用出错的情况下，数据序列化和传输的性能损耗也是问题。

日志打印要使用占位符，别用字符串拼接。异常信息应该包括两类信息：案发现场信息和异常堆栈信息。如果不处理，那么往上抛。正例：logger.error(各类参数或者对象tostring+"_"+e.getmessage(),e);

yyy.class.isannotationpresent(xxx.class)判断yyy是否含有xxx注解yyy.class.getannotation(xxx.class).value()获取value属性值isassignablefrom:判断一个class是不是另一个class本身或者父亲superclass.isassignablefrom(cls)&&!superclass.equals(cls)

numberutils/ioutils/fileutils/propertyutils

spring：web.xml中：springmvc的字符过滤器要优先配置前端控制器dispatcheservletorg.springframework.web.util.introspectorcleanuplistener1、此监听器主要用于解决java.beans.introspector导致的内存泄漏的问题

2、此监听器应该配置在web.xml中与spring相关监听器中的第一个位置(也要在contextloaderlistener的前面)3、jdk中的java.beans.introspector类的用途是发现java类是否符合javabean规范如果有的框架或程序用到了introspector类,那么就会启用一个系统级别的缓存,此缓存会存放一些曾加载并分析过的javabean的引用。当web服务器关闭时,由于此缓存中存放着这些javabean的引用,所以垃圾回收器无法回收web容器中的javabean对象,最后导致内存变大。而org.springframework.web.util.introspectorcleanuplistener就是专门用来处理introspector内存泄漏问题的辅助类。introspectorcleanuplistener会在web服务器停止时清理introspector缓存,使那些javabean能被垃圾回收器正确回收。spring自身不会出现这种问题，因为spring在加载并分析完一个类之后会马上刷新javabeansintrospector缓存,这就保证spring中不会出现这种内存泄漏的问题。但有些程序和框架在使用了javabeansintrospector之后,没有进行清理工作(如quartz,struts),最后导致内存泄漏true：springmvc支持异步，servlet3.0之后业务层不做异常处理，直接抛出，但是要做参数校验。控制层要分层catch处理异常，通常以json格式传输数据。@requestbody和@responsebody。spring的配置文件配置属性，是通过set方法进行的，所以在配置文件中配置的在bean类中并不一定有这个属性，而是setxxx方法spring初始化或者销毁的时候有三种方式处理：1.实现initializingbean/disposablebean接口2.在xml中配置bean的时候配init-method/destory-method3.使用@postconstruct和@predestory三者的顺序：constructor>@postconstruct>initializingbean>init-method

拓展：spring初始化顺序：1.实例化;2.设置属性值;3.如果实现了beannameaware接口,调用setbeanname设置bean的id或者name;4.如果实现beanfactoryaware接口,调用setbeanfactory设置beanfactory;5.如果实现applicationcontextaware,调用setapplicationcontext设置applicationcontext6.调用beanpostprocessor的预先初始化方法;（@postconstruct在它的前置处理器中执行）7.调用initializingbean的afterpropertiesset()方法;8.调用定制init-method方法；9.调用beanpostprocessor的后初始化方法;

加密及解密：对密钥保密，对算法公开密码分类：对称加密：加密解密密钥相同（对称密码算法）非对称加密：加密解密密钥不同（非对称密码算法）散列函数：验证数据完整性，长度不限制，哈希容易计算，散列过程不可逆（单向函数）、md5、sha、mac数字签名：osi安全体系：osi网络七层协议，对应的安全机制java的pojo中：如果属性是boolean类型，那么它优先调用isxxx方法，此时getxxx方法的优先级没有它高，如果没有isxxx，那么getxxx也是可以生效的。属性的名称不建议使用isxx开头，因为这样的话它的set方法会变成setxxx，get方式会isxxx.如果是boolean类型，那么它都是getxxx和setxxx.此时isxxx属性和xxx属性的方法会出现冲突。privatebooleanisfailure;publicbooleangetfailure(){returnisfailure;}

publicvoidsetfailure(booleanfailure){isfailure=failure;}privatebooleanissuccess;publicbooleanissuccess(){returnissuccess;}

publicvoidsetsuccess(booleansuccess){issuccess=success;}pojo中属性一般使用包装类，方法参数或者返回值一般使用基本数据类型。

redis相关：rename重命名key,会覆盖（renamenx重复会失败）key*:*是pattern

java中threadlocal对象其实就是一个map，key是线程对象，value是值，所以存储的value是放在堆中的，而不是栈中。耗费了内存，减少了线程之间同步带来的性能损耗，也减少并发的复杂度

跨域是由于浏览器的同源策略造成的安全限制。同源：协议+域名+端口要相同localhost和127.0.0.1虽然都指向本机，但也属于跨域浏览器执行javascript脚本时，会检查这个脚本属于哪个页面，如果不是同源页面，就不会被执行。ajax请求不允许跨域解决：1.jsonp只支持get请求，不支持post请求。2.代理，可以请求后端服务，让后端发出请求获取数据，自然可以跨过浏览器限制3.在过滤器或者拦截器中设置：//添加跨域corsresponse.setheader("access-control-allow-origin","*");//这里通常是request.getheader("origin")->获得请求的域名地址response.setheader("access-control-allow-origin",request.getheader("origin"));response.setheader("access-control-allow-headers","x-requested-with,content-type,token");response.setheader("access-control-allow-credentials","true");//允许ajax携带cookieresponse.setheader("access-control-allow-methods","get,head,post,put,delete,trace,options,patch");returntrue;cookie：构造方法提供name和value两个属性，默认的生命周期是-1，表示浏览器关闭cookie失效。cookie中保存中文要进行unicode字符编码（utf-8），如果保存二进制数据则要进行base64编码（不建议保存二进制数据）cookie中的path属性：如果设置成"/session/"，那么只有"/session"下的contextpath才能访问此cookie，一般设置为"/",注意最后一个字符是必须是"/"cookie中的domain属性：表示可以访问此cookie的域名，如设置成".google.com"，那么所有以"google.com"结尾的域名都可以，这里可以解决cookie跨域的问题，必须以"."开头泛型是要在实例化对象的时候可以指定，静态方式是不能使用泛型的comparable是在比较对象的内部进行比较，内比较，比较对象可以不是同一类，通过泛型指定comparator是一个比较器，在比较对象外部进行比较，然后比较的是同一类型，常用策略设计模式，不同场景使用不同的比较器不改变已有的，或者公共的，将不同的放入接口不同实现类中，这就是策略设计模式的主要用途，基于一个方法的不同表现的。而模板设计模式是基于父子类的，不同类的表现

bio:客户端与服务端建立连接通信数据，服务端针对每个读写请求建立一个线程处理，此时，数据有可能并未万全准备就绪，那么线程等待阻塞（由内核地址空间拷贝到用户地址空间）nio:当客户端注册到选择器上的通道数据完全准备就绪那么就会分配一个或多个线程去处理这些数据。

java7中引入fork/join框架，将一个大任务拆分成多个子任务分配到不同的队列中，队列和每个独立线程对应，线程完成任务之后，会将所有结果汇集。为了充分利用cpu资源，使用双端队列，采用工作窃取模式，先做完队列任务的线程回去别的队列尾部处理任务，而被窃取的线程会从头部处理任务，以减少线程访问共同数据产生的竞争。缺点：如果双端队列中只有一个任务，那么就会出现竞争，还有消耗了双端队列和创建多线程的资源timeunit.secound.sleep()睡眠java7之后可以在try()中进行资源管理，可以对资源进行自动释放，需要资源实现autocloseable接口

数据的可见性问题，可以使用synchronize同步锁来保证每次获取数据都会刷新内存，而使用volatile是一种轻量级的同步策略，性能会降低，指令不能重排序。volatile不具备互斥性，不能保证线程安全，也不具备原子性。hashtable的并发操作会出现线程等待，并行转串行，使用复合操作会出现问题，集合中有提供复合操作的类原子性：类似i++的操作，线程会先读取，然后操作写回去，这两个操作之间不具备原子性，所以会出现多线程访问的安全问题，使用原子变量代替juc中的并发操作依靠的是cas算法，compare-and-swap算法，有个方法compareandset。cas是一种无锁算法，依靠的是硬件cpu对并发的支持的一种指令

linux命令：less:向上一页：b向下一页：空格向上半页：u向下半页：d向上一行：k向下一行：jjava中的日志系统：slf4j和jcl都是日志门面，log4j/log4j2/logback/jul都是日志的具体实现jcl是通过动态查找的机制进行具体日志实现的装配，slf4j则是在编译的时候静态绑定真正的log库dubbo:服务分组：在中可以为服务提供分组功能，同一服务不同实现，可以划分到不同的组多版本：在中可以指定服务的版本号，同一服务，同一实现，不同版本。场景：针对一些接口的升级与老版本的调用dubbo中推荐使用zookeeper作为注册中心，使用dubbo协议暴露服务，底层用的netty作为数据传输框架，序列化用的是hessian，服务代理使用的是javaassistproxyfactory失败策略：失败重试：针对幂等操作失败抛错：针对非幂等操作失败安全（failsafe）:可以丢失数据，针对写日志的服务负载均衡策略：随机：不确定性比较大，可能会出现瞬时访问大的现象轮循：可以分配轮循权重，会出现慢的机器访问堆积最小活跃数：相同活跃数则随机一致性hash：相同的请求会到同一台服务，服务不可用会出现问题，在dubbo中，会用虚拟主机代替，但是这样会出现负载过高的现象dubbo可以为一个接口中的某个具体方法配置超时时间，也可以为具体的接口配置超时时间，或者整个消费者都可以，建议由服务提供方提供这样的配置dubbo和spring整合，定义一套xsd的约束文件，然后在meta-inf下面新建两个文件spring.handlers和spring.schemas，后者用于指定xsd文件目录，前者指定解析xsd的namespacehandler（命名空间处理器），所以其实以开头的这些东西就是生成一些bean对象dubbo在zookeeper上会将具体的服务接口全限定名为路径，然后子节点有providers，下面就是某个具体的服务信息，这些信息就是某个提供者节点的配置信息，拼接为url，encode之后存储在那个节点路径上spi类似策略设计模式，提供接口，具体的实现可以扩展，只要遵从他那种约定，一个接口下的所有插件功能都能遍历出来，指定目录下的扩展点dubbo的extensionloader读取扩展点的过程中用到了装饰者设计模式，判断接口实现类是否有@adaptve注解dubbo的spi是通过extensionloader来实现的，约定在meta-info/dubbo/接口全限定名，内容为配置名=接口实现类的全限定名，接口上有@spi注解使用方式有两种：1.手动指定2.自动生成手动指定：privatestaticfinalduspiduspi=extensionloader.getextensionloader(duspi.class).getextension("local");publicstaticvoidmain(string[]args){stringhi=duspi.sayhello("扩展spi");system.out.println(hi);}自动生成：unzipdubbo.war-droot：将dubbo.war解压并命名为rootsynchronized可以保证原子性和可见性，对于那些多线程操作对象，无顺序相关的可以不加volatile，如果有顺序相关，比如单例模式下，是会有问题的，所以加volatile，涉及到java指令重排，无序写入concurrenthashmap的putifabsent是当如果key存在的时候，什么都不做，而put方法是key相同，会覆盖

异常中的fillinstacktrace方法每次执行的时候，会清空原来栈内的trace信息，然后再当前调用位置处重新建立trace信息

maven多环境下:使用命令-pdev/-ptest指定不同环境比如：devdevtrue那么通过(在build节点下)src/main/filters/filter-${environment}.properties可以指定特定目录下的环境配置文件，默认是dev另外还要开启过滤，开启后,前面的环境专属配置加载才会有效src/main/resourcestrue这样在你的配置文件中可以使用${xxx}来加载你maven指定的那个环境下的配置文件，当然你也可以利用profile的properties属性来做例如：app.properties中有appurl=${url}，那么你可以指定xxx来指定还可以：mvncleanpackage-durl=localhost指定参考链接：https://www.cnblogs.com/zdd-java/p/6691380.html

fastjson的serializerfeature序列化属性：quotefieldnames———-输出key时是否使用双引号,默认为truewritemapnullvalue——–是否输出值为null的字段,默认为falsewritenullnumberaszero—-数值字段如果为null,输出为0,而非nullwritenulllistasempty—–list字段如果为null,输出为[],而非nullwritenullstringasempty—字符类型字段如果为null,输出为”“,而非nullwritenullbooleanasfalse–boolean字段如果为null,输出为false,而非nulljson.tojsonstring(hashmap,serializer选项)linux下nc命令可以用来访问远程ip端口，可以做端口扫描、文件拷贝等echoxx|nclocalhost80在cs模式下：server端：nc-l9876client端：ncip9876这样可以传输内容在此基础上，如果要传输文件：则server:nc-l9876>fileclient：catfile|ncip9876

spring中的depends-on可以解决bean初始化的依赖顺序，被依赖的bean会优先创建spring中有个applicationlistener接口可以实现，实现onapplicationevent方法，在spring容器加载bean完成之后进行初始化会调用这个方法publicvoidonapplicationevent(contextrefreshedeventevent){if(event.getapplicationcontext().getparent()==null){//初始化工作}}

线程池的处理任务策略：刚开始都是在创建新的线程，达到核心线程数量，新的任务进来后不再创建新的线程，而是将任务加入工作队列，任务队列到达上限后，新的任务又会创建新的普通线程，直到达到线程池最大的线程数量满了，后面的任务则根据配置的饱和策略来处理。我们这里没有具体配置，使用的是默认的配置abortpolicy:直接抛出异常。线程池的饱和策略：1、abortpolicy：直接抛出异常

2、callerrunspolicy：只用调用所在的线程运行任务3、discardoldestpolicy：丢弃队列里最近的一个任务，并执行当前任务。4、discardpolicy：不处理，丢弃掉。

zookeeper的客户端curator提供了丰富的操作apicurator中的interprocessmutex提供了重入锁功能，类似于java中的reentrantlock,还有读写锁mysql:showindexfromtable;showcolumnsfromtable;showcreatetabletablename;showengines;showtablestatusfromdatabase;selectvariableslike'%auto%';扩展，查询mysql元数据相关：selectversion();selectuser();selectdatabase();showstatus;showvariables;mysql支持多种类型，大致可以分为三类：数值、日期/时间和字符串(字符)类型null值处理：isnull/isnotnull正则：selectnamefromperson_tblwherenameregexp'^st';--以st开头的namemysql事务处理主要有两种方法：1、用begin,rollback,commit来实现begin开始一个事务rollback事务回滚commit事务确认2、直接用set来改变mysql的自动提交模式:setautocommit=0禁止自动提交setautocommit=1开启自动提交创建普通索引：createindexindexnameonmytable(username(length));创建唯一索引：createuniqueindexindexnameonmytable(username(length))mysql临时表在我们需要保存一些临时数据时是非常有用的。临时表只在当前连接可见，当关闭连接时，mysql会自动删除表并释放所有空间。createtemporarytablemysql复制表的步骤：showcreatetablexxx;把语句复制，更改表名到新表，然后insertintonew_table(xxx,xxx,xxx)selectxxx,xxx,xxxfromold_table;在mysql的客户端中你可以使用sql中的last_insert_id()函数来获取最后的插入表中的自增列的值。truncate和delete的区别：1.前者不能回滚，后者可以2.前者删除的比较彻底，所有日志都会没有，然后不能带where条件，自增id也会清零，delete则不会清零3.前者不会触发触发器，会删除索引mysql主从：（1）master将改变记录到二进制日志(binarylog)中（这些记录叫做二进制日志事件，binarylogevents）；//binlog线程记录（2）slave将master的二进制日志事件(binarylogevents)拷贝到它的中继日志(relaylog)；//io线程从监听主库二进制日志事件（3）slave重做中继日志(relaylog)中的事件，将master上的改变反映到它自己的数据库中。//sql线程重做innodb和myisam的几点不同：1.前者支持事务，后者不能2.前者支持行级锁，后者只能支持表级锁(锁的成本很少，但是并发性能低)3.前者支持mvcc，后者不能4.前者有外键支持，后者不能5.前者不支持全文索引，后者可以6.前者数据索引存放在一起，属聚簇索引，后者数据索引分开存储，属于非聚簇索引innodb的四大特性：插入缓冲（insertbuffer),二次写(doublewrite),自适应哈希索引(ahi),预读(readahead)数据的插入和更新是先插入缓冲区中，然后以一定频率插入非聚集索引的索引页中自适应哈希索引：由于innodb不支持hash索引，但是hash比较快，所以它内部会监控表上的索引查找，当发现建立hash索引可以提高性能，，则会自动建立hash索引，使用showengineinnodbstatusg查看使用情况，默认是开启的做count(*)的话myisam更快，因为myisam内部维护了一个计数器，可以直接调取。varchar与char的区别char是一种固定长度的类型，varchar则是一种可变长度的类型varchar(50)表示最多存放50个字符，varchar(50)和(200)存储hello所占空间一样，但后者在排序时会消耗更多内存，因为orderbycol采用fixed_length计算col长度(memory引擎也一样)事务是如何通过日志来实现的：事务日志是通过redo和innodb的存储引擎日志缓冲（innodblogbuffer）来实现的，当开始一个事务的时候，会记录该事务的lsn(logsequencenumber)号;当事务执行时，会往innodb存储引擎的日志的日志缓存里面插入事务日志；当事务提交时，必须将存储引擎的日志缓冲写入磁盘（通过innodb_flush_log_at_trx_commit来控制），也就是写数据前，需要先写日志。这种方式称为“预写日志方式”binlog里面只是记录改变数据的sqlinnodb是基于索引来完成行锁，例:select*fromtab_with_indexwhereid=1forupdate;forupdate可以根据条件来完成行锁锁定,并且id是有索引键的列,如果id不是索引键那么innodb将完成表锁,,并发将无从谈起索引：评判索引的优劣是io的渐进复杂度优势类似大学图书馆建书目索引，提高数据检索效率，降低数据库的io成本。通过索引对数据进行排序，降低数据排序的成本，降低了cpu的消耗。劣势：实际上索引也是一张表，该表保存了主键与索引字段，并指向实体表的记录，所以索引列也是要占空间的。虽然索引大大提高了查询速度，同时确会降低更新表的速度，如对表进行insert、update、delete。因为更新表时，mysql不仅要保存数据，还要保存一下索引文件每次更新添加了索引列的字段。都会调整因为更新所带来的键值变化后的索引信息。索引的分类：主键索引、唯一索引、普通索引、全文索引（仅仅myisamengine可用，针对大数据字段建立索引，比较耗时耗空间）、组合索引单值索引即一个索引只包含单个列，一个表可以有多个单列索引。唯一索引索引列的值必须唯一，但允许有空值。组合索引即一个索引包含多个列。为了更多的提高mysql效率可建立组合索引，遵循”最左前缀“原则。只有满足了最左前缀，后面才有可能使用多个索引创建复合索引时应该将最常用（频率）作限制条件的列放在最左边，依次递减。组合索引最左字段用in是可以用到索引的，最好explain一下select哪些情况需要创建索引：

①主键自动建立唯一索引

②频繁作为查询条件的字段应该创建索引

③查询中与其他表关联的字段，外键关系建立索引

④频繁更新的字段不适合建立索引，因为每次更新不单单是更新了记录还会更新索引

⑤where条件里用不到的字段不创建索引

⑥单键/组合索引的选择问题，who?(在高并发下倾向创建组合索引)

⑦查询中排序的字段，排序的字段若通过索引去访问将大大提高排序速度

⑧查询中统计或者分组字段

索引不会包含有null值的列：只要列中包含有null值都将不会被包含在索引中，复合索引中只要有一列含有null值，那么这一列对于此复合索引就是无效的。所以我们在数据库设计时不要让字段的默认值为null。mysql查询只使用一个索引，因此如果where子句中已经使用了索引的话，那么orderby中的列是不会使用索引的。因此数据库默认排序可以符合要求的情况下不要使用排序操作；尽量不要包含多个列的排序，如果需要最好给这些列创建复合索引。哪些情况不要创建索引:

①表记录太少

②经常增删改的表

提高了查询速度，同时却会降低更新表的速度，如对表进行insert、update、和delete。

因为更新表时，mysql不仅要保存数据，还要保存一下索引文件。

数据重复且分布平均的表字段，因此应该只为最经常查询和最经常排序的数据建立索引。③注意，如果某个数据列包含许多重复的内容，为它建立索引就没有太大的实际效果。

b+tree能控制树的高度，degree:指一个节点存放多个数据，degree越大，树的高度越低，查询速度越快，使用叶子结点储存数据，相邻叶子结点直接加了指针指向，便于范围查找btree它存的是一个个元组(key,data)，数据保存在所有节点上，是二元的myisam的数据和索引分开存储，从myi文件中定位索引，然后指向myd文件中的数据聚集索引是以主键为索引来组织数据的，数据存放在索引的数据结构上。如果要以非主键字段建立索引（副索引），那么这个索引存放的是主键，然后在主索引上找到数据b+tree插入整型数据会有数据的连续排列（空间局部性原理），插入uuid会随机，所以整型分配page内存会有优势，在读取策略上具有优势，推荐使用自增id,uuid产生页面分裂，在走索引比较的时候也要比整型要差myisam使用b-tree实现主键索引、唯一索引和非主键索引。

innodb中非主键索引使用的是b-tree数据结构，而主键索引使用的是b+tree。