从0开始创建环境(spring mvc)【过期】

创建web项目

从0开始创建环境(struts2)

用的人越来越少就不写了

核心配置文件:anyline-config.xml

核心配置文件

密钥配置文件:key.xml

密钥配置文件

分页配置文件:anyline-navi.xml

分页配置文件

支付宝配置文件:anyline-alipay.xml

支付宝配置文件

阿里云对象存储配置文件:anyline-aliyun-oss.xml

阿里云对象存储配置文件

阿里云短信配置文件:anyline-aliyun-sms.xml

阿里云短信配置文件

高德配置文件:anyline-amap.xml

高德配置文件

环信配置文件:anyline-easemob.xml

环信配置文件

极光推送配置文件:anyline-jpush.xml

极光推送配置文件

邮件发送配置文件:anyline-mail.xml

邮件发送配置文件

QQ公众平台配置文件:anyline-qq-mp.xml

QQ公众平台配置文件

QQ开放平台配置文件:anyline-qq-open.xml

QQ开放平台配置文件

微信公众平台配置文件:anyline-wechat-mp.xml

微信公众平台配置文件

微信开放台配置文件:anyline-wechat-open.xml

微信开放台配置文件

微信H5环境配置文件:anyline-wechat-wap.xml

微信H5环境配置文件

数据结构:DataRow

DataRow对应数据库中的一行数据内部是一个Map结构,Map的key对应了表的列名,一般通过anyline-config.IS_UPPER_KEY=true来设置返回值以大写key存储 DataRow提供了一些默认的数据操作方法 public DataRow addPrimaryKey(String ... pks) 添加主键,DataRow默认以ID作主

数据结构:DataSet

DataSet

al:checkbox实现开关复选框

是否开放 input type="checkbox" id="chk_fn" name="fn" value="1" /label for="chk_fn"是否开/label 标签实现: al:checkbox data="{1:是否开放}" name="fn" id="chk"/al:c

al:checkbox实现多选框

高级 中级 初级 div class="al-chk-item-border" input type="checkbox" value="1" id="lvl_1" checked="checked" name="lvl"/label for="lvl_1" class="al-chk-item-label"高级/

al:checkbox根据集合数据源实现多选框

高级 中级 初级 div class="al-chk-item-border" input type="checkbox" value="1" id="lvl_1" checked="checked" name="lvl"/label for="lvl_1" class="al-chk-item-label"高级/

al:checkbox 自定义value key与text key

根据集合数据源生成checkbox时，默认情况下会取集合中条目的ID值作为input的value值，取条目的NM值作为label的标签体 但数据源经常是从数据库中查询出来的，列中并不一定有ID和NM，也有可能是CODE,TITLE或其他情况 这时需要显式指定value key与text key al:checkbox data="${set }" valueKey="

al:checkbox根据集合数据源确定默认选中项

根据集合数据源确认默认选中项时，默认情况下会取集合中条目的ID值，选项中的value值在数据源中出现时则选中当前项 但数据源经常是从数据库中查询出来的，列中并不一定有ID，也有可能是CD 这时需要显式指定根据哪一列或哪一个属性的值来确认默认选中项 al:checkbox data="${set }" valueKey="CODE" textKey="TITLE"  value

al:checkbox生成临时选项

待定 高级 中级 初级 在根据集合数据源生成多选框时，经常需要生成一个数据源中没有的默认项， 如数据源中只有高级、中级、初级三个选项，但收集数据时需要一个待定，这时需要在生成标签时指定一个默认项  al:checkbox data="${set }" head="默认" name="lvl"/al:checkbox&

al:checkbox自定义选中条件

通过集合数据源生成checkbox时，有时需要根据某一列表值设置默认选中 如所有级别为A的条目默认选中 DataSet set = new DataSet(); set.add(DataRow.parseJson("{''''''''ID'''''''':''''''''1'''''''',''''''''NM'''''''':''''''''ZH'''''''',''''''''LVL'''''''':''''''''A''''''''}")); set.add(DataRow.parseJson("{''''''''I

al:checkbox自定义样式

默认情况下生成的标签在最外层有div包围，如果是多选框则每个条目外也有div包围 可以通过clazz="item"设置每个条目外层div的class，通过borderClazz="border"设置最外层div的class 如果不需要外层div可以通过border="false"取消

al:checkbox设置data-*属性

set.add(DataRow.parseJson("{''ID'':''1'',''CODE'':''01'',''NM'':''高级'',''TITLE'':''高级工工程师'',''LVL'':''A''}")); set.add(DataRow.parseJson("{''ID'':''2'',''CODE'':''02'',''NM'':''中级'',''TITLE'':''中级工

AnylineService

运行时取值表达式

针对select，checkbox等标签

DataSet实现分组，合并

DataSet实现行转列，分组，合并

spring多数据源配置

在XML中配置 bean id="ds_base" class="com.alibaba.druid.pool.DruidDataSource" !-- 配置初始化大小、最小、最大 -- property name="initialSize" value="5" / property name="minIdle"

动态注册多数据源

动态注册多数据源

DataSet实现行转列

pivot

al:text

java: String key ="NM"; DataRow row = new DataRow(); row.put(key,"张三"); DataSet set = new DataSet(); set.add(row); jsp: al:text data="${row}" property="NM"/ 取row中的NM列

JSP遍历标签中按下标取值

在中经常需要取上一条或下一条的数据，但jstl中并没有提供相应的标签，可以通过来实现     当前行姓名:${item.NM}     上一行姓名:

JSP标签中动态属性

静态属性一般通过EL表达式就可以实现 如${user.NM} 而实际开发过程中NM属性经过是动态值，此时可以通过<al:text>标签实现 如:<al:text data="${user}" property="${key}"/>

为什么有时update sql不执行

如果DataRow是通过查询数据库创建的，并且其中的值没有更新，则执行service.update时不会执行更新SQL

关于生成水印位置偏移

WatermarkUtil实现水印添加 主要通过设置x,y坐标实现水印定位 默认以左上为(0,0)起始位置往右下偏移 如果设置xy为负数则从右下为(0,0)起始位置往左上偏移 xy默认为起始位置的偏移像素数量， 如果设置xy为小数则按长或宽的百分比计算偏移量如wihth=100,x=0.5则按左侧偏移50(100*0.5)像素 WatermarkUtil util = new 

视频截图

视频截图需要依赖anyline-video 取第index帧截图 VideoUtil.frame(videoFile,imgFile,indx); 取中间帧截图 VideoUtil.frame(videoFile,imgFile);

需要清空内容的列没有更新

默认情况下内容为空的列(“”或null) 不会出现在UPDATE SQL中

分页查询之AJAX分页

AJAX分页一般需要 1.结构页面 2.数据页面 每个页面一般对应后台的Controller为其提供必要数据 大体流程一般是 1.访问结构controller  2.结构controler打到对应的结构页面 3.结构页面发起ajax请求到数据controller 4.数据controller查询数据并调用数据页面生成html结构返回到浏

Spring MVC，Maven环境配置

添加依赖 !-- Spring MVC -- dependency groupIdorg.anyline/groupId artifactIdanyline-springmvc/artifactId version${anyline.version}/versi

数据库操作

org.anyline.service.AnylineService提供了常用的数据库操作接口，其中insert,update,delete,execute比较简单也容易理解 而select操作相对灵活的多， public DataSet selects(String src, ConfigStore configs, String ... conditions); public Data

SpringBoot环境

添加依赖 org.anyline anyline-mvc&

关于必须条件

 以“+”开头表示当前条件必须拼接 如condition("+NM:nm") 如果客户端提供了nm值，如http://localhost?nm=zh 则正常生成SQL:  SELECT * FROM TAB WHERE NM = 'zh' 如果没有提供nm值,如如http://localhost或 http://local?nm= 则生成SQL: 

关于IN条件

关于IN条件

关于默认值

关于默认值

关于or

OR条件构造相关复杂 可以根据http参数生成OR条件 或在java中取值生成OR条件

关于like

关于like

删除空值

删除空值

替换空值

替换空值

把部门=D的所有用户,分组设置成G

把部门=D的所有用户,分组设置成G

关于DataRow中key的大小写

关于DataRow中key的大小写

关于分页后退保持页数

关于分页后退保持页数

DataSet中cut与truncate区别

cut与truncate都是根据条件截取

save与insert区别

save与insert区别

DataSet.select选择器

DataSet.select选择器,可以实现类似SQL的查询

递归提取对象中的value

BeanUtil.extract()递归提取对象中的value DataRow.get()函数实现同样的功能

关于微信配置文件白名单设置

关于微信配置文件白名单设置SERVER_WHITELIST

关于al:number中的def与evl

关于al:number中的def与evl

关于al:date中的nvl与dev

关于al:date中的nvl与def

HttpUtil访问https的问题

HttpUtil访问https的问题，SunCertPathBuilderException：unable to find valid certification path to requested target

DataSet交集

DataSet交集

Nacos配置文件

Nacos配置文件

查询DataSet中CODE in(1,2,3)的子集

set.select.in("CODE",1,2,3)

查询DataSet中PRICE>100的子集

set.select.greater("PRICE",100)

查询DataSet中NAME以‘张’开头的子集

set.select.like('NAME','张%') set.select.startWith('NAME','张')

查询DataSet中AGE在20到30之间的子集

set.select.between('AGE',20,30)

移除set中指定条件的子集

先通过set.select过滤出符合移除条件的子集，再通过set与子集取差集

DataSet按条件过滤

DataSet按条件过滤

DataSet移除每个条目中指定的key

DataSet移除每个条目中指定的key

DataSet截断

从begin开始截断到end,方法执行将改变原DataSet长度 如果输入负数则取后n个,如果造成数量不足，则取全部

DataSet筛选不重复的数据

DataSet筛选不重复的数据

DataSet计算总和

DataSet计算总和

DataSet计算平均值

DataSet计算平均值

DataSet取最大值最小值

DataSet取最大值最小值

DataSet提取集合中一列并拼接成String

DataSet提取集合中一列并拼接成String

DataSet抽取指定列生成新的DataSet

抽取指定列生成新的DataSet

DataSet合并两个集合

set1与set2合并生成新的集合 DataSet set = set1.unionAll(set2) 合并不重复的集合，根据ID,CODE判断是否重复 DataSet set = set1.union(set2,"ID","CODE")

DataSet实现垂直水平分组合计

M L S 合计 纯白 20 20 200 240 天蓝 30 60

查询时设置主键

查询时设置主键

颜色尺寸二维数组交叉表格(DataSet实现垂直水平分组合计)

table tr class="stat" td尺寸/td c:forEach var="size" items="${sizes}" td class="number-cell"${size.NM

SpringBoot环境(前后分离)

前后分离的项目不需要依赖anyboot(anyboot中的包主要用来支持JSP) 添加依赖 org.anyline anyline-mvc

springboot多数据源配置

spring.datasource.driver-class-name=com.mysql.cj.jdbc.Driver spring.datasource.driverClassName=com.mysql.cj.jdbc.Driver spring.datasource.driver=com.mysql.cj.jdbc.Driver spring.datasource.url=jdbc:mys

切换数据源

//用表示数据源,执行完成后会自动切换回默认数据源 service.query("crmcrm_customer"); service.query("HR_DEPARTMENT"); //这里查的还是默认数据源 service.query("erpmm_material"); try { //动态注册一个数据源 //数

DataRow key不区分大小写设置

如果设置了keyCase = KEY_CASE.SRC,并且配置文件中设置true 在执行get时不区分key大小写并忽略-与_,但是DataRow中可以put多个key如(USER_ID,userId,UserId),取值是取最后put的值 其他情况在put和get时会强制转换k

压缩文件

压缩文件

删除压缩包中的指定文件

删除压缩包中的指定文件

读取压缩包中的文件内容

读取压缩包中的文件内容

替换压缩包中的文件

替换压缩包中的文件

向压缩文件中追加文件

向压缩文件中追加文件

al:ajax

al:base

al:checkbox

用来生成<input id="op" type="checkbox" value="1"/><label>是否开放</label>标签 属性 是否必须 说明 data true 数据源，一

al:config

al:contains

al:date

al:division

al:ellipsis

al:else

al:escape

al:evl

al:if

al:message

al:minute

al:money

al:navi

用来实现jsp或ajax方式分页 url ;//数据来源 param ;//参数收集函数 container ;//返回内容显示容器 body ;//返回内容显示容器class或id(如果body与page分开) cur ;//当前页 page ;//返回内容显示容器class或id(如果body与page分开) bodyContainer ;//如果body与page分开

al:number

al:nvl

al:omit

al:param

al:radio

al:random

al:replace

al:select

al:serial

al:strip

al:substring

al:sum

al:text

<al:text></al:text>

al:delay

al:unescape

des:key

des:value

des:param

des:url

des:as

des:a

这个标签用一般来加密url参数 原文:<a href="/a.html?id=1">连接</a> <des:a href="/a.html?id=1">连接</des:a> 生成密文 <a href="/a.html?id=密文">连接</a>

des:input

des:textarea

seo:head

seo:keywords

aliyun:oss

weixin:auth

weixin:config

weixin:pay

weixin:check

html转word

html转word基于office open xml与poi等第三方工具无关 可以用来替换书签、${key}格式的占位符

DataSet实现行转列(多维)

DataSet实现行转列(多维)

DataSet实现行转列

DataSet实现行转列

DataRow根据表结构接收参数值

如果有实体类的话,可以根据实体类的属性来接收url中的参数值。 而entity()函数则是根据表结果来接收 DataRow row = entity("{HR_USER}"); DataRow row = entity(TableBuilder.init("HR_USER")); 默认情况下列名与参数名一致。 实际开发中前端提交的数据经常是小驼峰格式，可以在anyline-config.xml配置

entity()接收加密数据

如果前端提交的参数是加密后的值，需要这样解密 DataRow row = entity("ID:id+"); 与getParam("id", true)效果一样

前端未提交数据情况下清空一列值

默认情况下前端不传值时，执行update时并不更新这一列 如 DataRow row = entity("ID:id","REMARK:remark","NAME:name"); service.save(row); 这时如果没有提交remark参数值，或remark值为空时，并不更新REMARK列 但有些情况下是前端需要清空一个属性值，有以下种方式 1.提交一个"NULL"的值 2.指定必须更新

DataSet清空集合中指定列为空的条目

DataSet set = service.querys("HR_USER"); 清空set中DEPT_ID和SORT_ID都为空(包括null和"")的行 public DataSet removeEmptyRow(String... keys) set.removeEmptyRow("DEPT_ID","SORT_ID"); 清除指定列全为空的行,如果不指定keys,则清除所有列都为空(包括n

默认缓存

AnylineService默认集成了ehcache缓存、需要先在ehcache.xml中配置缓存 service.query("缓存key","表名","查询条件") 与查询数据库参数一致

读取Excel

org.anyline.poi.excel.ExcelUtil提供了读取excel的工具, file:需要读取的文件 sheet:需要读取的sheet名称或下标 rows:从第几行开始读取 返回二维ListListString /** * 读取指定Sheet也的内容 * @param file file 文件 * @param sheet she

导出excel

导出excel两种情况：有模板或没有模板 如果没有模板直接导出一个新文件 如果有模板则在原模板基础上追加内容 如果模板文件中有多个sheet一般是先复制一个新文件，再调用多次没有模板参数的export(File file, String sheet, int insert, ListStringheaders, ListString keys, DataSet se

导出EXCEL合并单元格

注意这里说的是需要合并单元格的情况。如果不需要合并的不需要builder 直接调用 export(File template, OutputStream os, DataSet set, String ... configs)

读取合并单元格的excel值

读取被合并行的单元格时，会从当前合并组中取第一个单元格的值 以上读取结果[[11, 12, 13], [21, 22, 23], [21, 32, 33]]

关于分页数据结构的设计

当我们把分页信息放在结果集内部，而非用分页对象包裹结果集时，触发的不只是一次结构重组——而是一整条架构决策链的根本性重定向。

为什么不推荐实体Bean

1.不利于抽象设计。 比如要设计一个求和的函数。如果基于实体Bean应该类似这样sum(List beans, "属性")，很明显需要动用反射，在几条数据的测试环境一性能可以接受，但在生产环境中就不一样了。 2.不利于数据拆分 比如只需要查询或保存ID,NAME两个属性时，整个实体作为参数传过来，又需要反射，需要挨个判断。

生成手机通讯录

把手机号或手机号+姓名生成手机通讯录格式，再把生成的内容保存成文件，发送到手机中，打开即可导入手机通讯录

一维数组转成DataRow 二维数组转成DataSet

通常情况下是把Bean或Map转成DataRow，把Bean和Map的集合转成DataSet 但有些情况下如从excel中读取数据，读取出来的结果是List>结构，并没有列名或属性名，只是按下标顺序排列。 这时操作List就比较原始，如分组，排序等都需要重写。 所以可以转成DataSet，这样可以利用DataSet的方法对结果集进行去重、分组等

往同一个excel中写多个sheet

public static boolean export(File file, String sheet, int rows, DataSet set, String ... configs) 如果文件存在则在当前文件中插入数据，如果文件不存在则新创建文件 这里的sheet如果在file中已存在，则往这个sheet中插入数据，如果不存在则新创建sheet再继续插入数据，其他重载函数规则相

替换DataSet,DataRow中所有空值(null,'')

将所有列中的空值替换成value public DataSet replaceEmpty(String value)

将所有列中的oldChar替换成newChar

将key列中的oldChar替换成newChar public DataSet replace(String key, String oldChar, String newChar)   将所有列中的oldChar替换成newChar public DataSet replace(String oldChar, String newChar) 

关于DataRow的复合KEY

许多情况下需要从DataRow中取多个值合并显示。如导出excel时地址列需要合并省市区详细地址 DataRow可以取多个值拼接，但DataSet则需要遍历，非常麻烦 DataRow提供了复合KEY取值的函数 如{ID:1,CODE:A01,NAME:张三} row.getString("{ID}-{CODE}")可以取出   1-A01 row.getString(

关于DataRow中get与getString的区别

DataRow中get是覆盖了父类Map的get getString在get的基础上增加了复合KEY的支持，如getString("{ID}/{CODE}")

导出EXCEL带序号

导出excel时如果每行需要一个序号可以用${num}来代替属性名，如 export(file,  list, "序号:{num}","姓名:NAME","年龄:AGE") 1 张三 20 2 李四 22

导出EXCEL中的序号合并单元格

在导出excel时有可能不是每行一个序号，而是每组一个序号，如按部门分组，每个部门一个序号

设置所有合并单元格的对齐方式

设置所有合并单元格的对齐方式

设置指定列的对齐方式

设置指定列的对齐方式

设置所有空值单元格对齐方式

有些情况下，需要把空值替换成其他固定的符号如(/) 这时可以设置这些单元格的对齐方式 TableBuilder.init() .setEmptyCellVerticalAlign("top") .setEmptyCellHorizontalAlign("center")

设置单元格默认边框

TableBuilder.init()..setCellBorder(true)

从人员列表的DataSet中，查出所有不重复的部门名称

DataSet set = service.query("HR_USER"); set.distinct("DEPARTMENT_NM"); //这里返回的还是人员列表，但一个部门只返回一个 .concat("DEPARTMENT_NM"); //这里返回String并以逗号分隔:部门A,部门B ListString departments = set.getDistinctStrings("DEPARTMENT_NM"); //这里返回一个不重复的部门名称List

导出复杂的表格需要借助TableBuilder先生成Table，再将Table导出到excel中

导出复杂的表格需要借助TableBuilder先生成Table，再将Table导出到excel中 {num}表示序号,(DEPARTMENT_NM)表示根据哪一列计算序号，这里部门名称需要分组合并，所以num不是按行计算 "YM(DEPARTMENT_NM)" //如果月份相同则合并，前提是部门已经合并

最简单的导出一个列表,如果文件已存在，则在原文件内容基础上插入行

最简单的导出一个列表,如果文件已存在，则在原文件内容基础上插入行 如果表头、表尾格式比较复杂，可先创建模板，再根据模板导出 根据模板导出时就不需要指定表头了，只要对应好顺序，并计算好从哪一行开始写入

读取合并单元格的excel

遇到合并单元格的，将拆分开未合并前的状态，拆分后补上每个单元格的值 返回的是一个二维数组

导出excel,多个sheet

//默认情况下导出的第0个sheet也就是sheet1 //如果要导出到多个sheet需要执行多次export导出到同一个文件,每次执行时指定sheet名称或下标 Table table = null; File file = new File(dir, "export_sheet.xlsx"); ExcelUtil.export(file, "shet1", table); ExcelUtil.

html代码中抽取指定标签

获取所有超链接(a标签) 提取单标签+双标签 不区分大小写 0:全文 1:开始标签 2:标签name 3:标签体 (单标签时null) 4:结束标签 (单标签时null) 注意标签体有可能是HTML片段，而不是纯文本

html中抽取标签时嵌套问题

从html中抽取多个标签，如需要抽取a标签和li标签 最简单的是抽取两次 RegularUtil.fetchAllTag(html,"a") RegularUtil.fetchAllTag(html,"li") 但这样有个问题，两个标签的顺序会乱， 如果需要保持顺序可以通过RegularUtil.fetchAllTag(html,"a","li"); 但是一定注意:这里

从html源码中截取字符串

放多情况下我们并不需要复杂的标签内容，只需要截取几个关键字 如提取商品名称和商品价格,而这两个值有可能是根其他内容混在一块的

关于DataRow parse xml与parse json区别

json结构相对简单每一对key value可以直接存入DataRow *{name:zhang,age:20} 对应: row.put("name","zhang"); row.put("age",20); 但xml比json多了一个attribute,这个attribute不直接存入DataRow 面是存入attribute

读取带表头表尾的excel

读取带表头表尾的excel 读取第1个sheet(下标从0开始) 表头在第0行,如果没有表头，结果集以下标作为key 数据从第1行开始 到第几行结束(如果负数表示 表尾有多少行不需要读取)

AnylineService注入失败

还有可能没有依赖spring-jdbc，因为anyline以是provided形式依赖的，是为了方便项目修改版本。（更多provide依赖参考这里） 如果是spring-mvc项目可以依赖这个 <dependency> <groupId>org.springfram

关于几种OR条件查询的情况

//以下三种格式,只有cd取值成功时，条件才生效 //当cd=1,id=2时 WHERE CODE = 1 OR CODE =2 //当cd=null,id=2时 条件不生效 //当cd=1,id=null时 WHERE CODE = 1 service.querys("HR_USER", condition("CODE:cd|id")); //当cd=1时 WHERE CODE =1 OR

关于merge与join的区别

关于merge与join的区别

不同环境下的配置文件

以anyline-aliyun-sms为例，每个工具类都会对应一个配置类与默认实例化类 如SMSUtil对应SMSConfig与SMSBean SMSConfig用来配置帐号密码等 SMSBean用来在系统启动中往Spring上下文中注入一个默认的SMSUtil实例 SMSUtil就是开发中常用的工具了，如发送短信、查询短信接收状态、创建短信模板等 其中SMSC

从列式数据库中取出坐标数据，格式化成地图轨迹需要的数据

轨迹原始数据(保存在列式数据库或thingsboard平台上) lng=[{"ts":1655007789001,"value":120.1}, {"ts":1655007759002,"value":120.2}], lat=[{"ts":1655007789001,"value":36.1}, {"ts":1655007759002,"value":36.2}] 通过org.anyline.

DataSet拆分

有些情况下需要对DataSet分组处理。如：查询出2000个手机号，如果一短信平台一次只能发500个 List list = set.split(set.size()/500); for(DataSet items:list) { List mobiles = items.getDistinctStrings("mobile"); //

IN条件下多种参数格式的接收

对于标准的url格式 /list?id=1&id=2 以及标准的json格式 {id:[1,2]} 可以通过condition("ID:[id]")的形式接收 对于非标准格式如 /list?id=1,2 可以通过condition("ID:[split(id)]")的形式接收 最终都是生成SQL  WHERE ID IN(1,2)

excel根据内容定位单元格

excel根据内容定位单元格，支持正则表达式，

关于日期类的链式操作

String ymd = DateBuilder.init().addYear(1).addDay(-1).format("yyyy-MM-dd");

几个常用的配置参数

//DataRow的key大小写(默认大写) DataRow.DEFAULT_KEY_KASE = KeyAdapter.KEY_CASE.LOWER; //http分页参数-当前当前第几页(默认page) PageNaviConfig.DEFAULT_KEY_PAGE_NO = "pageNum"; //http分页参数-每页多少条(默认vol) PageNaviConfig.DEFAULT_K

关于分页参数

默认的分页参数名比较长: public static String DEFAULT_KEY_PAGE_ROWS = "_anyline_page_rows" ; //设置每页显示多少条的key public static String DEFAULT_KEY_PAGE_NO = "_anyline_page" ; //设置当前第几页的key public static

get(String key)与getString(String key)的区别

get(String key)与Map的get(String key)效果一样 getString(String key)支持表达式 getString("${ID}-${NAME}")

0.配置maven.POM环境

通常需要3个依赖(纯java环境只需要前2个) (1).相关数据库适配器(负责根据不同数据库生成不同的命令) (2).数据库官方驱动(负责连接数据库，执行1行成的命令) (3).运行环境(负责自动注入实例，如spring,solon,vertx)(如果是纯Java环境就不需要这个了)

DataSet构造多级树型结构

//先取出完整列表 DataSet set = service.querys("SYS_AREA"); //ID:主键 BASE_ID:表示上一级ID的列名 set.dispatchs(true,true, "ID:BASE_ID"); set.dispatchs("children",true,true, "ID:BASE_ID");​ //执行完成后会把每个DataRow中存入当前DataRow的下一级 //这里会生成多个树型结构，一般需要根据ID取出最顶级的DataRow set.getRow("ID",1);

关于自动检测表结构

在执行数据库操作时，许多参数是以String形式获取到的,无法参数识别数据类型，如url中的参数 还有一些数据类型在Java中没有对应关系,如xml/josn/几何图形等 而有些数据库在执行SQL时会执行强类型检测。 不像我们平时用的MySQL在执行时会进行隐式转换，无论什么类型只要能转换成功就可以执行。 而PostgreSQL则要求jdbc参数与表结构对应，如果在va

关于更新部分属性(列)、忽略部分属性(列)

在实际操作中经常需要更新指定的列，或者忽略更新指定的列

关于insert或update时确定哪些列参与到insert或update中

关于insert或update时确定哪些列参与到insert或update中

关于neo4j返回值的数据结构

MATCH (n:User) RETURN n; [ {n:{id:1,name:''}}, {n:{id:2,name:''}}, {n:{id:3,name:''}} ] 而 service.querys("User"); 返回 [ {id:1,name:''}, {id:2,name:''}, {id:3,name:''} ]

清除html源码中的标签或标签体

通过爬虫爬取的html源码中提取内容时，如果遇到复杂的标签结构不利用抽取内容，可以先把部分标签清除 String html = "一段html源码"; 清除所有标签(只清除标签,不清除标签体) RegularUtil.removeAllTag(html) 清除所有 包含class属性 的标签与标签体 RegularUtil.removeTagAnd

从html中抽取内容片段

String html = "一段html源码"; 获取所有 包含attribute属性 的标签与标签体,不支持相同标签嵌套 RegularUtil.getTagAndBodyWithAttribute(html, "class") 获取所有 包含attribute属性包含value值  的标签与标签体 RegularUtil.getTagAn

如何清理爬虫数据中一些不需要的 HTML 属性 只删除属性 不删除标签与标签体

org.anyline.util.regula.RegularUtil /**  * 删除所有标签的属性  * @param src html  * @param attributes 属性 如果不传则删除所有属性  * @return String  */ public static String removeAttribute(String

删除所有 包含attribute属性 的标签连同标签体一起删除

删除所有 包含attribute属性 的标签连同标签体一起删除  RegularUtil.removeTagWithBodyByAttribute(str,"class")      <

删除所有 包含attribute属性=value值 的标签 连同标签体一起删除

删除所有 包含attribute属性=value值 的标签 连同标签体一起删除  RegularUtil.removeTagWithBodyByAttributeValue(s,"class","a")   

根据属性名与属性值 删除标签(只删除标签，保留标签体)

/** * 根据属性名与属性值 删除标签(只删除标签，保留标签体) * @param src xml/html * @param attribute 属性名 * @param value 属性值 * @return String */ public static String removeTagByAttributeValue(String src, String attribute, Str

根据属性名 删除标签(只删除标签，保留标签体)

/** * 根据属性名 删除标签(只删除标签，保留标签体) * @param src xml/html * @param attribute 属性名 * @return String */ public static String removeTagByAttribute(String src, String attribute) RegularUtil.removeTagByAttribute

获取所有 包含attribute属性 的标签与标签体,不支持相同标签嵌套

/**  * 获取所有 包含attribute属性 的标签与标签体,不支持相同标签嵌套  * [  * [整个标签含标签体, 开始标签, 结束标签, 标签体, 标签名称],  * [整个标签含标签体, 开始标签, 结束标签, 标签体, 标签名称]  * ]  * @param src xml/html  * @param a

获取所有 包含attribute属性并且值=value 的标签与标签体

/** * 获取所有 包含attribute属性并且值=value  的标签与标签体 * 单标签只匹配有/>结尾的情况,避免与双标签的开始标签混淆 * 如class="a" : attribute=class value=a * style="width:100px;" :attribute=style value=width * [ * [整个

删除 tags之外的标签 只删除标签不删除标签体

/** * 删除 tags之外的标签只写一次 "b" * 只删除标签不删除标签体 * @param src  html * @param tags  tags * @return String */ public static String removeTagExcept(String src, String ...tags)

清除所有标签(只清除标签,不清除标签体)

/** * 清除所有标签(只清除标签,不清除标签体) * @param src xml/html * @param tags tags * @return String */ public static String removeTag(String src, String ...tags)

删除标签及标签体

/** * 删除标签及标签体 * @param src xml/html * @param tags 标签，如果不提供则删除所有标签 * @return String */ public static String removeTagWithBody(String src, String ...tags)

删除所有空标签

/** * 删除所有空标签 * @param src xml/html * @return String */ public static String removeEmptyTag(String src)

删除简单标签外的其他标签

/** * 删除简单标签外的其他标签 * "br","b","strong","u","i","pre","ul","li","p" * @param src  html * @return String */ public static String removeHtmlTagExceptSimple(String src) 

关于DataSet清除空行或空列

清除指定列全为空的行,如果不指定keys,则清除所有列都为空的行 removeEmptyRow(String ... cols) DataSet set = service.querys("CRM_USER"); 清除所有值为空的行 set.removeEmptyRow() 清除ID和CODE都为空的行 set.removeEmptyRow("ID","CODE") 清除ID或CODE

关于自定义SQL中的变量赋值

String sql = "SELECT * FROM CRM_USER WHERE CODE = :PARAM_CODE"; DataSet set = service.querys(sql, "PARAM_CODE:1"); //生成SQL SELECT * FROM CRM_USER WHERE CODE = 1 //特别注意这以下情况 CODE:1与SQL中的变量匹配不成功时，SQL会

SQL中的变量及占位符格式

SELECT * FROM CRM_USER WHERE ID = :ID  以:标识的执行时直接替换  以::标识的执行时以?占位   NAME LIKE :NM + '%'   (NAME = :NM)   NAME = ':NM'   NM IN (:NM)  

XML中自定义复杂SQL

文件格式: SELECT M.I

1.创建配置文件

这里我们只配置一个简单的数据库，如果需要配置多数据源的话参考...

2.创建启动类

创建启动类，这里只需要注意一下启动时扫描一个org.anyline包，用来注入几个实例，最常用的是AnylineService

3.创建Controller类(web项目)

每个项目中一般要有一个基础的父类用来实现一些公用的方法,最好是继承AnylineController，因为AnylineController中提供了利用HttpRequest构造查询条件的方法 ​

可视化数据源

为可视化前端提供数据，会同时面临以下几种问题 数据结构复杂 数据源结构多变 数据源标准不一，甚至冲突 数据来源多 数据量大 查询慢，但响应速度要求快 相同数据在不同接口中对外提供的结构不一样

网络爬虫

代码整理中

异构数据同步

代码整理中

切换数据源失败可能的原因

切换数据源失败可能的原因 有可能缺少注解@Import(org.anyboot.jdbc.ds.DynamicDataSourceRegister.class)

三种方式切换数据源

切换数据源有两种试: 1.使用通用AnylineService实例 1.1)通过DataSourceHoldersetDataSource("crm")方式设置当前数据源,再调用service.query等方法操作数据库 1.2)service.query("USER");在表名前添加数据源名称 2.通过ServiceProxy返回数据源对应的service(推荐使用这一种方式,隔离性更强,不容易混淆​)

动态多数据源切换实现原理

2023-03-31之前： 首先这里的数据源切换要依赖spring-jdbc环境，jdbc执行之前会调用AbstractRoutingDataSource实现类的determineCurrentLookupKey() 决定使用哪个数据源 所以我们提供了org.anyline.data.j

七种方式注册数据源

固定的数据源可以在配置文件中提前配置好 如果有动态数据源，如在运行过程中由用户动态添加数据源 可以在Java中注册

切换数据源失败可能的原因

启动类上添加注解@Import(DynamicDataSourceRegister.class) 启动类上需要扫描包org.anyboot

关于查询分区表(子表)性能

查询分区表可以按分区表名称也可以按主表(超表)查询，分别适用不同的场景

从数据库中查出日期类型(Date,LocalDateTime)获取时间戳

DataRow row = service.query("table");
如果数据类型是时间类型，可以直接获取时间戳或日期类型
Long ts = row.getLong("time");
Date date = row.getDate("time");

关于JSON数据类型

如果属性是Entity或List 类型，数据库中是json类型，在执行插入或更新时会把属性转换成json(String) 相应的在从数据库中查询结果时，会把json类型转换成Entity或List 实例

关于BLOB数据类型

1.通常情况下数据库的blob类型会对应entity的byte[]类型 2.有些情况下数据库是blob类型，而entity的属性是String类型

从其他系统中下载文件 为本系统用户提供下载源

@RequestMapping("export") public void export(HttpServletRequest request, HttpServletResponse response){ 	HttpResponse httpResponse= HttpBuilder.init().setUrl(url).setParams(par
                        

                        

                            
                        
                    

关于默认主键

在默认情况下，更新数据时以ID作为主键。
可以通过ConfigTable.DEFAULT_PRIMARY_KEY = "CD" 或配置文件统一修改

在实际业务中经常需要根据其他列来执行批量修改可以通过
DataRow或DataSet的setPrimaryKey("user_id")来设置新的主键,这样可以实现按user_id批量更新数据

如果数据库中已存在数据则更新或跳过，如果数据库中不存在则insert

如果数据库中已存在数据则更新或跳过，如果数据库中不存在则insert

关于replaces

replaces(String old, String replace, String ... keys); 把old替换成replace 如果不提供keys则替换所有的key replaces(boolea regex, String old, String replace, St

ControllerListener 应用场景

Controller中调用condition()封装了查询条件后 会调用public ConfigStore  ControllerListener.after(HttpServletRequest request, ConfigStore configs) 需要统一处理的事

anyline maven私服

通常情况下不需要私服，用中央库就可以，但中央库有个问题是版本更新比较慢，至少要1个小时， 如果生产环境发现问题需要紧急修复的时候，用私服几分钟就可以发布新版本了。

关于mirror与repository

mirror是指maven配置文件setting.xml中配置的镜像 repository是项目中pom.xml下配置的仓库

几个常用的中央仓库

maven.org 中央仓库        central-repos1       Central Reposit

导出Excel直接用于下载(服务器不生成或保存文件)

导出Excel直接用于下载(服务器不生成或保存文件)

Java截取html

在截取html时经常会遇到html标签被破坏的情况，这时需要识别出截止位置是否处于某个标签内部,如果在标签内容需要定位到标签的结束位置

DataSet/DataRow批量替换

以下方法DataSet同样支持，DataSet内部是实际是遍历调用了DataRow相应的方法

DataRow舍入模式(四舍五入/五舍六入/四舍六入 五留双/银行家舍入法)

DataRow舍入模式(四舍五入/五舍六入/四舍六入 五留双)

DataRow在其中一列基础上加减乘除

在key列基础上 +value,如果原来没有key列则默认0并put到target 如果target与key一致则覆盖原值 public DataRow add(String target, String key, int value) public DataRow add(String key

OR查询条件

应用场景:同一个输入框中输入用户编号或用户姓名或手机号都可以查到指定用户,以上参数会通过同一个key提交到后台

DataSet抽取指定列的集合,返回List

DataSet抽取指定列的集合,返回List

DataRow从另一个DataRow中复制部分值

DataRow从另一个DataRow中复制部分值，如果数量比较少一般用r1.put("K", r2.get("K")); 但是如果数量多了并且列名不一致可以用copy

service.update(DataRow)只更新值有变化的列

service.update(DataRow)只更新值有变化的列

entity()根据表结构获取request提交的参数

entity()根据表结构获取request提交的参数

entity接收request参数

entity接收request参数

为什么保存实体对象时驼峰会自动转成下划线格式

为什么保存实体对象时驼峰会自动转成下划线格式

获取数据库所有表

获取数据库所有表,包含超表、子表

DataSet/DataRow ognl表达式

DataSet集合中通过已存在的属性值计算其他属性值

DataRow深层取值

DataRow深层取值,如果DataRow有多层如一个User实例,取user的部门的领导的年龄 如果其中一层是数组 取第0个(如部门有多个领导)，不支持多维数组

DataRow取值时key不确定，或key有多个版本

DataRow取值时key不确定，或有多个版本，如有些key用user_id有些key用user

关于日期时间格式化

通过情况一可以用DateUtil.format来格式化 或DateUtil.parse执行解析 可以接收各种数据类型如String/Long/Date(包括sql.Date)/LocalDate等 String ymd = DateUtil.format("yyyy-MM-dd")把当前日

DataSet批量操作DataRow条目

DataSet批量操作DataRow条目

插入数据后返回主键值

插入数据后返回主键值

DataSet/DataRow 下划线与大小驼峰转换

数据库中经常是下划线命名，如果需要给前端输大小驼峰格式。可以通过DataSet/DataRow转换

关于查询结果的数据结构(数据类型、长度、精度、非空等)

关于查询结果的数据结构(数据类型、长度、精度、非空等)

删除数据的几种场景

删除会有以下几类情况 1.先查出数据，再执行删除 2.直接执行SQL 3.根据约定参数删除 4.复杂条件可以构造ConfigStore 源码请参考 https://gitee.com/anyline/anyline-simple/tree/master/anyline-simple-d

指定数据库类型

数据库类型是不需要指定的，经常有这搜索个问题所以说明一下内部是如何判断数据库类型的

[2023-01-01]删除org.anyboot相关依赖

8.6.2(2023-01-01)之后的版本中,多数据源不再需需要依赖org.anyboot:anyboot-data-jdbc   原来的org.anyboot.data.jdbc.ds.DynamicDataSourceRegister可以用org.anyline.data.

[检测数据库适配器][检测其他可用的适配器失败][可能没有依赖anyline-data-jdbc-*或没有扫描org.anyline包]

如果后台日志提示[检测数据库适配器][检测失败][检测其他可用的适配器] 说明根据数据源连接信息没有找到合适的适配器(这个适配器用来为不同的数据库生成特定的SQL) 如连接信息中是 mysql数据库，但没有依赖anyline-data-jdbc-mysql 也有可能没有扫描org.anyline这个

Anyline连接OceanBase

OceanBase的背后是MySQL或Oracle直接用MySQL的驱动就可以 参考源码https://gitee.com/anyline/anyline-simple/tree/master/anyline-simple-data-jdbc-dialect/anyline-simple-data-

未指定列(DataRow或Entity中没有需要更新的属性值

说明没有可插入的值 注意检查 是否开启了 IS_AUTO_CHECK_METADATA  会检测列名是否存在表中，如果不存在则忽略 是否开启了 public static boolean IS_UPDATE_NULL_COLUMN = false ; // 是否更新n

WebUtil.value(request)与WebUtil.params(request)的区别

WebUtil.params(request)只是简单的把get post参数封装起来不会作任何处理，在校验签名时通用需要用到 WebUtil.value(request)会把所有形式(包括body,get,post等)的参数解析出来，有可能还会执行解密、解码

关于数据库名称的中划线(减号)引起的语法错误

首先建议把中划线去掉，命名时不要用中划线。如果控制不了的话可以打开界定符 在启动类的spring启动前前加 ConfigTable.IS_SQL_DELIMITER_OPEN = true 或者在spring配置文件中加 anyline.sql-delimiter-op

为什么配置文件没有自动提示

如果项目中依赖了spring-boot-configuration-processor，集成开发环境会有key提示 如anyline.aliyun.oss.bucket= anyline-mvc默认依赖了anyline-boot,anyline-boot中默认依赖了spring-boot-con

关于数据库名、表名中出现中划线(减号)的问题

数据库名、表名中出现中划线(减号)时在jdbc是容易被误当成减号处理引起语法异常。尽量不要用中划线，如果必须要用的话可以打开界定符开关 这样在处理表名时会当成一个词处理。 启动类中ConfigTable.IS_SQL_DELIMITER_OPEN = true 或配置

屏蔽anyline版本信息在控制台的日志输出

如果要关闭以上输出可以在anyline-config.xml配置文件中添加boolean 如果没有配置文件可以在启动类加载spring上下文之前设置ConfigTable.IS_DEBUG = false;

[2023-03-06]ConfigTable.IS_DDL_AUTO_DROP_COLUMN默认false

这个参数默认用来控制在alter(Table table)时,如果发现数据库中存在而table中不存在的列是否删除 如果值为true则删除,false则忽略 实际应用中发现这样设置一个全局开关比较危险，因为设置了true之后会影响所有的ddl操作，不能单独针对一个table进行设置 更新后变成了根据

anyline-data-jdbc-mysql(oracle/mssql等)与jdbc驱动的关系及区别

anyline-data-jdbc-mysql只是用来生成SQL的一个工具，相当于一个方言工具，并不是驱动程序 mysql-connector-java才是用来连接数据库的驱动 为什么pom中依赖了anyline-data-jdbc-mysql了还要再依赖mysql-connect

关于集合(数组)参数值

集合(数组)参数值在IN，NOT IN等可以接收多个值的查询条件中，所有条目都将参与执行。否则只有第0个条目参与执行. 如 DataRow row= new DataRow(); row.put("NAME",  "1,2,3".split(",")); service.save

[2023-03-31]多数据源切换方式

2023-03-31之前多数据源切换是利用spring提供的AbstractRoutingDataSource为spring返回不同的数据源。 也就是同一个JdbcTemplate需要切换多个DataSource。 应用方式：启动类添加注解@Import(DynamicDataSourceRe

Entity 下划线与大小驼峰转换

如果属性上有注解则按注解设置的列名转换， 如果属性上没有注解 会根据 ConfigTable.ENTITY_FIELD_COLUMN_MAP进程转换; 默认"camel_"属性小驼峰转下划线 joinYmd > join_ymd

关于2023-03-31之后数据源切换@Import(DynamicDataSourceRegister.class)

2023-03-31之前多数据源切换是利用spring提供的AbstractRoutingDataSource为spring返回不同的数据源。 也就是同一个JdbcTemplate需要切换多个DataSource。 应用方式：启动类添加注解@Import(DynamicDataSourceReg

关于后台日志输出

ConfigTable提供了以下开关用为控制日志输出，系统启动时后台会输出的AnyLine版本信息 可以通过IS_DEBUG=false关闭 ConfigTable属性与配置文件一一对应,配置项参考AnylineProperty public static boolean IS

关于POINT类型

如果是Entity 或者用org.anyline.entity.Point类型 或者用double[] 或Double[] 但是要关闭这个开关 ConfigTable.IS_AUTO_SPLIT_ARRAY = false; 关闭的后果是 更新数据库时 不能把数组值赋值给一列（原

关于分页参数

AnylineController中提供了condition(boolean navi)用来根据前端提交的数据封装分页参数 经常要用到两个参数 1.当前第几页 2.每页多少条 默认情况下这两个参数值比较长，是为了避免与其他业务参数冲突。定义在PageNaviConfig中 public static

修改表名

Table table = service.metadata().table("新表名"); table.update().setName("新表名"); service.ddl().save(table); 注意表名相当于一个表的唯一标识，所以不是直接table.setName(),这样会定位不到

修改主键

Table table = service.metadata().table("TEST_PK"); Column pcol = table.addColumn("PKID", "int"); PrimaryKey pk = new PrimaryKey(); pk.addColumn(pcol);

删除列

1.保存表时 在指定列上标记删除 2.保存表时删除数据库中有，但表结构中没有的列 3.直接删除列

修改列名

//修改列名2种方式 //注意:修改列名时，不要直接设置name属性,修改数据类型时，不要直接设置typeName属性,因为需要原属性 // 1.可以设置newName属性(注意setNewName返回的是update) column.setNewName("B_TEST").setTypeN

修改列属性(类型兼容)

表中没有数据的情况 一般可以正常修改 但部分数据库有些类型之间不可修改 表中有数据的情况 可能造成值类型不兼容，如果需要自动修改需要开启 //ConfigTable.AFTER_ALTER_COLUMN_EXCEPTION_ACTION // 0:中断执行 // 1:直接修正 // n:行数n时触发另一个监听(默认返回false)

日期类型

有些数据库对数据类型要求比较严格，不能隐式转换，这时需要开启        ConfigTable.IS_AUTO_CHECK_METADATA = true; 这样在插入数据前可以检测列的数据类型，检测到数据类型才能实现正确的格式转换 例如Oracle

文件下载

WebUtil.download(HttpServletRequest request, HttpServletResponse response, File file, String title) WebUtil.download(HttpServletRequest request, HttpS

sequence

BigDecimal next = service.sequence("SIMPLE_SEQ"); DataRow nexts = service.sequences("SIMPLE_SEQ", "SIMPLE_SEQ2"); BigDecimal cur = service.sequence(fa

查询表上的索引

查询crm_user表上的索引 LinkedHashMap indexs = service.metadata().indexs("crm_user"); for(Index item:indexs.values()){ System.out.printl

Entity中的集合(数组)属性保存到数据库中

Entity中的集合(数组)属性保存到数据库中["A","B","C"]与A,B,C格式 如果数据库中是JSON格式则会保存成["A","B","C"]格式 如果数据库中是vachar类型则默认会保存成A,B,C格式(为了方便 findinset函数执行)，如果需要保存成["A","

数据库适配

MySQL PostgreSQL Oracle SQL Server MariaDB IBM DB2 clickhouse sqlite 达梦 tdengine derby H2 hsqldb 人大金仓 Ope

DataRow.value多个空白压缩成一个空格

DataRow row = new DataRow(); row.compress(); //压缩全部列 row.compress("ID", "CODE");//压缩指定列

DataRow转DataSet列表

DataRow row = new DataRow(); row.put("ID", 1); row.put("CODE", "A"); DataSet set = row.toSet("k", "v"); 转换成 [{k:ID, v:1},{k:CODE, v:A}]

关于日期类型显示格式问题

如 关于查询结果集中不显示秒的问题 数据库中数据类型datetime 查询结果显示2023-05-25T07:00(不同的环境显示格式可能不一样) 有时候会发现没有秒 是因为数据库存储的本来也不是String格式，而是一个时间戳，在显示时需要经过toString转换，转换成什么格式就不

数据源连接池配置参数(连接池类的属性)

注意：不同版本的连接池参数名会不一样，url/driverClass经常会出现不同的名称如jdbcUrl/driver/driverClassName等。要打开源码看一样当前版本的属性 HikariCP查看com.zaxxer.hikari.HikariDataSource Druid查看com

时间导致的时差以及日期时间格式

如果数据库中存储的时间与Java中查出来的时间不一致，一般是由于时区不同造成的。 先确认服务器时间和数据库时间是否一致。 再看服务器时区、数据库时区、Java连接数据库的时区 关于LocalTime中如果秒位置是0 则toString()会忽略秒如 12:00:00会显示成12:00(分

禁用Anyline事务管理器

默认情况下，注册一个数据源就会自动生成一个事务管理器。如果项目没事务控制的需求，可以禁用Anyline事务管理器 ConfigTable.IS_OPEN_TRANSACTION_MANAGER = false; 这样无论是通过配置文件还是Java注册数据源时，都不会生成事务管理器

关于DDL与事务控制

MySQL的DDL语句是非事务的，即不能对DLL语句进行回滚操作 并且在执行到DDL语句时，会隐式的将当前回话的事务进行一次“COMMIT”操作，也就是说之前未提交的事务会被提交。 因此在MySQL中执行DDL语句时，应该严格地将DDL和DML完全分开，不能混合在一起执行

DDL中极易混淆的操作:rename

修改表名或列名的操作比较特殊， 先看一个最终执行的SQL  RENAME TABLE 原表名 TO 新表名 与其他修改属性的操作不一样的新名与原表名与新表名都需要保留，否则就不知道要修改的是哪个表或哪个列了。这不像在Java中可以引用传址。 这里有一个需要记住

为什么有些boolean的属性用int类型有些用Integer

为什么有些boolean的属性用int类型，如是否可以为空 因为需要标记一个未知状态，就是不知道是true还是false 在metadata操作赋值时，经常需要根据多种渠道获取一个值，这种情况下如果既不是true也不是false时就可以覆盖，如果已经有值了ture或false就不再继

condition参数与query参数的混淆

在controller中查询数据时经常会用到： String status = "FINAL"; service.query("CRM_USER", condition(true, "TYPE_CODE:type"), "DATA_STATUS:"+status); 实际执行的

metadata缓存

在执行DDL时，需要频繁的读取表结构等元数据，非常耗时，所以会添加一层缓存。 也是就是不会每次都从数据库中读取数据。 以下3种情况会清空缓存： 1.缓存过期 2.执行DDL 3.调用CacheProxy.clear()  这样会存在一个问题。如果表结构还在

临时数据源操作

临时数据源操作可以通过ServiceProxy创建临时service 执行完后GC会自动回收，不需要像DataSoureHolder.reg注册的数据源那样 通过RuntimeHolder.​.destroy注销

Table,Column,Trigger,Function等几个类

Table,Column,Trigger,Function等几个类已经从anyline-data-jdbc包提到了anyline-core包中，  因为core中的基础类需要引用他们，取消了原来的Table,Column接口，因为在实际开发中接口类的频繁切换给许多人造成了疑惑，原来编码过程

parpare/before/after触发顺序

interceptor.parpare(干预修改SQL条件一般在这一步执行) listener.parpare(干预修改SQL条件也可以在这一步执行) 构造SQL interceptor.before listener.before 执行SQL listener.after interceptor.after

统一添加查询条件

可以实现QueryInterceptor， prepare:表示在准备创建SQL之前触发，如果需要修改查询条件可以在这一步执行。 before:是在SQL执行之前触发，到这一步时最终SQL已经生成，可以用来保存查询日志 after:在before基础之上，多了SQL执行状态、查

查询条件中空值的处理方式

这里的空值说的是在自动生成查询条件是的情况，如果是原生的SQL条件，则不会处理 service.quers("CRM_USER", " CODE='' ", "NM IS NULL") 这种提供原生SQL的情况不处理  需要处理的是以下3种情况 service

anyline-mvc禁用jdbc环境

最近遇到有些项目需要anyline-mvc但不需要数据库环境 因为anyline-mvc的AnylineController中依赖了anyline-data-jdbc的ConfigStore,所以anylie-data-jdbc被依赖进来了，而anylie-data-jdbc中的DefaultDao

Failed to execute goal org.apache.maven.plugins:maven-gpg-plugin:1.6:sign (sign-artifacts)

出现以下异常，应该是因为profiles选中了central，因为central是发布到中央库其中配置了maven-gpg-plugin所以需要签名, 如果只是本地install不需要签名，选anyline或其如果你本地maven配置文件中配置了其他的profiles也可以，一个不选也可以。 [ER

DataSet聚合计算

1.分组 如提供一个职员列表的set [ {id:1, name:'a', dept:'财务部', age:20} ,{id:2, name:'b', dept:'财务部', age:30} ,{id:3, name:'c', dept:'市场部', age:35} ] 根据部门分组 set.gro

关于几个 空值 的查询示例

//service.query("crm_user", "+id:null"); // ID IS NULL //service.query("crm_user", "+id:");     // ID IS NULL //以上两种情况 经常是通过变量拼接出来如 "+i

几个分页查询的示例

比较常用的分页是在controller中通过condition设置 service.querys("user", condition(true, "其他条件")) 这里的true表示需要分页 service.querys("user", condition(20, "其他条件"))&nbs

查询返回指定列

默认情况下查询*也就是查询所有列，但如果表中有大文本会影响性能，可以在表名后加列名来控制查询和返回内容 service.querys("user(id,code)") 生成SQL SELECT id, code FROM user

DataRow中两个比较特殊的方法put/puts

通常情况下DataRow经常的方法是put(key, value)， get(key) 但是在操作复杂数据结构时经常会遇到多层嵌套的情况 比较啰嗦的编码一般会这样 DataRow r0 = new DataRow(); DataRow r1 = new DataRow(); r0.put("r1",

DataRow中的put与set的区别

由于put是继承自Map所以返回值是Object类型 而set是DataRow中的方法 返回的是DataRow(this) 大数情况下 put set通用 但在需要大量链式操作的场景在需要用到set

AnyLine解决或提供了什么

动态、运行时 即运行时才能最终确定 动态的数据源、数据结构、展现形式 如我们需要开发一个数据中台或者一个数据清洗插件，编码阶段我们还不知道数据来源、什么类型的数据库甚至不是数据库、会有什么数据结构对应什么样的实体类， 如果需要前端展示的话，更不会知道不同的终端需要什么各种五花八门的数据组

为什么要基于spring生态

不用解释了

为什么不用Hibernate,MyBatis

构造SQL太麻烦 如生成个IN的查询条件，要先取值，再判断是否为空，是多个值还是一个值，再遍历，经常要在XML中配置SQL，遇到不同的数据库时SQL语法还可能不一样 这些机械的操作，不应该浪费开发人员的时间，应该只提供个参数能说明要实现什么就可以， 如query("CRM_USER", c

为什么集中使用同一个Service

大部分情况下只需要注入一个AnylineService(bean.name="anyline.service")就可以了，但两种情况除外 有复杂的业务逻辑，这时应该有对应的service,如果只是分组、求和等简单的数学计算用默认的service就可以 多数据

为什么多数据源时又要使用多个独立的一个Service

你可能是希望在当前线程中设置一个变量，通过修改这个变更来干预spring获取的数据源，但这样在遇到线程共享时会发生冲突。 所以设计成每个数据源对应一个service,不需要切换数据源，而是根据情况调用不同的service

为什么推荐结果集key强转大写

因为有些情况下容易产生歧义，如userId,userID都合理，在前端调用接口时还需要查文档才能确定， 另外不推荐驼峰格式,因为有些数据库会把列名转成大写

为什么没有代码生成器

完全没有必要生成controller/service/dao/vo/mapper/xml这些固化的模板，既然能自动生成了，那运行时也可以生成。 主要是因为默认情况下只有业务逻辑复杂时才需要单独的service,其他几个已经用不到了。

查询数据库返回的数据字段全是大写，字段怎么设置返回小写

可以通过ConfigTable设置全局参数 ConfigTable.IS_LOWER_KEY = true; ConfigTable.IS_UPPER_KEY = false;

补充示例源码 anyline-simple-alpha-clear

【源码】 这是一个独立的项目,从0开始配置,spring-boot环境,与其他模块没有任何关系,直接运行 也可以用IDEA直接打开这个子目录 现有项目基础上要集成anyline可以参考这里 项目中主要用到Anyline(可以继承AnylineController或者在需要的位置注入) 主要配置了ma

补充示例源码 anyline-simple-clear (4in1)

【源码】 这个目录下的每个子目录都是一个独立的项目，可以用IDE等直接打开子目录运行 1.1.anyline-simple-clear-init                继承spring-boot

Tomcat9升级到Tomcat10

javax.servlet javax.servlet-api 换成

jdk8升级到jdk17

8.6.5之后开始支持jdk17 版本号添加缀加 如8.6.5-SNAPSHOT > 8.6.5-jdk17-SNAPSHOT 需要tomcat10支持 参考tomcat9升级到tocmat10的

补充最简单的示例源码

【源码】 多余的依赖一个没有，pom也没有继承

先准备基础环境

为精简篇幅，把前置工作以及后续重复的工作在这里说明，后面就不再啰嗦了。

从最简单的查询开始

查一个表的全部数据,和一行数据

查询部分列(属性)

查一个职员列表，因为简介等大文本影响IO,所以只查ID,NAME两列

根据情况生成不同的查询条件

这里主要说的时空值的情况，相关的查询条件是否生效 如果提供了年龄值，则按年龄查询条件有效，如果没有提供年龄值，则忽略年龄查询条件

根据情况生成不同的查询条件(in、like)

场景与上一步一样。只是拼接的SQL更费代码一点 根据情况生成 SELECT * FROM HR_EMPLOYEE WHERE TYPE_CODE IN(?,?,?) SELECT * FROM HR_EMPLOYEE WHERE NAME LIKE '?%'   ‘%?’ ‘%?

未注册数据源:common

一般在初次测试时会遇到这种问题，正式的开发环境不会遇到 在上文中没有找到spring jdbc template实例时会抛出这个异常。 jdbctemplate一般是连接池插件例化的，springboot2，3环境下默认使用HikariCP连接池(org.springframework.boot:s

根据情况生成不同的查询条件(FIND_IN_SET)

仅针对MySQL

不提供参数值的两种特殊情况

如根据类别查询时，如果没有提供类别值。 默认情况下是忽略类别条件 但也有另外两种特殊情况 用NULL或''拼接SQL 中断SQL执行，不返回值或返回空集合

为所有的查询sql统一添加查询条件

注意，这种方式并不适合用于多租户场景。

生成的SQL语法不对，常见的如分页语法

语法不对一般是因为没有正确识别数据库类型造成。或者虽然识别出了正确类型但没有找到相应的适配器。 先检查一下pom中有没有相应的适配器， 如果是mysql需要anyline-data-jdbc-mysql 如果是oracle需要anyline-data-jdbc-oracle 其他数据库类似。 具体原

多数据源场景中service注入失败

如果是单个数据源默认情况下AnylineController中已经默认注入了一个AnylineService service;这个service可以操作多个数据源bean.id = @Service("anyline.service") 但是在多数据源情况下，为了更强的隔离性，避免线程共享

ehcache不生效

先看pom有没有添加依赖 org.anyline anyline-data-cache-ehcache

缓存有效期和刷新频率

如果设置了缓存时间100秒有效，再前90(90%*100)秒内会从缓存中提取数据 第90秒后的第一次也从缓存中提取数据，同时开启子线程刷新缓存

查询条件默认值

如果http request提供了参数值并且不为空，则按提供的参数值查询，否则按默认值查询。

多版本参数值

分页查询

按下标查询

分组(group)查询

关于DataSet.total()与size()

total()表示总行数，如果没有经过分页，total()与size()结果一致。如果经过分页则返回PageNavi.totalRow()也就是数据库中符合条件的总行数可能要比size()结果大 size()表示当前DataSet中的实际行数。

查询排序

启用maven中央库的SNAPSHOT版本依赖

默认情况下maven已经禁用了中央库的SNAPSHOT版本。但在开发过程中经常需要用到 POM中可以这样开启

releases版本说明

项目上线时可以根据日期到中央库中找一个相近的releases版本 https://mvnrepository.com/artifact/org.anyline/anyline-core 或 https://central.sonatype.com/artifact/org.anyline/anyl

以provided形式依赖的库

由于每个项目的基础库版本各不相同，但anyline需要基于这些基础库，所以在依赖是以provided形式依赖了以下基础库 所以在实际项目中需要根据自己的版本要求添加以下依赖（如果用到的话） org.springframework.boot:spring-boot-starter-jdbc org.s

Entity(Field)与Table(Column)的对应关系

在有些场景中可能需要用到实体类。如: DataRow(DataSet)与Entity相互转换。 查询返回Entity或集合 根据Entity保存或更新数据 这时需要确定Entity与Table的对应关系，以及Field与Column的对应关系 默认情况下anyline根据DefaultEntityA

Entity注解

anyline并没有依赖JAP，只是根据注解的名称及注解属性名称来解析注解，所以需要注解的需要自己添加相关依赖 可以解析的注解： 表名:table.name, table.value, tableName.name, tableName.value 列名:column.name,column.val

EntityAdapter接口说明

EntityAdapter主要用来实现实体类与表，属性与列之间的转换。 系统自带一个默认的EntityAdapter，每个项目也可以提供定制的EntityAdapter，参考【EntityAdapter定制】 在执行转换时会按顺序调用,直到成功为止，顺序以EntityAdapter.order()方

EntityAdapter定制

自定义EntityAdapter需要实现EntityAdapter接口，其中的每个方法在接口中都有默认实现，只需要实现需要修改的接口即可，同时需要交给spring管理，一般是加一个@Component注解 如果不针对所有的类，而只针对具体的类，可以覆盖type()方法返回具体的Class或覆盖typ

关于(抽样/总体)方差、标准偏差

DataSet中提供了(抽样/总体)方差、标准偏差相关的计算，最终还是调用了NumberUtil中的方法 以下方法其中a表示空值也参与计算,p表示总体,相对的不带p表示抽样 var:抽样方差(空值不参与计算) vara:抽样方差(空值参与计算) varp:总体方差(空值不参与计算) varpa:总体

优势劣势

 首先要承认银弹是没有的，所以先说 劣势 在增、删、改、查4个过程中，增的环境劣势比较明显 操作查询结果时，不能像Entity一样有IDE的提示和自动补齐，减少了IDE的协助确实让许多人寸步难行， 大部分人也是在这里被劝退的。 在插入数据时，不能像像

DataRow转换成实体类

User user = row.entity(User.class);

关于数组参数值

标准的url中一般是这样http://127.0.0.1/list?id=1&id=2&id=3 或者用form表表单提交三个name=id的input 也可以提交json格式{id:[1,2,3]} 以上三种情况condition("ID:[id]")都可以解析成WHERE I

多数据源注解事务异常 found 2:anyline.transaction

在多数据源情况下，通过注解控制事务会报这个异常 org.springframework.beans.factory.NoUniqueBeanDefinitionException: No qualifying bean of type [TransactionManager] is defined:

多数据源事务控制

这里说的是有多个数据源，并且多个数据源需要控制事务。【为会么要创建多个事务管理器】 如果然后有多个数据源，但只需要控制主数据源的事务，不要往下看只需要参考【多数据源注解事务异常】 分两种情况说明 一、需要控制事务的方法内部不需要切换数据源。并且编码阶段已经可以确认是哪个数据源  

为会么要创建多个事务管理器

在多数据源的情况下会生成多个事务管理器。 为了更强的隔离性。否则数据源切换过程中，不好跟踪事务，如果遇到线程共享时，切换数据源也有可能失败，那事务管理器肯定就乱了。 为了在切换数据源过程中，保持事务状态。就是不要因为切换数据源，而把上一个事务强制提交或回滚。

多数据源事务管理器bean.name

在存多数据源的情况下会创建多个事务管理器【为会么要创建多个事务管理器】 事务管理器在spring上下文环境中的命名也就是bean.name 如在默认数据源之外 又创建多个数据源a,b,c spring会针对默认数据生成一个默认事务管理器:transactionManager anyline

DataSet分页

DataSet set = new DataSet(); List pages = set.page(10) //每页10行，分成多少页根据总数 List pages = set.split(10)//分成10页，每页多少行根据总

获取表或视图的DDL

//查询表结构时，默认会查询DDL Table table = service.metadata().table("CRM_USER") List ddls = table.ddls(); 对于确认只有一条SQL的数据库可以 String ddl = table.ddl(

数据源连接失败后一直重连的问题

这跟连接池有关，一般连接池会有失败重试的参数可以设置，如druid 配置文件 spring.datasource.druid.connectionErrorRetryAttempts = 1  spring.datasource.druid.breakAfterAcquireFailure

关于json、object、arry等非基础类型属性

对于非基础类型属性，在数据库可以用json类型。 在插入或更新数据时会把属性值转换成json格式，同样的读取数据时也会把json格式还原成属性对应的数据类型。 需要注意的是，在插入数据时数据需要先知道数据库中是JSON类型才会转换。 这样就需要开启一个开关，来保证插入数据前先检查数据库结构。当然这个

Data truncation: Cannot create a JSON value from a string with CHARACTER SET 'binary'

出现这个异常是因为视图把json类型保存到数据库中，一般来说数据库会设置一个JSON类型。 但在页mysql驱动对json的sql类型会要求一个String类型的数据, 需要打开ConfigTable.IS_AUTO_CHECK_METADATA  = true ,这样

属性关联表主键生成器注解

通常情况下通过配置文件设置一个统一的主键生成器就可以，但如果有一部分表需要单独设置 一种方式是可以通过配置文件单独指定 另一种方式可以通过注解设置 另外一些属性的关联表的主键生成器也可以通过注解设置,这种情况比较特殊在其他JPA中一般不这样用 @Table(name="HR_EMPLOYEE")

为什么推荐视图

理由是在用到的时候JAVA和配置文件里都可以临时写。 如果数据量不大，结构不复杂，数据不敏感，只是显示个列表或明细确实没什么大问题。 但是以下实际情况簇不是这样： 既然都需要写SQL了复杂度还是有点的 当然不能拿那些helloworld说事，那些SQL都是多余的 

getColumns与getMetadatas区别

getColumns返回的是DataRow中查询出来的列属性 getMetadatas返回的是整个表的列属性 如CRM_USER表中有三列，ID,NAME,AGE DataRow row = service.query("CRM_USER(ID,NAME)"); 这时getMetadatas会返回3

DriverAdapter

DriverAdapter用来适配不同的数据源驱动，根据数据源类型生成不同的执行命令(如果是支持JDBC的数据源就是SQL和参数) 多数据源适配过程： 系统启动时会把pom中依赖的所有adapter注册到spring上下文环境中 注册数据源时会定义一个key,切换时根据这个key切换 在执行生成

完整执行过程

DDL保存表结构时，删除列和添加列

如数据库中原来有3列，C1,C2,C3 保存结构时只提供了C3,C5 在默认情况下 修改C3,添加C5 C1,C2保持不变 打开 ConfigTable.IS_DDL_AUTO_DROP_COLUMN = true 删除C1,C2 修改C3,添加C5

自定义是查询条件

在低代码平台、可视化数据源、自定义报表等场景中经常需要用到用户自定义查询条件 后台根据用户输入的参数生成查询条件 平时程序员硬编码的很简单的条件如WHERE ID = 1 ，其中只有1是可变参数 ID和等号是固定的 但自定义查询条件的场景中ID,等号,1 这三部分全部由用户提供 过程中可能

为什么不用Boolean(true,null,false)而是用int(1,-1,0)

在查询元数据时经常有一些boolean属性,如是否自增列，是否是货币。 这里其实有3个属性:未知(null)、是(true)、否(false) 因为有些库中没有这些属性，所以经常出现未知(null)的情况 用Boolean虽然可以存储3个值，但在调用时经常会用if()判断这样极易引起空指针异常

关于临时数据源连接泄漏的问题

无论是什么数据源都会配置一个连接池，在一个命令执行完后，相关的连接会放回连接池待下一个命令复用 这里只是放回了连接池，并没有真正释放连接，也就是没有与数据库断开连接。 只有在注销数据源时，才会把连接池中的连接彻底断开。 但临时数据时没有提供注销的功能，如果需要注销的话应该使用正

环境检测场景中的几个动态表单示例

这里只是后格式转换部分,插入到word参考【anyline office】，最困难的是前端怎么把这个规则告知后端（大概思路是先定义几种规则让用户来选，比如横向显示什么，竖向显示什么，每行最多几列） 先看源数据 主键

DataSet/DataRow.getMetadatas

DataSet set = service.querys("表"); set.getMetadatas()会返回列的一些属性，正常情况下只会返回一些基本属性，不会再额外查询列的详细信息，因为那样需要再发起更多的查询，而大部分情况下是不需要列的详细数据的，如列的注释， 如果确实需要可以打开Config

特征

摒弃了各种繁琐呆板的实体类以及相关的配置文件 让数据库操作更简单，不要一动就是一整套的service/dao/mapping/VOPODTO有用没用的各种O，生成个简单的SQL也各种判断遍历。 强化了结果集的对象概念 面向对象的对象不是只有get/set/注解这么弱 需要把数据

实现方式

DataSourceHolder DataRuntime DriverAdapter DriverActuator ServiceProxy DataSet/DataRow

ConfigStore分页相关的参数

ConfigStore condition = new DefaultConfigStore(first, last); 注意这里的构造函数提供的起止行数，与mysql中的limit并不一样 如果需要通过mysq limit方式分页可以在创建了ConigStore后调用limit condition

简易方式指定数据源和主键

service.querys("table(col1,col2)") <数据源>放在开头 <主键>放在结尾 ds_sso表示数据源 ID,CODE表示主键

DataRow与Map的区别

DataRow是继承自Map所以Map有的方法DataRow都有， 并且对Map进行了改造和扩展，主要有: 改造了get/set方法，在get/set执行前会先检测key,以实现忽略大小写、下划线、驼峰等格式，效果就是get("userid") get("userId") get("user_id"

D-ORM

定义 D-ORM是NO-ORM中最典型的代表，是一种更高抽象的动态ORM 与传统ORM最显著的区别是: 更高的抽象一切基于动态基于运行时与传统ORM（如Hibernate、Entity Framework等）相比，D-ORM可以在运行时根据用户需求和业务场景，动态生成和执行SQL，而无需编

为什么以个人身份维护

技术只有开源环境才能，不得不敞开了面对一线用户，经历万般挑剔，同时持续的汲取各种各样实战环境的检验和反馈。开源环境没有得过且过，稍有不如意早晚有人指出来交给公司早晚死路一条，国内外都一样，看看oracle,google干的那些事。公司的任务是盈利，少有人会追求技术，即使想，也不一定真给你条件。拥有了

流式查询

默认情况下查询数据会把符合条件的数据一次性读到内存中，但是在大数据处理时会比较耗时甚至内存溢出。在这种情况下可以启用流式查询。返回一个迭代器。在迭代器中执行业务处理。 handler支持4种形式,按性能排序ResultSet>Map>DataRow>Entity 其中ResultS

插入数组

在PG数据库中支持数组类型，但默认情况下DataRow中的数组会被拆开，只取第0个值。 如果需要插入整个数组可以通过以下几种方式： 1.ConfigTable.IS_AUTO_SPLIT_ARRAY = false; 2.ConfigTable.IS_AUTO_CHECK_METADATA = tr

Neo4j基础操作

//以下说到的标签相当于关系型数据库中的表 //原生CQL创建节点 service.execute("create (d:Dept{name:'财务部', leader:'张三'})"); //创建多标签(表)节点 service.ex

MongoDB基础操作

DataSet set = new DataSet(); Long fr = System.currentTimeMillis(); for(int i=0; i<10;i ++){ MongoDataRow row = new MongoDataRow(); row.put("_id"

插入数组类型

pg数组库支持数组类型，在定义时可以这样 table.addColumn("TYPE_IDS", "INT[]"); //在原型基础上加[] 插入数组类型时，需要设置这一列的数据类型，否则会把数组拆开只取下标0的条目，因为不知道数据库中是数组类型 可以打开ConfigTable.IS_AU

关于不同数据库版本的驱动

有些数据库不同的版本之间差别比较大如 MSSQL2000与MSQL2005+ Oracle9i,10g,11g与Oracle12c+ 这种情况只需要 1.在pom中依赖相应的驱动 2.根据不同版本的规则修改连接url anyline-data-jdbc-mssql中已经包含了2000与2005+运行

为什么查一个表的结构时，在日志中会发现要查询出所有的表

因为不同的数据库配置不一样，查出出来的结果有可能大写有可能小定，如mysql这样的数据库，有些人安装完了也不配置直接上线，就会导致区分大小，这时表名crm_user与CRM_USER是不一样的。如果大小写没写对根据表名是查不到结果的。 所以会先把所有表查出来放到一个Map中以表名大小作为key,这样

insert/update过程中列的控制

默认情况下只会处理不为空的列，更新时不更新主键 由于数据来源多种多样，有可能是从别的表中查询的也有可能从第三系统获取或java中生成， 同一组数据可能需要同时插入不同的表，但列不同，这时需要设置insert/update的列 可以按以规则设置insert与update规则一样 DataRow row

关于or与ors

在标准的SQL中是没有ors的，这里的ors是ConfigStore的方法， 如果ConfigStore已经有了两个条件A,B 现地加第3个条件C 如果用or(C) 则生成  A AND (B OR C) ，即C与其前面的一个条件开成或关系 如果用ors(C) 则生

DataSet/DataRow与实体对象之间的转换

EntitySet users = set.entitys(User.class): User = row.entity(User.class); 因为实体类中的属性数据类型限制，一些值会转换失败，可以提前格式化， 如null赋值给int属性时会失败，可以先把集合中所有的空

关于查询结果集单行与多行的问题

多个ConfigStore合成一个ConfigStore

在代代码，运行时自定义场景中，经常会调用不同的方法生成多个ConfigStore也就是多组查询条件 但在调用service.querys时只能接收一个ConfigStore 解决方式： 生成一个ConfigStore 在合成查询条件时把ConfigStore作为参数输入，通过

关于动态

动态主要是指在运行时才能明确、编码是不明确。可能出现在 数据源 数据库类型 查询的表 查询列 分页 查询条件 数量: 同一个接口中根据前端参数，根据组合成不同的查询条件，如 service.querys("crm_user", c

如果主键不统一怎么办

如果是Map可以转成DataRow row = new DataRow(map): DataRow有setPrimaryKey(String ... pks)方法可以设置主键 也可以在service.querys("crm_user<id,code>")方式设置主键 如果有Config

命令执行过程

DataSet querys(String src, ConfigStore configs, Object obj, String... conditions) service中先检测src table中有可能带<数据源>前缀，如hr_user 如

不具备更新条件

默认情况下update方法只会更新值有变化的列，可以调用DataSet(DataRow)的 clearUpdateColumns或者  addAllUpdateColumns 更新除了主键之外所有的列

检测数据源是否正常可连接

检测数据源连接状态 DataSourceHolder.validate(String ds)

数据类型之间的转换

在生成SQL的过程中，如果没有占位符，数字类型一般可以直接拼接，String类型需要加单引号， 而日期类型有些数据库可以实现隐式转换，加单引号即可，有些数据库不能实现，需要内置函数转换成日期类型 还有些更复杂的类型类byte,json,array,geometry等类型更需要内置函数 如果有占位符

返回SQL方言(DDL/DML/DQL)以及SQL日志

在SQL执行过程中，在控制台或日志文件中会生成带占位符的日志。 如果需要在执行完成后返回SQL,可以在service调用的方法中添加ConfigStore参数 在执行完成后从ConfigStore中获取执行的SQL, 因为执行的SQL可能是多条，所以会返回一个List集合， 默

关于MySQL的insert ignore into和replace into

务必注意，如果执行了replace into会把原数据删除，重新插入新数据，如果有自增主键的话，主键值会变化。  //override=true : replace into //override=false: insert ignore into ServiceProxy.insert

复杂条件的合成

ConfigStore a1 = new DefaultConfigStore().and( "id11", 11).and("id12", 12); ConfigStore a2 = new DefaultConfigStore().and( "id21", 2

数据源注销

可以主动注销，DataSourceHolder.destroy(key); 实际最终调用的是JDBCRuntimeHolder.destroy(key);因为这时不只是要注销数据源了，相关的bean都要一块注销 在注册同名数据源时也会自动注销

数据源覆盖

在注册动态数据源时，如果key相同会覆盖原来的数据源，但是需要打开spring配置spring.main.allow-bean-definition-overriding=true 否则会抛出异常Invalid bean definition with name 'anyline.jdbc.temp

VoltDB-关系型内存数据库

一个关系型内存数据库，支持JDBC，适合大量数据实时计算的场景。 比如通过原始经济年鉴数据库，在线实时统计各维度数据。 重点是计算，不是搜索，如果需要搜索ES更适合 参考官网https://docs.voltactivedata.com/ 中文版本文档：https://downloads.volt

Neo4J

NOSQL图形数据库,适合于处理对象之间的关系的场景

druid连接SQL Server异常

在获取schema时会有个异常，换成1.1.15版本试一下

SQL日志开关及格式

默认情况下可以通过ConfigTable设置全局变量。ConfigStore也提供了类似的配置项，仅对当前流程有效

各数据库需要的依赖

每个数据库需要 1 个anyline提供的适配器 + 1 个数据库官方的驱动 适配器参考以下，打开适配器可以查看官方驱动的依赖，因为是provided形式的依赖，所以需要把驱动也复制到自己POM中

mysql表结构导入postgres

先用mysql数据源获取表结构 Table table = mysql_service.metadata()table("crm_user") 再用pg数据源创建表 pg_service.ddl().create(table) 需要注意的是：schema和catalog需要根据情况调整一下，一般设置

insert/update Map时大小写的问题

在insert/update时如果提供的是List<Map>或Map参数时有可能因为Map的key与列名不一致导致取值失败的问题。因为map严格区分大小写，put("id",1)用get("ID")当然是取不出来了 如果大小写不一致，可以转换成DataSet<DataRow>

关于PostgreSQL的ON CONFLICT，如果存在重复数据 覆盖或忽略

当执行 INSERT 操作时，如果数据表中不存在对应的记录，执行插入操作；如果数据表中存在对应的记录，则执行更新操作 是否存在可以根据 1.指定列判断 或者2 唯一约束名 Table table = service.metadata().table("CRM_USER"); if(

关于Apache ignite的MERGE 如果存在重复数据 覆盖或忽略

public static void override() throws Exception{ String tab = "tab_override"; Table table = service.metadata().table(tab); if(null != table){ serv

MySQL LIMIT OFFSET不支持表达式的问题

发现有个项目里这样写 String sql = SELECT * FROM CRM_USER LIMIT (:page) OFFSET (:page-1)*:vol service.querys(sql, configs) 在Pg里可以正常执行，但返回的DataSet中不包含分页的Pgae

关于分页参数

DataSet set service.querys(table, condition(true)); //分页，参数根据配置文件或PageNaviConfig 当前页数会提取http中的参数 PageNavi navi = set.getNavi(); navi.getTotalPage

关于Orcle的MERGE INTO 如果存在重复数据 覆盖或忽略

service.insert(table, set, new DefaultConfigStore().override(true, "ID")); service.insert(table, set, new DefaultConfigStore().override(false, "ID"))

upsert(已存在则更新或跳过，中不存在则插入)

在数据中台、数据同步场景中经常有这种需求，如果数量少可以清空后再全量同步一次，这样最省心。也可以插入前检测一下数据是否存在。 在如果数量很大，以方式显然不可取，如果自己实现一般是通过索引(性能)+存储过程(一次交互)实现 当然许多数据库都对这种场景提供了原生支持。用过ORM实现过这种

关于ands

最初ands是为了生成in条件，但and已经可以识别集合条件自动生成IN， 2023-10-21后 ands改成了与ors类似的效果，即把之前所有的条件放在一个()内,然后and this

DriverAdapter继承关系

数据库读、写过程中的类型转换

读取数据库的过程中，驱动类从数据库中读取出数据后，会有一步类型转换的过程，通常情况下内置的DataReader可以满足大部分的情况， 但如果遇到特殊情况比如希望转换成项目定义的类型,这时需要注册一个自定义的DataReader 可以调用DefaultDriverAdapter静态方法 /*

关于函数操作

在查询条件和查询列中经常需要函数，当然这样查询对性能影响非常严重，只是举例说明一下语法 SELECT  id,to_char(reg_time,'yyyy-mm') as ym FROM crm_user WHERE char(reg_time,'yyyy-mm-dd') LIKE

异构数据源迁移核心部分代码Mysql到Apache Ignite|VoltDB

异构数据源迁移，大概过程就3步，其他细节就看具体情况了 1.在目标库创建表结构 2.从源库中查出数据 3.插入到目标库 举个从Mysql到Apache Ignite的示例 过程中有可能需要合并数据参考，可以通过ConfigStore.override(true)实现【目标库不存在则插入，存在则覆盖或

关于override

override是实现检测需要插入的数据在数据库中是否存在，来确定覆盖还是跳过 ConfigStore与DataRow/DataSet都提供了override属性 大部分情况下需要用ConfigStore配合insert方法来实现 service.insert("table", set, new D

根据SQL获取元数据信息

根据SQL获取元数据信息 service.metadata(String sql, boolean comment) comment:表示是否需要获取列注释，需要数据库官方驱动的支持 如果需要获取表结构应该用service.metadata().table("表名")//返回列、索引等全部表结构

关于VoltDB timestamp类型

插入时可用Long类型，需要注意的时new Date().getTime()或System.currentTimeMillis()返回的毫秒基础上要*1000 也可以String类型，格式必须是YYYY-MM-DD hh.mm.ss.nnnnnn 或 YYYY-MM-DD

关于默认数据源(default)与通用数据源(common)

这里的通用和默认是指数据源对应的service,就是我们在业务代码中用来操作数据库的类 通用service(bean.id=anyline.service)是指可以通过切换数据源的方式来操作所有数据源的service 默认service(bean.id=anyline.service.default

JDBC操作clickhouse示例

ClickHouse适合用于在线分析处理查询（OLAP :Online Analytical Processing）MPP架构的列式存储数据库，能够使用 SQL 查询实时生成分析数据报告。 clickhouse不同于hadoop生态，采用 Local attached storage 作为存储 二、

南大通用

GBase JDBC 8.3.81.x 版本之前使用使用 SELECT 别名的情况， ResultSetMetaData.getColumnName()返回的是列的别名。8.3.81.x 之后返回的 是列名。 在 8.3.81.x 版本中可以调用 ResultSetMetaData.getColum

关于DataSource与DataRuntime

DataSource是java.sql定义的一个数据源，常用的连接池都要实现这个接口如DruidDatasource、HikariDataSource DataRuntime是anyline定义的一个与数据源相关的上下文环境，其中关联了数据源、 数据库适配器、数据源及连接池参数、Anyli

关于跨库操作与数据源自动复制

在低代码与中台项目中经常需要操作多个数据库的元数据，如查询出所有数据库中的表。 但是需要注意：多个库中可以会出现同名的表。另外也有部分数据库不支持跨库，在每个库中单独维护一份系统表。 在实际业务中一般也不需要多个库的元数据同时显示或重，更多的是按库分类。 为了统一处理，推荐先列出数据库列表，再根

8.6到8.7的重要更新

原因及需要处理的问题： 1.跨库的问题 群里一直有些中台和低代码的项目需要查询多个库的Table列表 但有些数据库并不支持跨库，比如他的系统表tables在每个库中单独维护 修改后会增加根据数据库自动创建、注销数据源的方法(数据源与数据库一一对应) 这样就不存在跨库的问题了 2.数据源切换的问题

在现有项目中集成anyline

首先需要是spring环境 1.pom中添加依赖，集成anyline一般是用来操作数据库 依赖需本两个 1).anyline-data-jdbc-mysql(oracle或其他数据库) 用来适配相应的数据库，用到哪个库就依赖哪个，用到多个就依赖多个 2).数据库官方的JDBC驱动,同样的有

验证数据源是否正常可用

提供了两个方法DataSourceHolder.validity()和hit() 其中hit()会抛出异常，可以捕捉用来显示详细信息 service ServiceProxy/DatasourceHolder/RuntimeHolder都提供了相应的方法 其中service不需要提供参数，因为ser

pg分区表-按范围(range)

//根据范围分区 Table table = service.metadata().table("log_master", false); if(null != table){ service.ddl().drop(table); } MasterTable master = new Master

pg分区表-按时间范围(range)

//根据时间范围分区 Table table = service.metadata().table("log_master", false); if(null != table){ service.ddl().drop(table); } MasterTable master = new Mast

pg分区表-按枚举值(list)

//根据部门编号 分区 Table table = service.metadata().table("user_master", false); if(null != table){ service.ddl().drop(table); } MasterTable master = new Ma

pg分区表-按HASH

Table table = service.metadata().table("user_master", false); if(null != table){ service.ddl().drop(table); } MasterTable master = new MasterTable("u

pg分区表-多级分区

进口数据多个国别，多个年份，原始结构如下 ID 年份 国别 品类 金额 1 2001 法国

关于ConfigTable静态变量与DataRow静态变量顺序问题

ConfigTable中变量比较多，项目中也经常用到。 但DataRow中有几个静态变量用的比较少如DEFAULT_KEY_CASE 注意在设置的时候尽量放在Spring启动之前 ConfigTable放在DataRow之前，因为DataRow静态变量初始前会引用到ConfigTable

derby版本与JDK版本对应

Java 21 及更高版本（处理弃用和删除旧 Java API 的版本） 10.17.1.0（2023 年 11 月 10 日 / SVN 1913217） Java 17 及更高版本（不再支持 Java SecurityManager 的发行版） 10.16.1.1（2022 年 5 月 19

关于类/属性VS数据库表/列之间的转换

通常情况下类和属性会采用大小驼峰的格式命名，而数据库则采用下划线的格式命名 默认情况下org.anyline.adapter.EntityAdapter接口实现了 类/属性 VS 表/列  之间的默认转换， 但有些数据库设计时并不采用下划线，也用了驼

关于查询元数据时返回的LinkedHashMap大小问题

因为不同数据库的配置不一致，以及设计人为风格的不一致，所以表名列名的大小写很容易混淆，对于不区分大小写的数据库没有问题，但是区分大小写的数据库一定要保持代码与原数据库一致。 在读取元数据时一般会返回一个LinkedHashMap，因为在读取元数据的过程中有可能需要多个过程才能读出完整数据，使用map

DriverAdapter执行过程

* DriverAdapter主要用来构造和执行不同数据库的命令,一般会分成3步,以insert为例 * 1.insert[调用入口]提供为上一步调用的方法,方法内部再调用[build]生成具体命令，最后调用[execute]执行命令 * 2.insert[命令构造]根据不同的数据库生成具体的ins

获取列信息的几种方式

// 1直接获取元数据 //sql server 列元数据中不返回表名，所以查不到注释 LinkedHashMap<String,Column> columns = service.metadata("SELECT ID AS USER_ID, ID AS ID, CODE AS US

源码目录与结构

1 anyline-boot 这个有没有都可以，主要是为了配合IDE中编辑配置文件时的自动补齐，里面只有几个配置类 2 anyline-core

执行流程-DML/DDL/metadata

这三部分的执行流程，基本上已固定，顶级父类统一实现。主要区别DDL命令合成、metadata命令合成、metadata结果集封装三个子流程。其中metadata的差异最大。 比较乐观的是大部分数据库可以归类到pg,mysql,oracle等几个系列，所在大部分方法在父类中已经实现了，只有极个别不

为什么取消了DynamicDataSource/ThreadLocal切换数据源的方式

关于切换数据源常用的方式是通过ThreadLocal干预DynamicDataSource返回值来实现。 理论是上可以的 但在JDK8实际应用中发现ThreadLocal并不可靠，特别是在线程池或线程共享环境中会导致数据源错乱。 大家经常百度的 为什么数据源切换失败，如果是偶尔失败&nbs

DriverAdapter定位过程

关于Param、ConfigStore、Condition、PrepareRun、Run

CreateRunPrepare

数据源注册过程

调用DefaultEnvironmentWorker.start();或spring.AutoConfiguration注册DataSourceLoadListener和不同的DataSourceLoader到上下文中 DataSourceLoadListener.load()  

命令调用、合成、执行过程

为什么要有AnyLine

一、面向场景不同‌ 二、针对产品不同‌ 三、操作对象不同‌ 四、面向用户不同‌ 五、对用户要求不同‌

adapter实现约定

继承关系 DriverAdapter JDBCAdapter OracleGenusAdapter OracleAdapter Oracle11Adapter

GBase

GBase 8c 中可以使用 Database 和 Schema 实现业务的隔离，区别在于 Database 的隔离更加彻底，各个 Database 之间共享资源极少，可实现连接隔离、权限隔离等，Database 之间无法直接互访。 Schema 隔离的方式共用资源较多，可以通过 grant 与re

兼容多模式的几个数据库adapter合并

如原版本中的 anyline-data-jdbc-kingbase-oracle anyline-data-jdbc-kingbase-postgres 合并到了 data-anyline-data-kingbase 这样在添加依赖时就不需要选择了，由adapter自动判断

kingbase

安装时选择兼容模式和大小写敏感 数据库兼容模式 请输入数据库兼容模式。 1- PG 2- ORACLE 字符大小写敏感特性 请输入字符大小写敏感特性。 1- YES 2- NO JDBC连接参数 jdbc:kingbase8://localhost:54321/testdb jdbc:k

关于SQL Server默认约束

创建表时可以同时添加默认值 已经有默认值的列不能修改默认值 需要先删除默认约束，再重新添加 ALTER TABLE 表 ADD DEFAULT 默认值 FOR 列 查询表结构时要一块把默认约束名查出来，方便下一步删除 OBJECT_

代码统计

adapter方法合计：376public：356protected：20调用入口：103命令合成：155结果集封装：50需要实现的大部分集中在【命令合成】 与 【结果集封装】 命令合成主要是DDL和metadata 结果集封装就是对应命令合成的SQL生成的查询结果中取数据给 Table

参与源码开发的几个疑问

对技术工作经验没有要求，你可以不熟悉JAVA，甚至可以不熟悉数据库，能提需求或BUG也可以 当然最好是你正在用这个数据库，有实战场景更容易发现细节，我们可以一块解决你实现工作中的问题。 如果有数据库厂商的现场支持那就最好了，省了大量查资料的时间了(小众数据库以及极处别的国产库是真能***)

具体工作的示例

在ddl test中有一段save(Table)的测试 正常情况下在保存时会检测数据库中的主键，与table中的主键是否一致，如果不一致会修改，大部分库是先删除旧的主键，再创建新的主键。 这就涉及到一个查询主键的SQL 如果这个SQL不正确，那当然下一步比较也会出问题。 如kingb

关于不同数据库的catalog/schema/database

关于默认的jdbc adapter

public static boolean IS_ENABLE_COMMON_JDBC_ADAPTER= false;   // 是否开启默认的jdbc adapter(仅支持部分标准SQL)遇到没有实现adapter的数据库时可以开启 默认情况下是禁用的，也就是说如果

关于DataSet派生列

如DataSet中已经查询出以下数据 NAME AGE 张三 20 张三三 30 需要在每一行上添加一个新

关于列的排序

创建表时会根据position自动排序，如果没有设置position属性则排到最后，如果都没有设置则按添加顺序 table = new Table("表名"); table.addColumn("C2","INT").setPosition(2); table.addColumn("C1","INT

DataSet通过OGNL表达式查询

DataSet通过OGNL表达式查询

关于列排序

关于列排序

关于虚拟数据源

在没有开发过程中通过是根据数据源key返回相应的service再执行数据库操作， 但有些场景需要生在指定数据库的SQL并不需要执行，这时并不需要注册实际的数据源，也就是不需要安装数据库 可以根据数据库类型返回一个service,这个service执行后可以返回相就的SQL并不会去连接数据库 An

适配器方法说明