常用示例

关于跨库操作与数据源自动复制

在低代码与中台项目中经常需要操作多个数据库的元数据，如查询出所有数据库中的表。 但是需要注意：多个库中可以会出现同名的表。另外也有部分数据库不支持跨库，在每个库中单独维护一份系统表。 在实际业务中一般也不需要多个库的元数据同时显示或重，更多的是按库分类。 为了统一处理，推荐先列出数据库列表，再根

JDBC操作clickhouse示例

ClickHouse适合用于在线分析处理查询（OLAP :Online Analytical Processing）MPP架构的列式存储数据库，能够使用 SQL 查询实时生成分析数据报告。 clickhouse不同于hadoop生态，采用 Local attached storage 作为存储 二、

根据SQL获取元数据信息

根据SQL获取元数据信息 service.metadata(String sql, boolean comment) comment:表示是否需要获取列注释，需要数据库官方驱动的支持 如果需要获取表结构应该用service.metadata().table("表名")//返回列、索引等全部表结构

关于Orcle的MERGE INTO 如果存在重复数据 覆盖或忽略

service.insert(table, set, new DefaultConfigStore().override(true, "ID")); service.insert(table, set, new DefaultConfigStore().override(false, "ID"))

关于分页参数

DataSet set service.querys(table, condition(true)); //分页，参数根据配置文件或PageNaviConfig 当前页数会提取http中的参数 PageNavi navi = set.getNavi(); navi.getTotalPage

mysql表结构导入postgres

先用mysql数据源获取表结构 Table table = mysql_service.metadata()table("crm_user") 再用pg数据源创建表 pg_service.ddl().create(table) 需要注意的是：schema和catalog需要根据情况调整一下，一般设置

关于DataSet派生列

如DataSet中已经查询出以下数据 NAME AGE 张三 20 张三三 30 需要在每一行上添加一个新

获取列信息的几种方式

// 1直接获取元数据 //sql server 列元数据中不返回表名，所以查不到注释 LinkedHashMap<String,Column> columns = service.metadata("SELECT ID AS USER_ID, ID AS ID, CODE AS US

异构数据源迁移核心部分代码Mysql到Apache Ignite|VoltDB

异构数据源迁移，大概过程就3步，其他细节就看具体情况了 1.在目标库创建表结构 2.从源库中查出数据 3.插入到目标库 举个从Mysql到Apache Ignite的示例 过程中有可能需要合并数据参考，可以通过ConfigStore.override(true)实现【目标库不存在则插入，存在则覆盖或

自定义是查询条件

在低代码平台、可视化数据源、自定义报表等场景中经常需要用到用户自定义查询条件 后台根据用户输入的参数生成查询条件 平时程序员硬编码的很简单的条件如WHERE ID = 1 ，其中只有1是可变参数 ID和等号是固定的 但自定义查询条件的场景中ID,等号,1 这三部分全部由用户提供 过程中可能

查询结果表格日志

默认已关闭 boolean IS_LOG_QUERY_RESULT = false ; // 查询结果输出日志 boolean IS_LOG_QUERY_RESULT_EXCLUDE_METADATA = true ; // 查询结果输出日志时 是否过滤元数据查询结果 in

find_in_set在DataSet中的应用

类似于mysql中的 FIND_IN_SET但适用类型更多， A,B,C字符串或[A,C,D]数组或集合 或Map都适用，如果是map则检测key

durid连接池返回NClobProxyImpl类型

在读取clob类型的数据时返回了com.alibaba.druid.proxy.jdbc.NClobProxyImpl 对于基础类型与官方驱动内置类型 anyline可以转换成项目运行实际需要的类型，如把clob类型转换成String 如pg驱动中的point转换成double[]或Po

根据mysql表结构创建pg表并分区

许多项目在初期使用了mysql但后期发现数据量太大需要分区，这时可以用pg内置的分区表 读取mysql表结构 修改差异部分，如catalog,schema等，当然数据类型就不需要手工处理了，可以自动适配 设置分区类型 //检测一下pg中有没有这个表 Table

从最简单的查询开始

查一个表的全部数据,和一行数据

查询部分列(属性)

查一个职员列表，因为简介等大文本影响IO,所以只查ID,NAME两列

根据情况生成不同的查询条件(in、like)

场景与上一步一样。只是拼接的SQL更费代码一点 根据情况生成 SELECT * FROM HR_EMPLOYEE WHERE TYPE_CODE IN(?,?,?) SELECT * FROM HR_EMPLOYEE WHERE NAME LIKE '?%'   ‘%?’ ‘%?

根据情况生成不同的查询条件(FIND_IN_SET)

仅针对MySQL

流式查询

默认情况下查询数据会把符合条件的数据一次性读到内存中，但是在大数据处理时会比较耗时甚至内存溢出。在这种情况下可以启用流式查询。返回一个迭代器。在迭代器中执行业务处理。 handler支持4种形式,按性能排序ResultSet>Map>DataRow>Entity 其中ResultS

DataSet/DataRow ognl表达式

DataSet集合中通过已存在的属性值计算其他属性值

关于replaces

replaces(String old, String replace, String ... keys); 把old替换成replace 如果不提供keys则替换所有的key replaces(boolea regex, String old, String replace, St

Anyline连接OceanBase

OceanBase的背后是MySQL或Oracle直接用MySQL的驱动就可以 参考源码https://gitee.com/anyline/anyline-simple/tree/master/anyline-simple-data-jdbc-dialect/anyline-simple-data-

关于默认主键

在默认情况下，更新数据时以ID作为主键。
可以通过ConfigTable.DEFAULT_PRIMARY_KEY = "CD" 或配置文件统一修改

在实际业务中经常需要根据其他列来执行批量修改可以通过
DataRow或DataSet的setPrimaryKey("user_id")来设置新的主键,这样可以实现按user_id批量更新数据

DataRow中的put与set的区别

由于put是继承自Map所以返回值是Object类型 而set是DataRow中的方法 返回的是DataRow(this) 大数情况下 put set通用 但在需要大量链式操作的场景在需要用到set

DataRow.value多个空白压缩成一个空格

DataRow row = new DataRow(); row.compress(); //压缩全部列 row.compress("ID", "CODE");//压缩指定列

service.update(DataRow)只更新值有变化的列

service.update(DataRow)只更新值有变化的列

DataRow从另一个DataRow中复制部分值

DataRow从另一个DataRow中复制部分值，如果数量比较少一般用r1.put("K", r2.get("K")); 但是如果数量多了并且列名不一致可以用copy

DataRow转换成实体类

User user = row.entity(User.class);

DataSet抽取指定列的集合,返回List

DataSet抽取指定列的集合,返回List

DataSet/DataRow批量替换

以下方法DataSet同样支持，DataSet内部是实际是遍历调用了DataRow相应的方法

数据集外键关联

应用场景如 订单集合中有user_id，需要根据user_id到users集合中关联中user_name 如果通过SQL实现大概是这样 SELET O.*, U.NAME AS USER_NAME FROM MM_ORDER AS O LEFT JOIN CRM_USER AS U ON M.U

DataSet/DataRow与实体对象之间的转换

EntitySet users = set.entitys(User.class): User = row.entity(User.class); 因为实体类中的属性数据类型限制，一些值会转换失败，可以提前格式化， 如null赋值给int属性时会失败，可以先把集合中所有的空

环境检测场景中的几个动态表单示例

这里只是后格式转换部分,插入到word参考【anyline office】，最困难的是前端怎么把这个规则告知后端（大概思路是先定义几种规则让用户来选，比如横向显示什么，竖向显示什么，每行最多几列） 先看源数据 主键

DataSet分页

DataSet set = new DataSet(); List pages = set.page(10) //每页10行，分成多少页根据总数 List pages = set.split(10)//分成10页，每页多少行根据总

Entity 下划线与大小驼峰转换

如果属性上有注解则按注解设置的列名转换， 如果属性上没有注解 会根据 ConfigTable.ENTITY_FIELD_COLUMN_MAP进程转换; 默认"camel_"属性小驼峰转下划线 joinYmd > join_ymd

Entity注解

anyline并没有依赖JAP，只是根据注解的名称及注解属性名称来解析注解，所以需要注解的需要自己添加相关依赖 可以解析的注解： 表名:table.name, table.value, tableName.name, tableName.value 列名:column.name,column.val

EntityAdapter接口说明

EntityAdapter主要用来实现实体类与表，属性与列之间的转换。 系统自带一个默认的EntityAdapter，每个项目也可以提供定制的EntityAdapter，参考【EntityAdapter定制】 在执行转换时会按顺序调用,直到成功为止，顺序以EntityAdapter.order()方

属性关联表主键生成器注解

通常情况下通过配置文件设置一个统一的主键生成器就可以，但如果有一部分表需要单独设置 一种方式是可以通过配置文件单独指定 另一种方式可以通过注解设置 另外一些属性的关联表的主键生成器也可以通过注解设置,这种情况比较特殊在其他JPA中一般不这样用 @Table(name="HR_EMPLOYEE")

upsert(已存在则更新或跳过，中不存在则插入)

在数据中台、数据同步场景中经常有这种需求，如果数量少可以清空后再全量同步一次，这样最省心。也可以插入前检测一下数据是否存在。 在如果数量很大，以方式显然不可取，如果自己实现一般是通过索引(性能)+存储过程(一次交互)实现 当然许多数据库都对这种场景提供了原生支持。用过ORM实现过这种

sequence

BigDecimal next = service.sequence("SIMPLE_SEQ"); DataRow nexts = service.sequences("SIMPLE_SEQ", "SIMPLE_SEQ2"); BigDecimal cur = service.sequence(fa

删除数据的几种场景

删除会有以下几类情况 1.先查出数据，再执行删除 2.直接执行SQL 3.根据约定参数删除 4.复杂条件可以构造ConfigStore 源码请参考 https://gitee.com/anyline/anyline-simple/tree/master/anyline-simple-d

插入数据后返回主键值

插入数据后返回主键值

简易方式指定数据源和主键

service.querys("table(col1,col2)") <数据源>放在开头 <主键>放在结尾 ds_sso表示数据源 ID,CODE表示主键

关于更新条件

确定更新条件的 按指定条件更新；没有指定条件的 按主键更新 @Test public void updateRow(){ DataRow row = new DataRow(); row.put("ID", 10); row.put("

查询返回指定列

默认情况下查询*也就是查询所有列，但如果表中有大文本会影响性能，可以在表名后加列名来控制查询和返回内容 service.querys("user(id,code)") 生成SQL SELECT id, code FROM user

关于几个 空值 的查询示例

//service.query("crm_user", "+id:null"); // ID IS NULL //service.query("crm_user", "+id:");     // ID IS NULL //以上两种情况 经常是通过变量拼接出来如 "+i

获取数据库所有表

获取数据库所有表,包含超表、子表

DataSet/DataRow.getMetadatas

DataSet set = service.querys("表"); set.getMetadatas()会返回列的一些属性，正常情况下只会返回一些基本属性，不会再额外查询列的详细信息，因为那样需要再发起更多的查询，而大部分情况下是不需要列的详细数据的，如列的注释， 如果确实需要可以打开Config

获取表或视图的DDL

//查询表结构时，默认会查询DDL Table table = service.metadata().table("CRM_USER") List ddls = table.ddls(); 对于确认只有一条SQL的数据库可以 String ddl = table.ddl(

查询表上的索引

查询crm_user表上的索引 LinkedHashMap indexs = service.metadata().indexs("crm_user"); for(Index item:indexs.values()){ System.out.printl

修改表名

Table table = service.metadata().table("新表名"); table.update().setName("新表名"); service.ddl().save(table); 注意表名相当于一个表的唯一标识，所以不是直接table.setName(),这样会定位不到

修改主键

Table table = service.metadata().table("TEST_PK"); Column pcol = table.addColumn("PKID", "int"); PrimaryKey pk = new PrimaryKey(); pk.addColumn(pcol);

修改列属性(类型兼容)

表中没有数据的情况 一般可以正常修改 但部分数据库有些类型之间不可修改 表中有数据的情况 可能造成值类型不兼容，如果需要自动修改需要开启 //ConfigTable.AFTER_ALTER_COLUMN_EXCEPTION_ACTION // 0:中断执行 // 1:直接修正 // n:行数n时触发另一个监听(默认返回false)

修改列名

//修改列名2种方式 //注意:修改列名时，不要直接设置name属性,修改数据类型时，不要直接设置typeName属性,因为需要原属性 // 1.可以设置newName属性(注意setNewName返回的是update) column.setNewName("B_TEST").setTypeN

删除列

1.保存表时 在指定列上标记删除 2.保存表时删除数据库中有，但表结构中没有的列 3.直接删除列

DDL保存表结构时，删除列和添加列

如数据库中原来有3列，C1,C2,C3 保存结构时只提供了C3,C5 在默认情况下 修改C3,添加C5 C1,C2保持不变 打开 ConfigTable.IS_DDL_AUTO_DROP_COLUMN = true 删除C1,C2 修改C3,添加C5

ControllerListener 应用场景

Controller中调用condition()封装了查询条件后 会调用public ConfigStore  ControllerListener.after(HttpServletRequest request, ConfigStore configs) 需要统一处理的事

关于or与ors

在标准的SQL中是没有ors的，这里的ors是ConfigStore的方法， 如果ConfigStore已经有了两个条件A,B 现地加第3个条件C 如果用or(C) 则生成  A AND (B OR C) ，即C与其前面的一个条件开成或关系 如果用ors(C) 则生

多个ConfigStore合成一个ConfigStore

在代代码，运行时自定义场景中，经常会调用不同的方法生成多个ConfigStore也就是多组查询条件 但在调用service.querys时只能接收一个ConfigStore 解决方式： 生成一个ConfigStore 在合成查询条件时把ConfigStore作为参数输入，通过

复杂条件的合成

ConfigStore a1 = new DefaultConfigStore().and( "id11", 11).and("id12", 12); ConfigStore a2 = new DefaultConfigStore().and( "id21", 2

关于函数操作

在查询条件和查询列中经常需要函数，当然这样查询对性能影响非常严重，只是举例说明一下语法 SELECT  id,to_char(reg_time,'yyyy-mm') as ym FROM crm_user WHERE char(reg_time,'yyyy-mm-dd') LIKE

关于数组参数值

标准的url中一般是这样http://127.0.0.1/list?id=1&id=2&id=3 或者用form表表单提交三个name=id的input 也可以提交json格式{id:[1,2,3]} 以上三种情况condition("ID:[id]")都可以解析成WHERE I

关于自定义SQL中的变量赋值

String sql = "SELECT * FROM CRM_USER WHERE CODE = :PARAM_CODE"; DataSet set = service.querys(sql, "PARAM_CODE:1"); //生成SQL SELECT * FROM CRM_USER WHERE CODE = 1 //特别注意这以下情况 CODE:1与SQL中的变量匹配不成功时，SQL会

XML中自定义复杂SQL

文件格式: SELECT M.I

数据源注销

可以主动注销，DataSourceHolder.destroy(key); 实际最终调用的是JDBCRuntimeHolder.destroy(key);因为这时不只是要注销数据源了，相关的bean都要一块注销 在注册同名数据源时也会自动注销

日期类型

有些数据库对数据类型要求比较严格，不能隐式转换，这时需要开启        ConfigTable.IS_AUTO_CHECK_METADATA = true; 这样在插入数据前可以检测列的数据类型，检测到数据类型才能实现正确的格式转换 例如Oracle

多数据源事务控制

这里说的是有多个数据源，并且多个数据源需要控制事务。【为会么要创建多个事务管理器】 如果然后有多个数据源，但只需要控制主数据源的事务，不要往下看只需要参考【多数据源注解事务异常】 分两种情况说明 一、需要控制事务的方法内部不需要切换数据源。并且编码阶段已经可以确认是哪个数据源  

多数据源事务管理器bean.name

在存多数据源的情况下会创建多个事务管理器【为会么要创建多个事务管理器】 事务管理器在spring上下文环境中的命名也就是bean.name 如在默认数据源之外 又创建多个数据源a,b,c spring会针对默认数据生成一个默认事务管理器:transactionManager anyline

数据库读、写过程中的类型转换

读取数据库的过程中，驱动类从数据库中读取出数据后，会有一步类型转换的过程，通常情况下内置的DataReader可以满足大部分的情况， 但如果遇到特殊情况比如希望转换成项目定义的类型,这时需要注册一个自定义的DataReader 可以调用DefaultDriverAdapter静态方法 /*

插入数组类型

pg数组库支持数组类型，在定义时可以这样 table.addColumn("TYPE_IDS", "INT[]"); //在原型基础上加[] 插入数组类型时，需要设置这一列的数据类型，否则会把数组拆开只取下标0的条目，因为不知道数据库中是数组类型 可以打开ConfigTable.IS_AU

Neo4j基础操作

//以下说到的标签相当于关系型数据库中的表 //原生CQL创建节点 service.execute("create (d:Dept{name:'财务部', leader:'张三'})"); //创建多标签(表)节点 service.ex

MongoDB基础操作

DataSet set = new DataSet(); Long fr = System.currentTimeMillis(); for(int i=0; i<10;i ++){ MongoDataRow row = new MongoDataRow(); row.put("_id"

关于日期时间格式化

通过情况一可以用DateUtil.format来格式化 或DateUtil.parse执行解析 可以接收各种数据类型如String/Long/Date(包括sql.Date)/LocalDate等 String ymd = DateUtil.format("yyyy-MM-dd")把当前日

从其他系统中下载文件 为本系统用户提供下载源

@RequestMapping("export") public void export(HttpServletRequest request, HttpServletResponse response){ 	HttpResponse httpResponse= HttpBuilder.init().setUrl(url).setParams(par
                        

                        

                            
                        
                    

导出Excel直接用于下载(服务器不生成或保存文件)

导出Excel直接用于下载(服务器不生成或保存文件)

删除标签及标签体

/** * 删除标签及标签体 * @param src xml/html * @param tags 标签，如果不提供则删除所有标签 * @return String */ public static String removeTagWithBody(String src, String ...tags)

删除简单标签外的其他标签

/** * 删除简单标签外的其他标签 * "br","b","strong","u","i","pre","ul","li","p" * @param src  html * @return String */ public static String removeHtmlTagExceptSimple(String src) 

删除所有空标签

/** * 删除所有空标签 * @param src xml/html * @return String */ public static String removeEmptyTag(String src)

清除所有标签(只清除标签,不清除标签体)

/** * 清除所有标签(只清除标签,不清除标签体) * @param src xml/html * @param tags tags * @return String */ public static String removeTag(String src, String ...tags)

删除 tags之外的标签 只删除标签不删除标签体

/** * 删除 tags之外的标签只写一次 "b" * 只删除标签不删除标签体 * @param src  html * @param tags  tags * @return String */ public static String removeTagExcept(String src, String ...tags)

获取所有 包含attribute属性并且值=value 的标签与标签体

/** * 获取所有 包含attribute属性并且值=value  的标签与标签体 * 单标签只匹配有/>结尾的情况,避免与双标签的开始标签混淆 * 如class="a" : attribute=class value=a * style="width:100px;" :attribute=style value=width * [ * [整个

获取所有 包含attribute属性 的标签与标签体,不支持相同标签嵌套

/**  * 获取所有 包含attribute属性 的标签与标签体,不支持相同标签嵌套  * [  * [整个标签含标签体, 开始标签, 结束标签, 标签体, 标签名称],  * [整个标签含标签体, 开始标签, 结束标签, 标签体, 标签名称]  * ]  * @param src xml/html  * @param a

根据属性名 删除标签(只删除标签，保留标签体)

/** * 根据属性名 删除标签(只删除标签，保留标签体) * @param src xml/html * @param attribute 属性名 * @return String */ public static String removeTagByAttribute(String src, String attribute) RegularUtil.removeTagByAttribute

根据属性名与属性值 删除标签(只删除标签，保留标签体)

/** * 根据属性名与属性值 删除标签(只删除标签，保留标签体) * @param src xml/html * @param attribute 属性名 * @param value 属性值 * @return String */ public static String removeTagByAttributeValue(String src, String attribute, Str

删除所有 包含attribute属性 的标签连同标签体一起删除

删除所有 包含attribute属性 的标签连同标签体一起删除  RegularUtil.removeTagWithBodyByAttribute(str,"class")      <

删除所有 包含attribute属性=value值 的标签 连同标签体一起删除

删除所有 包含attribute属性=value值 的标签 连同标签体一起删除  RegularUtil.removeTagWithBodyByAttributeValue(s,"class","a")   

从html中抽取内容片段

String html = "一段html源码"; 获取所有 包含attribute属性 的标签与标签体,不支持相同标签嵌套 RegularUtil.getTagAndBodyWithAttribute(html, "class") 获取所有 包含attribute属性包含value值  的标签与标签体 RegularUtil.getTagAn

清除html源码中的标签或标签体

通过爬虫爬取的html源码中提取内容时，如果遇到复杂的标签结构不利用抽取内容，可以先把部分标签清除 String html = "一段html源码"; 清除所有标签(只清除标签,不清除标签体) RegularUtil.removeAllTag(html) 清除所有 包含class属性 的标签与标签体 RegularUtil.removeTagAnd

Java截取html

在截取html时经常会遇到html标签被破坏的情况，这时需要识别出截止位置是否处于某个标签内部,如果在标签内容需要定位到标签的结束位置

entity()根据表结构获取request提交的参数

entity()根据表结构获取request提交的参数

如果数据库中已存在数据则更新或跳过，如果数据库中不存在则insert

如果数据库中已存在数据则更新或跳过，如果数据库中不存在则insert

DataSet实现分组，合并

DataSet实现行转列，分组，合并

动态注册多数据源

动态注册多数据源

DataSet实现行转列

pivot

关于生成水印位置偏移

WatermarkUtil实现水印添加 主要通过设置x,y坐标实现水印定位 默认以左上为(0,0)起始位置往右下偏移 如果设置xy为负数则从右下为(0,0)起始位置往左上偏移 xy默认为起始位置的偏移像素数量， 如果设置xy为小数则按长或宽的百分比计算偏移量如wihth=100,x=0.5则按左侧偏移50(100*0.5)像素 WatermarkUtil util = new 

视频截图

视频截图需要依赖anyline-video 取第index帧截图 VideoUtil.frame(videoFile,imgFile,indx); 取中间帧截图 VideoUtil.frame(videoFile,imgFile);

关于必须条件

 以“+”开头表示当前条件必须拼接 如condition("+NM:nm") 如果客户端提供了nm值，如http://localhost?nm=zh 则正常生成SQL:  SELECT * FROM TAB WHERE NM = 'zh' 如果没有提供nm值,如如http://localhost或 http://local?nm= 则生成SQL: 

关于IN条件

关于IN条件

关于默认值

关于默认值

关于or

OR条件构造相关复杂 可以根据http参数生成OR条件 或在java中取值生成OR条件

删除空值

删除空值

替换空值

替换空值

把部门=D的所有用户,分组设置成G

把部门=D的所有用户,分组设置成G

DataSet.select选择器

DataSet.select选择器,可以实现类似SQL的查询

递归提取对象中的value

BeanUtil.extract()递归提取对象中的value DataRow.get()函数实现同样的功能

DataSet交集

DataSet交集

查询DataSet中CODE in(1,2,3)的子集

set.select.in("CODE",1,2,3)

查询DataSet中PRICE>100的子集

set.select.greater("PRICE",100)

查询DataSet中NAME以‘张’开头的子集

set.select.like('NAME','张%') set.select.startWith('NAME','张')

查询DataSet中AGE在20到30之间的子集

set.select.between('AGE',20,30)

移除set中指定条件的子集

先通过set.select过滤出符合移除条件的子集，再通过set与子集取差集

DataSet按条件过滤

DataSet按条件过滤

DataSet移除每个条目中指定的key

DataSet移除每个条目中指定的key

DataSet截断

从begin开始截断到end,方法执行将改变原DataSet长度 如果输入负数则取后n个,如果造成数量不足，则取全部

DataSet筛选不重复的数据

DataSet筛选不重复的数据

DataSet计算总和

DataSet计算总和

DataSet计算平均值

DataSet计算平均值

DataSet取最大值最小值

DataSet取最大值最小值

DataSet提取集合中一列并拼接成String

DataSet提取集合中一列并拼接成String

DataSet抽取指定列生成新的DataSet

抽取指定列生成新的DataSet

DataSet合并两个集合

set1与set2合并生成新的集合 DataSet set = set1.unionAll(set2) 合并不重复的集合，根据ID,CODE判断是否重复 DataSet set = set1.union(set2,"ID","CODE")

查询时设置主键

查询时设置主键

颜色尺寸二维数组交叉表格(DataSet实现垂直水平分组合计)

table tr class="stat" td尺寸/td c:forEach var="size" items="${sizes}" td class="number-cell"${size.NM

切换数据源

//用表示数据源,执行完成后会自动切换回默认数据源 service.query("crmcrm_customer"); service.query("HR_DEPARTMENT"); //这里查的还是默认数据源 service.query("erpmm_material"); try { //动态注册一个数据源 //数

DataRow key不区分大小写设置

如果设置了keyCase = KEY_CASE.SRC,并且配置文件中设置true 在执行get时不区分key大小写并忽略-与_,但是DataRow中可以put多个key如(USER_ID,userId,UserId),取值是取最后put的值 其他情况在put和get时会强制转换k

压缩文件

压缩文件

删除压缩包中的指定文件

删除压缩包中的指定文件

替换压缩包中的文件

替换压缩包中的文件

向压缩文件中追加文件

向压缩文件中追加文件

html转word

html转word基于office open xml与poi等第三方工具无关 可以用来替换书签、${key}格式的占位符

DataSet实现行转列

DataSet实现行转列

DataRow根据表结构接收参数值

如果有实体类的话,可以根据实体类的属性来接收url中的参数值。 而entity()函数则是根据表结果来接收 DataRow row = entity("{HR_USER}"); DataRow row = entity(TableBuilder.init("HR_USER")); 默认情况下列名与参数名一致。 实际开发中前端提交的数据经常是小驼峰格式，可以在anyline-config.xml配置

entity()接收加密数据

如果前端提交的参数是加密后的值，需要这样解密 DataRow row = entity("ID:id+"); 与getParam("id", true)效果一样

前端未提交数据情况下清空一列值

默认情况下前端不传值时，执行update时并不更新这一列 如 DataRow row = entity("ID:id","REMARK:remark","NAME:name"); service.save(row); 这时如果没有提交remark参数值，或remark值为空时，并不更新REMARK列 但有些情况下是前端需要清空一个属性值，有以下种方式 1.提交一个"NULL"的值 2.指定必须更新

DataSet清空集合中指定列为空的条目

DataSet set = service.querys("HR_USER"); 清空set中DEPT_ID和SORT_ID都为空(包括null和"")的行 public DataSet removeEmptyRow(String... keys) set.removeEmptyRow("DEPT_ID","SORT_ID"); 清除指定列全为空的行,如果不指定keys,则清除所有列都为空(包括n

读取Excel

org.anyline.poi.excel.ExcelUtil提供了读取excel的工具, file:需要读取的文件 sheet:需要读取的sheet名称或下标 rows:从第几行开始读取 返回二维ListListString /** * 读取指定Sheet也的内容 * @param file file 文件 * @param sheet she

导出excel

导出excel两种情况：有模板或没有模板 如果没有模板直接导出一个新文件 如果有模板则在原模板基础上追加内容 如果模板文件中有多个sheet一般是先复制一个新文件，再调用多次没有模板参数的export(File file, String sheet, int insert, ListStringheaders, ListString keys, DataSet se

导出EXCEL合并单元格

注意这里说的是需要合并单元格的情况。如果不需要合并的不需要builder 直接调用 export(File template, OutputStream os, DataSet set, String ... configs)

读取合并单元格的excel值

读取被合并行的单元格时，会从当前合并组中取第一个单元格的值 以上读取结果[[11, 12, 13], [21, 22, 23], [21, 32, 33]]

关于分页数据结构的设计

当我们把分页信息放在结果集内部，而非用分页对象包裹结果集时，触发的不只是一次结构重组——而是一整条架构决策链的根本性重定向。

生成手机通讯录

把手机号或手机号+姓名生成手机通讯录格式，再把生成的内容保存成文件，发送到手机中，打开即可导入手机通讯录

一维数组转成DataRow 二维数组转成DataSet

通常情况下是把Bean或Map转成DataRow，把Bean和Map的集合转成DataSet 但有些情况下如从excel中读取数据，读取出来的结果是List>结构，并没有列名或属性名，只是按下标顺序排列。 这时操作List就比较原始，如分组，排序等都需要重写。 所以可以转成DataSet，这样可以利用DataSet的方法对结果集进行去重、分组等

往同一个excel中写多个sheet

public static boolean export(File file, String sheet, int rows, DataSet set, String ... configs) 如果文件存在则在当前文件中插入数据，如果文件不存在则新创建文件 这里的sheet如果在file中已存在，则往这个sheet中插入数据，如果不存在则新创建sheet再继续插入数据，其他重载函数规则相

替换DataSet,DataRow中所有空值(null,'')

将所有列中的空值替换成value public DataSet replaceEmpty(String value)

将所有列中的oldChar替换成newChar

将key列中的oldChar替换成newChar public DataSet replace(String key, String oldChar, String newChar)   将所有列中的oldChar替换成newChar public DataSet replace(String oldChar, String newChar) 

关于DataRow的复合KEY

许多情况下需要从DataRow中取多个值合并显示。如导出excel时地址列需要合并省市区详细地址 DataRow可以取多个值拼接，但DataSet则需要遍历，非常麻烦 DataRow提供了复合KEY取值的函数 如{ID:1,CODE:A01,NAME:张三} row.getString("{ID}-{CODE}")可以取出   1-A01 row.getString(

导出EXCEL带序号

导出excel时如果每行需要一个序号可以用${num}来代替属性名，如 export(file,  list, "序号:{num}","姓名:NAME","年龄:AGE") 1 张三 20 2 李四 22

导出EXCEL中的序号合并单元格

在导出excel时有可能不是每行一个序号，而是每组一个序号，如按部门分组，每个部门一个序号

设置所有空值单元格对齐方式

有些情况下，需要把空值替换成其他固定的符号如(/) 这时可以设置这些单元格的对齐方式 TableBuilder.init() .setEmptyCellVerticalAlign("top") .setEmptyCellHorizontalAlign("center")

设置单元格默认边框

TableBuilder.init()..setCellBorder(true)

导出复杂的表格需要借助TableBuilder先生成Table，再将Table导出到excel中

导出复杂的表格需要借助TableBuilder先生成Table，再将Table导出到excel中 {num}表示序号,(DEPARTMENT_NM)表示根据哪一列计算序号，这里部门名称需要分组合并，所以num不是按行计算 "YM(DEPARTMENT_NM)" //如果月份相同则合并，前提是部门已经合并

最简单的导出一个列表,如果文件已存在，则在原文件内容基础上插入行

最简单的导出一个列表,如果文件已存在，则在原文件内容基础上插入行 如果表头、表尾格式比较复杂，可先创建模板，再根据模板导出 根据模板导出时就不需要指定表头了，只要对应好顺序，并计算好从哪一行开始写入

读取合并单元格的excel

遇到合并单元格的，将拆分开未合并前的状态，拆分后补上每个单元格的值 返回的是一个二维数组

导出excel,多个sheet

//默认情况下导出的第0个sheet也就是sheet1 //如果要导出到多个sheet需要执行多次export导出到同一个文件,每次执行时指定sheet名称或下标 Table table = null; File file = new File(dir, "export_sheet.xlsx"); ExcelUtil.export(file, "shet1", table); ExcelUtil.

html代码中抽取指定标签

获取所有超链接(a标签) 提取单标签+双标签 不区分大小写 0:全文 1:开始标签 2:标签name 3:标签体 (单标签时null) 4:结束标签 (单标签时null) 注意标签体有可能是HTML片段，而不是纯文本

html中抽取标签时嵌套问题

从html中抽取多个标签，如需要抽取a标签和li标签 最简单的是抽取两次 RegularUtil.fetchAllTag(html,"a") RegularUtil.fetchAllTag(html,"li") 但这样有个问题，两个标签的顺序会乱， 如果需要保持顺序可以通过RegularUtil.fetchAllTag(html,"a","li"); 但是一定注意:这里

从html源码中截取字符串

放多情况下我们并不需要复杂的标签内容，只需要截取几个关键字 如提取商品名称和商品价格,而这两个值有可能是根其他内容混在一块的

读取带表头表尾的excel

读取带表头表尾的excel 读取第1个sheet(下标从0开始) 表头在第0行,如果没有表头，结果集以下标作为key 数据从第1行开始 到第几行结束(如果负数表示 表尾有多少行不需要读取)

关于几种OR条件查询的情况

//以下三种格式,只有cd取值成功时，条件才生效 //当cd=1,id=2时 WHERE CODE = 1 OR CODE =2 //当cd=null,id=2时 条件不生效 //当cd=1,id=null时 WHERE CODE = 1 service.querys("HR_USER", condition("CODE:cd|id")); //当cd=1时 WHERE CODE =1 OR

关于merge与join的区别

关于merge与join的区别

从列式数据库中取出坐标数据，格式化成地图轨迹需要的数据

轨迹原始数据(保存在列式数据库或thingsboard平台上) lng=[{"ts":1655007789001,"value":120.1}, {"ts":1655007759002,"value":120.2}], lat=[{"ts":1655007789001,"value":36.1}, {"ts":1655007759002,"value":36.2}] 通过org.anyline.

DataSet拆分

有些情况下需要对DataSet分组处理。如：查询出2000个手机号，如果一短信平台一次只能发500个 List list = set.split(set.size()/500); for(DataSet items:list) { List mobiles = items.getDistinctStrings("mobile"); //

IN条件下多种参数格式的接收

对于标准的url格式 /list?id=1&id=2 以及标准的json格式 {id:[1,2]} 可以通过condition("ID:[id]")的形式接收 对于非标准格式如 /list?id=1,2 可以通过condition("ID:[split(id)]")的形式接收 最终都是生成SQL  WHERE ID IN(1,2)

excel根据内容定位单元格

excel根据内容定位单元格，支持正则表达式，

关于日期类的链式操作

String ymd = DateBuilder.init().addYear(1).addDay(-1).format("yyyy-MM-dd");

几个常用的配置参数

//DataRow的key大小写(默认大写) DataRow.DEFAULT_KEY_KASE = KeyAdapter.KEY_CASE.LOWER; //http分页参数-当前当前第几页(默认page) PageNaviConfig.DEFAULT_KEY_PAGE_NO = "pageNum"; //http分页参数-每页多少条(默认vol) PageNaviConfig.DEFAULT_K

关于分页参数

默认的分页参数名比较长: public static String DEFAULT_KEY_PAGE_ROWS = "_anyline_page_rows" ; //设置每页显示多少条的key public static String DEFAULT_KEY_PAGE_NO = "_anyline_page" ; //设置当前第几页的key public static

关于自动检测表结构

在执行数据库操作时，许多参数是以String形式获取到的,无法参数识别数据类型，如url中的参数 还有一些数据类型在Java中没有对应关系,如xml/josn/几何图形等 而有些数据库在执行SQL时会执行强类型检测。 不像我们平时用的MySQL在执行时会进行隐式转换，无论什么类型只要能转换成功就可以执行。 而PostgreSQL则要求jdbc参数与表结构对应，如果在va

关于更新部分属性(列)、忽略部分属性(列)

在实际操作中经常需要更新指定的列，或者忽略更新指定的列

关于insert或update时确定哪些列参与到insert或update中

关于insert或update时确定哪些列参与到insert或update中

关于neo4j返回值的数据结构

MATCH (n:User) RETURN n; [ {n:{id:1,name:''}}, {n:{id:2,name:''}}, {n:{id:3,name:''}} ] 而 service.querys("User"); 返回 [ {id:1,name:''}, {id:2,name:''}, {id:3,name:''} ]

查询数据库返回的数据字段全是大写，字段怎么设置返回小写

可以通过ConfigTable设置全局参数 ConfigTable.IS_LOWER_KEY = true; ConfigTable.IS_UPPER_KEY = false;

DataRow中两个比较特殊的方法put/puts

通常情况下DataRow经常的方法是put(key, value)， get(key) 但是在操作复杂数据结构时经常会遇到多层嵌套的情况 比较啰嗦的编码一般会这样 DataRow r0 = new DataRow(); DataRow r1 = new DataRow(); r0.put("r1",

DataRow深层取值

DataRow深层取值,如果DataRow有多层如一个User实例,取user的部门的领导的年龄 如果其中一层是数组 取第0个(如部门有多个领导)，不支持多维数组

DataRow舍入模式(四舍五入/五舍六入/四舍六入 五留双/银行家舍入法)

DataRow舍入模式(四舍五入/五舍六入/四舍六入 五留双)

DataSet聚合计算

1.分组 如提供一个职员列表的set [ {id:1, name:'a', dept:'财务部', age:20} ,{id:2, name:'b', dept:'财务部', age:30} ,{id:3, name:'c', dept:'市场部', age:35} ] 根据部门分组 set.gro

DataSet/DataRow 下划线与大小驼峰转换

数据库中经常是下划线命名，如果需要给前端输大小驼峰格式。可以通过DataSet/DataRow转换

DDL中极易混淆的操作:rename

修改表名或列名的操作比较特殊， 先看一个最终执行的SQL  RENAME TABLE 原表名 TO 新表名 与其他修改属性的操作不一样的新名与原表名与新表名都需要保留，否则就不知道要修改的是哪个表或哪个列了。这不像在Java中可以引用传址。 这里有一个需要记住

SQL中的变量及占位符格式

SELECT * FROM CRM_USER WHERE ID = :ID  以:标识的执行时直接替换  以::标识的执行时以?占位   NAME LIKE :NM + '%'   (NAME = :NM)   NAME = ':NM'   NM IN (:NM)  

七种方式注册数据源

固定的数据源可以在配置文件中提前配置好 如果有动态数据源，如在运行过程中由用户动态添加数据源 可以在Java中注册

三种方式切换数据源

切换数据源有两种试: 1.使用通用AnylineService实例 1.1)通过DataSourceHoldersetDataSource("crm")方式设置当前数据源,再调用service.query等方法操作数据库 1.2)service.query("USER");在表名前添加数据源名称 2.通过ServiceProxy返回数据源对应的service(推荐使用这一种方式,隔离性更强,不容易混淆​)

如何清理爬虫数据中一些不需要的 HTML 属性 只删除属性 不删除标签与标签体

org.anyline.util.regula.RegularUtil /**  * 删除所有标签的属性  * @param src html  * @param attributes 属性 如果不传则删除所有属性  * @return String  */ public static String removeAttribute(String