nifi-hzyadev-bundle/nifi-hzyadev-bundle
liuy d34165962c fix(hzya-nifi-GetJackyunOpenData-processors):优化数据获取判断逻辑
-补充判断吉客云接口返回数据的两种情况
-增加 checkIsNull 方法检查 JSON 对象是否为空
- 优化数据获取流程,确保准确判断是否有数据
2025-09-12 13:17:46 +08:00
..
hzya-nifi-AdvancedJoltTransformer-nar build(hzya-nifi-AdvancedJoltTransformer-nar): 添加 AdvancedJoltTransformer NAR 包构建配置 2025-07-30 13:49:31 +08:00
hzya-nifi-AdvancedJoltTransformer-processors fix(frame): 优化数据转换逻辑 2025-08-27 19:36:38 +08:00
hzya-nifi-AutoAddOracleDatafile-nar feat(nifi): 添加自动扩展 Oracle 表空间的功能 2025-08-14 19:02:37 +08:00
hzya-nifi-AutoAddOracleDatafile-processors feat(nifi): 添加自动扩展 Oracle 表空间的功能 2025-08-14 19:02:37 +08:00
hzya-nifi-AutoJsonTableCreate-nar build(nar): 添加新 NAR 模块并更新项目配置- 新增 hzya-nifi-AutoJsonTableCreate-nar模块 2025-07-11 10:49:04 +08:00
hzya-nifi-AutoJsonTableCreate-processors feat(nifi): 添加自动建表处理器 2025-07-10 19:14:40 +08:00
hzya-nifi-DevGeneratePaginatedSqlProcessor-nar 移除远程仓库中的 target 目录 2025-07-30 10:02:30 +08:00
hzya-nifi-DevGeneratePaginatedSqlProcessor-processors fix(hzya-nifi):修复 SQL Server 分页查询语法问题 2025-07-31 09:07:43 +08:00
hzya-nifi-GetJackyunOpenData-nar feat(nifi): 添加吉客云开放数据同步处理器 2025-08-27 19:00:12 +08:00
hzya-nifi-GetJackyunOpenData-processors fix(hzya-nifi-GetJackyunOpenData-processors):优化数据获取判断逻辑 2025-09-12 13:17:46 +08:00
hzya-nifi-JsonSplitter-nar build(nar): 添加新 NAR 模块并更新项目配置- 新增 hzya-nifi-AutoJsonTableCreate-nar模块 2025-07-11 10:49:04 +08:00
hzya-nifi-JsonSplitter-processors feat(processor): 添加处理失败的 REL_FAILURE 关系 2025-07-11 11:14:52 +08:00
hzya-nifi-U8CInterface-nar feat(nifi): 添加 U8C 接口处理器 2025-07-18 14:06:50 +08:00
hzya-nifi-U8CInterface-processors feat(nifi): 添加 U8C 接口处理器 2025-07-18 14:06:50 +08:00
hzya-nifi-VoucherConversion-nar build(hzya-nifi-AdvancedJoltTransformer-nar): 添加 AdvancedJoltTransformer NAR 包构建配置 2025-07-30 13:49:31 +08:00
hzya-nifi-VoucherConversion-processors build(hzya-nifi-AdvancedJoltTransformer-nar): 添加 AdvancedJoltTransformer NAR 包构建配置 2025-07-30 13:49:31 +08:00
hzya-nifi-Zjnx-czb-nar feat(nifi): 添加浙江农商行财资宝通用接口处理器- 新增 ZJRCGenericApiProcessor 处理器,用于调用浙江农商行财资宝接口 2025-09-08 16:07:58 +08:00
hzya-nifi-Zjnx-czb-processors 增加查询条件计算脚本日志,发布业务插件到apache-nifi在237环境测试 2025-09-10 10:26:44 +08:00
hzya-nifi-Zsyh-cbs-nar 增加查询条件计算脚本日志,发布业务插件到apache-nifi在237环境测试 2025-09-10 10:26:44 +08:00
hzya-nifi-Zsyh-cbs-processors refactor(ZsyhCbsProcessor): 优化初始请求JSON读取方式 2025-09-11 17:14:48 +08:00
.gitignore chore: 添加 .gitignore 文件以忽略操作系统和项目构建生成的临时文件 2025-07-09 15:54:13 +08:00
README.md feat(nifi): 添加自定义分页 SQL 处理器 2025-07-09 15:47:21 +08:00
pom.xml Merge remote-tracking branch 'origin/zanhuo' 2025-09-12 10:16:35 +08:00

README.md

nifi-hzyadev-bundle 项目

项目概述

这是一个基于 Apache NiFi 1.28.1 的自定义处理器开发项目,名为 nifi-hzyadev-bundle。本项目是一个用于 NiFi 自定义处理器的开发工程,旨在提供灵活的框架来构建和扩展 NiFi 数据流处理功能。项目使用 Maven 构建,基于 Java 开发,并遵循 NiFi 的 NAR 打包规范。

项目结构

hzya-nifi-DevGeneratePaginatedSqlProcessor/
├── .idea/                   # IDE 配置文件
├── hzya-nifi-DevGeneratePaginatedSqlProcessor-nar/
│   ├── target/              # NAR 包构建输出
│   └── m pom.xml            # NAR 模块 Maven 配置文件
├── hzya-nifi-DevGeneratePaginatedSqlProcessor-processor/
│   ├── src/
│   │   ├── main/
│   │   │   ├── java/
│   │   │   │   └── com/hzya/frame/DevGeneratePaginatedSqlProcessor.java  # 自定义处理器主类
│   │   │   ├── resources/   # 资源文件
│   │   │   └── services/    # 服务相关代码
│   │   │       └── org.apache.nifi.processor.Processor  # 处理器接口或服务定义
│   │   └── test/            # 测试代码目录
│   ├── pom.xml              # 处理器模块 Maven 配置文件
│   └── README.md            # 项目说明文档
├── target/                  # 构建输出目录
├── External Libraries       # 外部依赖库
└── Scratches and Consoles   # 临时脚本和控制台

命名规则

本项目遵循统一的命名约定。如果需要开发新的自定义处理器,需创建两个 Maven 子工程:

  • hzya-nifi-处理器名称-nar:用于生成 NiFi NAR 包,包含处理器的构建输出。
  • hzya-nifi-处理器名称-processors:包含处理器核心代码、资源和测试代码。

例如,开发一个名为 MyCustomProcessor 的处理器时,需创建:

  • hzya-nifi-MyCustomProcessor-nar
  • hzya-nifi-MyCustomProcessor-processors

两个工程通过 Maven 模块化管理,nar 工程依赖 processors 工程以打包最终的 NAR 文件。

此外,命名规则还包括:

  • processors 包的包名称统一为 com.hzya.frame
  • 处理器的类名统一为 Dev处理器名称Processor,例如 DevGeneratePaginatedSqlProcessorDevMyCustomProcessor

依赖

本项目使用 Maven 管理依赖,主要依赖包括:

  • Apache NiFi: 1.28.1(自定义处理器开发框架)。
  • Java: 8 或更高版本。
  • JUnit: 用于单元测试(可选)。

具体依赖请查看 pom.xml 文件。

开发环境设置

前置条件

  • JDK: 8 或更高版本。
  • Maven: 3.6.0 或更高版本。
  • Apache NiFi: 1.28.1(需正确安装并配置)。
  • IDE: 推荐使用 IntelliJ IDEA。

设置步骤

  1. 克隆项目

    git clone <repository-url>
    cd hzya-nifi-DevGeneratePaginatedSqlProcessor
    
  2. 安装依赖

    mvn clean install
    
  3. 配置 NiFi

    • 将 NiFi 安装目录设置为环境变量 NIFI_HOME
    • 确保 NiFi 服务已启动。
  4. 导入 IDE

    • 使用 IntelliJ IDEA 打开项目。
    • 配置 Maven 项目并同步依赖。

测试

src/test/ 目录下编写单元测试,验证处理器逻辑。使用 JUnit 框架运行测试。

贡献

欢迎提交问题或拉取请求以改进项目。