|
每一名数据人，在与数据为伴、不断奔跑的日子里，都会拥有一些难以忘怀的经历。那些加班到深夜的时刻，那些在反复尝试中逐渐积累的经验，以及那些因为数据而改变工作方式、提升效率的瞬间，都会在不知不觉中，塑造我们的职业路径，也丰富着我们的人生。
我只是大数据中心中一名普通的使用者，但正是在一次次真实业务需求的推动下，我逐渐找到了适合自己的方向，也体会到了合适工具为工作和个人成长带来的改变。
一、初入数据领域：依赖旧平台与自主开发的双重挣扎
进入大数据中心之前，我接触的第一款数据处理平台是曼陀罗公司的产品。当时，科室的数据查询需求相对简单，这款平台勉强满足基本的数据提取功能，但使用维护非常繁琐。到第四年时，由于医院维保到期，平台直接被公司锁定，之前存储的数据、配置的查询规则全部无法访问。没有技术支持、没有解锁方案，整个数据查询工作瞬间陷入停滞，那些我耗时搭建的简易界面，一夜之间全部失效，全部回到手动后台查询模式。
这次经历让我深刻意识到，过度依赖缺乏保障的第三方平台，就像在数据工作中埋下一颗 “定时炸弹”，随时可能因平台停运、锁定而导致业务瘫痪。为满足工作要求，只得自己开发简易的界面。
 
这个简易界面仅支持固定字段的筛选和基础数据展示，无法灵活调整查询维度，也没有分页、导出等实用功能，每次使用都像是在 “凑合用”。 每次满足科室需求，我都要自己用基础工具编写简易查询界面，界面设计粗糙却承载着核心功能。即便如此，我们还是依靠这款平台和自制的简易界面，勉强支撑了三年多的工作。
二、走进数据中心：在高重复工作中寻找改变的可能
进入大数据中心之初，我对数据工作充满期待。然而很快我就发现，现实中的数据分析远不只是“写 SQL、出报表”那么简单。
我的日常工作，是为各个科室统计和汇总业务数据。由于数据体量大、系统复杂，我们使用的东华 Cache 数据库在面对全院级数据查询时，性能压力十分明显。一些看似常规的统计需求，查询时间往往需要九十分钟甚至更久。这不仅影响了响应效率，也让数据人员在实际工作中承担了大量等待与重复操作的成本。随着需求不断累积，加班逐渐成为常态，数据工作很容易陷入“被动应付”的状态。
我开始思考是否可以通过工具和技术手段，让数据工作真正高效起来，而不是永远停留在重复劳动中。
三、真实困境：传统系统在复杂业务下的挑战
随着业务的发展，科室对数据的需求不再局限于简单统计，而是希望获得更及时、更灵活的分析结果。这对数据平台提出了更高要求。
然而在实际工作中，我逐渐意识到，单一数据库在复杂业务场景下很难兼顾性能与扩展性。每一次集中查询，都会对系统造成较大压力，也限制了数据服务能力的提升。数据中心如果只是“帮忙查数”，不仅效率低，也无法真正发挥数据的价值。这种现实困境，促使我开始主动寻找新的解决思路。
四、寻找突破口：我需要一个真正兼容多源数据的报表平台
在探索过程中，我接触过一些报表工具和平台，但实际使用后发现，很多产品在数据库兼容性和复杂场景支持上存在明显限制，难以满足 Cache、Hive、Trino 等多种数据源并存的现实环境。
直到一次偶然的机会，我接触到了 FineReport-帆软报表平台。FineReport 对多种数据库和大数据引擎的支持，让我第一次看到了将不同数据体系整合在一起的可能性。更重要的是，它并没有因为功能强大而提高使用门槛，这让我这样非科班出身的数据人员，也能够通过学习逐步掌握。
五、与 FineReport 相遇：数据工作方式的第一次改变
从最初接触 FineReport 开始，我利用业余时间系统学习相关功能，从基础报表制作入手，逐步将实际工作中的需求迁移到平台上实现。
在这个过程中，我不再只是“完成需求”，而是开始思考：
1.数据如何组织更合理；
2.报表如何设计才能减少重复工作；
3.权限如何分配才能让不同角色高效使用；
FineReport 的可视化设计能力和灵活的数据处理方式，让这些思考逐渐落地，也让我对数据工作的理解不断加深。
上图是基于 FineReport 构建的业务明细查询报表，支持多条件筛选、分页浏览及明细数据展示。该报表支持按时间范围、科室、业务类型等多维条件进行筛选，数据来源于 Hadoop + Trino 计算结果。业务人员无需掌握数据库或查询语句，即可通过页面完成自助查询，大幅降低了对数据中心人工支持的依赖
六、从工具到方案：用报表重构真实业务流程
在实际工作中，受限于网络安全策略，单位内部电脑之间无法直接进行文件拷贝，文件流转高度依赖人工和摆渡工具，效率较低。基于 FineReport，我设计并实现了一套 局域网文件共享与管理报表，将原本零散、低效的文件传输行为，纳入统一的数据平台进行管理。
上图是基于 FineReport 实现的内部数据共享报表页面，用于局域网环境下的小文件共享与统一管理。该报表作为统一入口，支持在安全策略允许范围内进行文件集中展示，不同用户登录后仅可查看和管理本人上传的数据，避免了数据混乱和权限风险。
上图是文件上传与下载管理报表，支持文件上传、权限控制及下载记录查看。通过 FineReport 的文件上传下载能力，小文件可直接存储于数据库中，稍大的文件则通过服务器统一管理。在实际应用中，该方案显著减少了人工拷贝和外部工具依赖，使文件流转更加安全、可控，也提升了整体工作效率。
七、技术整合实践：Cache、Hadoop 与 Trino 的协同加速
随着业务规模扩大，单一数据库已难以满足全院级数据分析需求。我逐步将 Cache 中的数据同步至 Hadoop 平台，并通过 Trino 引擎进行统一查询加速，再将结果接入 FineReport 展示。
上图是基于 Hadoop 平台的数据处理与同步脚本，用于承载和加工来自业务系统的大规模数据。通过脚本化方式对数据进行处理和入仓，不仅提升了数据处理的稳定性，也为后续的高并发查询打下了基础，使数据平台具备了更强的扩展能力。
上图是通过 DBeaver 连接 Trino 引擎进行查询，展示大数据量下的快速响应效果。在 Trino 引擎加持下，原本需要较长等待时间的查询任务，能够在较短时间内返回结果，为科室自助分析和实时决策提供了有力支持。
八、个人成长：数据能力反向塑造职业路径
在不断实践的过程中，我明显感受到自身的变化。从最初关注如何完成任务，到后来思考如何设计数据结构和业务流程；从单纯写查询语句，到理解数据平台整体架构。数据能力的提升，也让我在工作中逐渐建立起自信。
我通过持续学习和实践，我逐渐找到了适合自己的成长方式，也更加确信能力，是可以在真实项目中一步步积累出来的。
九、价值延伸：让数据真正服务于业务与公众
作为公共机构的一员，我越来越深刻地体会到，数据工作的最终目标，不只是生成报表，而是服务业务、提升效率、间接造福公众。
当科室能够更快获取数据支持，当流程因为数据而更加透明，当医护人员减少重复沟通成本，我知道，数据正在以一种看不见却真实存在的方式，发挥着它的价值。
十、坚持与选择：在数据之路上持续奔跑
面对困难，有人选择抱怨环境，也有人选择改变自己。回顾这段经历，我更加坚定了一个信念：与其纠结无法改变的条件，不如专注提升自身能力。正如电影《太极张三丰》中的一句台词：我命由我不由天。
希望我的故事，能为同样在数据之路上探索的你，带来一点启发与共鸣。我们或许起点不同，但只要持续奔跑，终会找到属于自己的方向。 | 
