记一次连接器改造经历:为什么我把 BigQuery Sink 从待处理流重构为缓冲流?
作者 | Doyeon Kim 在为 Apache SeaTunnel 开发 BigQuery Sink 连接器的过程中,我最初认为最大的挑战会很直接:确保数据能够正确写入 BigQuery。 但随着实现不断深入,我逐渐意识到,真正困难的问题并不只是调用 BigQuery API,而是如何将 Big ...
数据生产到智能应用:Apache DolphinScheduler 数仓落地实践
随着企业数字化建设不断深入,数据平台正在从传统的数据存储和分析系统,逐渐演变为支撑业务决策、智能应用和数据资产管理的重要基础设施。如何构建稳定、高效、可扩展的数据生产体系,成为企业数仓建设中的关键挑战。 在 Apache DolphinScheduler 9 月 Meetup 分享中,来自社区的技术 ...
离线会议系统唤醒模块的工程优化——从1.2秒延迟到0.5秒以内
一、为什么离线唤醒比想象中难 做过端侧语音的同行应该都有体会:云端唤醒可以靠算力硬扛,但一旦切换到纯本地部署,算力、功耗、响应速度三重约束会同时收紧。 离线唤醒是人机交互的第一道门槛。用户说出一句唤醒词,系统需要完成声学特征提取、模型推理、置信度判定三个步骤,然后在极短时间内给出响应。如果延迟超过1 ...
把同一篇文章发到公众号、知乎和博客后,我再也不手动传五遍图了
我有个坚持了挺久的习惯:一篇稍微像样的技术文章,写好之后会同步发到好几个地方——微信公众号、知乎,还有我在博客园和其他平台的博客。听起来只是多复制几次的事,但真正耗掉我时间、也最容易出岔子的,从来不是文字,而是配图。 一、最初那个笨办法:一张图传五遍 最早我是这么干的:文章在本地写好,截图也都在桌面 ...
基于 LlamaIndex 实现 Hybrid‑RAG 召回指南
前文《基于 LlamaIndex+PostgreSQL 实现 RAG 持久化》已完成向量数据库持久化部署,并封装了 RAGService 基础检索服务,解决了 RAG 系统的向量存储与索引持久化核心能力。但单纯依赖基础向量检索,普遍存在语义漂移、关键词精准匹配能力弱、场景适配性差等工业落地问题,难以... ...
数据融合平台怎么选:批流一体、实时同步与数据质量的 7 个维度
一篇关于数据融合平台选型的独立分析。不写通稿,只说真话。 阅读时间:约 11 分钟 | 标签:#数据融合平台 #数据集成 #数据治理 #国产数据库 做数据的人最头疼的,往往不是没有数据,而是数据太多、散在各处、口径还对不上。 一个业务指标,销售一套数、财务一套数、生产系统又是第三套数,谁也说不好哪个 ...
第13章:JDK Unified Logging 与 GC/运行时日志治理
1. 项目背景 业务场景:某 SaaS 平台的订单服务在每周一早上 9 点(业务高峰期)总会"莫名其妙"地全量 Full GC,每次持续 5-8 秒。运维打开 GC 日志,发现日志是 JDK 8 的 -XX:+PrintGCDetails 格式——输出包含了数百 MB 的垃圾回收细节,但在关键时刻( ...
用 Go + Wails 给 DeepSeek Harness 做了个 Windows 桌面壳,首次运行自动配好环境
先说痛点 DeepSeek Harness(dsh)的图形界面是要开浏览器用的: $ dsh web dsh web: http://127.0.0.1:3388/?token=a1b2c3d4e5f6... 每次都得敲命令、复制那串带 token 的地址、粘到浏览器。而且这个地址是一次性的——ds ...
搜索数据怎么建模?从「一坨 JSON」到可查询的数据模型
我最早存搜索结果的方式特别粗暴——整个 JSON 响应塞进一个 TEXT 字段,用的时候再解析。前两周很爽,第三周开始痛:查「某个关键词排第几」要写 JSON 函数,查「某站点的排名趋势」要全表扫。后来花了一天把数据模型重做,查询从「写不出来」变成「一条 SQL」。这篇记录搜索数据建模的思路。 为什 ...
重要文件交给AI处理,数据到底去了哪里?
TeleAgent搭配天翼AI云电脑使用,相关文件可在云端环境中存储和处理。环境隔离为任务划定运行空间,传输加密保护数据流转,安全审计记录关键操作,快照能力支持环境恢复。 ...
使用VFbox采集AB PLC设备数据-转-西门子PLC S7项目案例
VFBOX协议转换网关是实现不同协议的设备之间的数据转换。支持的设备和协议有西门子,欧姆龙,三菱,AB,modbus,EthernetIP,Profinet,CCLink,EtherCAT,IEC61850,IEC104,bacnet,DLT645,HJ212,opc ua,opc da,DNP3,... ...
《DNESP32P4开发指南_V1.0》第五十一章 LVGL 综合例程
第五十一章 LVGL 综合例程 本章,简单的介绍一下DNESP32P4开发板的 LVGL 综合例程。需要说明一下的是:本例程是一个不完整的例程。因为该例程只是实现一个基于 LVGL 的 GUI 界面,里面的 APP基本没有实现功能,所以这只是给大家参考的 GUI demo。 本章将分为如下 2 个小 ...
02-06-原理篇-热更新与版本管理
热更新是 Unity 游戏开发中的重要技术,它允许开发者在不重新发布安装包的情况下,更新游戏资源。本章将深入解析热更新和版本管理的原理和方法,结合 YooAsset 的实际实现进行详细说明。 ...
WpfRuntime 提前体验尚未发布的 WPF 新功能
本文介绍我维护的实验性 WPF 运行时发行项目 WpfRuntime,它把一套 WPF 的参考程序集、实现程序集以及必要的运行时文件打包成 NuGet 包,让 .NET 8 及以上的 WPF 应用可以提前体验尚未发布的 WPF 新功能。有伙伴有空来帮我试验一下没 ...
事件风暴遇上 MetaSkill:把企业「世界模型」变成可执行的 DAG
事件风暴负责回答:企业这台机器的状态,如何因事件而转移。
MetaSkill 负责回答:这个转移函数,如何变成可执行、可降级、可暂停、可审计的运行时。
前者是世界模型的语义层,后者是它的引擎层,JSON-LD 本体是两层之间的契约层。
具身智能的机器人需要世界模型才能在物理世界里行动。企业也一... ...
读数据可视化38读后总结与感想兼导读
1. 基本信息 数据可视化(第2版) 作者:陈为等 出版社:电子工业出版社 出版时间:2019-03-01 ISBN:9787121357275 1.1. 读薄率 书籍总字数63.2万字,笔记总字数118837字。 读薄率118837÷632000≈18.8% 1.2. 读厚方向 工业软件简史 普林 ...
Kong学习笔记:安装
本文更新于2026-09-20,操作系统为Debian 12.13 (bookworm),使用Kong Enterprise 3.13.0.1(含OpenResty 1.27.1.2)。 目录数据库部署模式无数据库部署模式混合部署模式 官网文档: Install Kong Gateway:https ...
大模型学习(一):推理引擎
快速入门 环境准备 显卡:NVIDIA Geforce 3060(12GB) OS:Windows11专业版 显卡驱动: nvidia-smi查看显卡驱动 使用conda创建python环境 推理引擎的好处 操作系统角色 推理引擎角色 内存分配 GPU内存管理 进程调度 请求批处理与调度 虚拟内存 ...
三个没报错的 bug:多收 3 倍、上线即挂、以及一封永远不会到的邮件
之前那篇结尾我写了句话:浏览器里搞音视频,坑经常是静默失败,连个 error 都不给你留。 后来做云端那个压缩站(vidsmaller.com),又连着吃了三个。 一个比一个不像浏览器的问题,共同点却是同一个:出事的时候,系统报告的是成功。 趁数字还在手上记一下。 一、上游的账单我算错了 3 倍,而 ...
第12章:JDK 诊断工具箱——jps / jstat / jmap / jcmd / jhsdb
1. 项目背景 业务场景:某物流调度系统的"运单匹配"服务每隔几分钟就会出现 CPU 打到 100%、服务完全无响应的情况,但 10-20 秒后又自动恢复。开发组加了 Prometheus 监控,却因为采集间隔大(15 秒)而完美的"跳过"了每次故障窗口。运维通过 top 看到 CPU 爆表后只能重 ...


