System-level telemetry is fundamental to modern remote monitoring, predictive maintenance, and AI-driven infrastructure optimisation. Existing telemetry encodings such as JSON, JSON Lines, CBOR, and Protocol Buffers were designed for high-bandwidth, always-online environments. They impose significant overhead when deployed in bandwidth-constrained networks common across Sub-Saharan Africa, rural enterprise deployments, and unstable LAN environments. This paper introduces MTS-1 (Magenta Telemetry Standard v1), a novel delta-encoded binary telemetry format designed for offline-first system monitoring, LAN-assisted proxy delivery, and energy-efficient IoT-to-server transmission. We compare MTS-1 against JSON, JSON Lines, CBOR, MessagePack, and Protocol Buffers across payload size, encoding cost, network efficiency, and cost-latency performance. Synthetic benchmarking demonstrates preliminary compression improvements of up to 74.7% versus JSON and 5.4% versus MessagePack, with linear scaling characteristics across dataset sizes.


翻译:系统级遥测是现代远程监控、预测性维护和AI驱动基础设施优化的基础。现有的遥测编码格式,如JSON、JSON Lines、CBOR和Protocol Buffers,是为高带宽、始终在线的环境设计的。当部署在撒哈拉以南非洲地区、农村企业部署和不稳定局域网环境中常见的带宽受限网络时,它们会带来显著的开销。本文介绍了MTS-1(Magenta Telemetry Standard v1),这是一种新颖的差分编码二进制遥测格式,专为离线优先系统监控、局域网辅助代理传输和节能的物联网到服务器传输而设计。我们比较了MTS-1与JSON、JSON Lines、CBOR、MessagePack和Protocol Buffers在有效载荷大小、编码成本、网络效率以及成本-延迟性能方面的表现。合成基准测试显示,与JSON相比,其初步压缩改进高达74.7%;与MessagePack相比,改进达5.4%,并且在不同数据集大小下表现出线性扩展特性。

0
下载
关闭预览

相关内容

JSON( Java Script Object Notation)是一种轻量级的资料交换语言,以文字为基础,且易于让人阅读。尽管 JSON 是在 JavaScript 的一個子集,但 JSON 是独立于语言的文本格式,並且采用了类似于 C 语言家族的一些习惯。
NAACL 2019 | 一种考虑缓和KL消失的简单VAE训练方法
PaperWeekly
20+阅读 · 2019年4月24日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
VIP会员
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
Top
微信扫码咨询专知VIP会员