物联网、工业物联网和边缘存储
一段时间以来,物联网应用呈爆炸式增长,从网络的前沿到工厂车间,但现在它们正在达到临界质量。他们已经生成了大量数据,而且数量还在增加。其中一些数据在本地处理,但其中大部分需要发送到某个地方以供进一步分析。
在许多情况下,出于合规或安全目的,还需要对数据进行存档。
部署本地 S3 对象存储有助于可靠地存储、自动上传和管理这些数据——无论是在边缘、传输中还是最终分析中的静态数据。
下面我们将讨论一些可以从部署本地 S3 对象存储中获益的 IoT 应用程序。
油气勘探
我们熟悉一家拥有调查船的公司,这些调查船将地震数据记录到插入 PC/服务器的磁盘中,他们手动提取这些数据,并在返回港口时插入港口服务器以上传数据。
这有几个问题。只要有一个错误,如拔错盘、掉数据盘、插错等等,任何一个都会丢失测量数据。此外,磁盘驱动器可能会死掉,而且会定期死掉(而且在人为处理时更容易死掉)。使用 S3 对象存储来记录和管理机载数据可以避免许多此类问题。例如,
S3 存储桶(地震记录)可以在保存后自动复制到其他存储桶以实现冗余。
MinIO 复杂的擦除编码方法可确保数据保护,即使在驱动器出现故障时也是如此。
S3 存储桶可以在异地或在 API 控制下自动复制,一旦返回端口就可以轻松触发。
此外,必要时,可以在船上使用适当的硬件和软件处理地震对象数据,这可能会导致更有针对性的后续调查或实时动态调整调查。在船上和异地使用相同的标准对象格式的数据可以使两个地方的处理更快、更容易。鉴于 MinIO 是 AI/ML 工作负载的首选对象存储,这似乎是一个简单的选择。
虽然略有不同,但世界上几家最大的游轮运营商正在这样做——搭载 MinIO 并将 AWS S3 作为最终目的地。
视频监控
自从边缘存储用例出现以来,视频监控就一直是边缘存储用例的典型代表,这似乎是陈词滥调——但事实是,每天都有越来越多的视频监控。以机场为例——你不能走 10 米而不经过相机。但它不仅仅是机场,它无处不在。相机变得更便宜,所以有更多的相机。分辨率越来越高,所以物体越来越大。传统方法使用 DAS、蓝光光盘或其他媒体来记录视频数据,但这种模式正在发生变化。对于世界上的 Blinks 和 Nests,它们在家庭网络上拥有出色的带宽,因此可以直接连接到云端。此外,随着存储成本的直线下降和真正强大的 NVMe 驱动器的出现,
还有 AI/ML 角度。视频数据可能很有用,但您需要大量的视频数据。无论是客户流量模式,还是情报服务生活模式分析,您拥有的越多,最终结果就越好。同样,在对象存储方面,MinIO 是这里的标准。
如前所述,S3 对象擦除编码容错及其自动化对象复制/复制优势可以轻松应用于视频监控数据。此外,一些 S3 对象复制的另一个特点是可以限制带宽消耗,为其他(客户)活动保留更多带宽。
此外,借助 MinIO 的数据保护机制,视频不会轻易被无意或有意覆盖。
智能车辆(汽车、拖拉机、卡车、无人机、公共汽车和轮船)
随着越来越多的车辆增加自动驾驶功能,传感器包正在升级为更高分辨率的传感器和更多传感器。因此,这些设备每天开始创建的数据量惊人。
考虑到数据量——制造商面临着保留什么和丢弃什么的决定。这在某种程度上是由过时的方法延续下来的错误选择。虽然将所有内容永远保存在受限的存储容量上是不现实的,但选择越来越多。首先,制造商可以就地处理数据,只发送异常或关键元数据。其次,制造商可以跟踪现代 NVMe 驱动器的规模——每个驱动器能够达到 20+ TB。第三,制造商可以采用混合方法,在传输感兴趣的元数据的同时保留其他数据,直到找到可接受的上传(可接受意味着实现带宽成本/存储权衡)。
除了所有这些基本用例之外,还可以开发需要实时数据的新应用程序,例如 V2V 通信(车对车)https://www.nhtsa.gov/technology-innovation/vehicle-vehicle-communication 或Car to Car 联盟https://www.car-2-car.org/。所有这些都需要高速和轻量级的存储——MinIO 提供的那种。
5G-6G 基站
5G 基站正在成为成熟的边缘数据中心。5G 不仅提供更高的数据带宽、更低的延迟,还提供一些新兴 AR 和 VR 应用所需的关键任务可靠性和可用性通信服务。
因此,有更多的数据通过手机信号塔传输到回程网络,然后再返回。而且它不仅限于用户流量。所有 5G 服务都需要记录有关服务使用的信息和遥测数据。还有更多数据。此外,为了维持某些 5G 应用程序的超低延迟要求,可能需要在边缘缓存数据,从而增加了对基站自动化和可靠数据存储的需求,以管理这种数据涌入。
这推动了对边缘存储的前所未有的需求。该存储必须是软件定义的,它还必须是轻量级但稳健的。它必须是高性能的,无论是从吞吐量的角度还是从延迟的角度来看。最后,它必须能够处理非结构化数据。这一切都指向像 MinIO 这样的对象存储。
当然,距离 6G 仅有 3-5 年的时间。当 6G 出现时,关于 5G 数据的一切都会上升一个数量级。
概括
可能有一些 IoT 应用程序在今天和整个活动部署期间生成少量数据,但大多数不会。无论我们在哪里,都在部署越来越复杂的物联网应用程序。而复杂性的提高依赖于更多而不是更少的数据生成。
现场管理所有数据,不丢失数据并将其可靠地复制/复制到其他地方,可以通过手工完成,耗费时间和金钱。或者可以将 S3 对象存储直接嵌入到您的 IoT 应用程序中,让它可靠地存储、自动复制和复制所有这些数据。
这是你的选择。