其乐融融 发布于 2023/10/25 01:10:24

GPFS是一种高性能的并行文件系统，其底座很多也是使用FC组网的SAN存储。GPFS大多适用于高性能计算场景，或者是和企业其他IT技术生态捆绑使用。另一方面，GPFS在构建同城或异地容灾时，也有一定的局限性，很多也是基于底层SAN存储来做的数据级容灾。

阅读()评论(0)赞 ()标签：GPFS / SAN / 存储

其乐融融 发布于 2023/10/25 01:10:20

从Ceph的架构原理上来看，我们不难看出其定义当中的“扩展性、稳定性”。但是关于“优秀性能”这个描述的特性来讲，其实是需要斟酌其语境的。我们不能从其架构的分布式模式上简单判断多个节点服务的性能一定是最优秀的。

阅读()评论(0)赞 ()标签：分布式 / 存储 / Ceph

其乐融融 发布于 2023/10/25 01:10:17

数据量的爆发式增长催生了数据应用领域的各种新需求，数据应用领域的各种新需求驱动了数据管理层面以及数据载体层面的分布式变革。

阅读()评论(0)赞 ()标签：存储 / 分布式 / 体系

其乐融融 发布于 2023/10/06 02:15:07

在面试中，被问到Redis缓存穿透问题，不要感到害怕或无措。通过深入了解问题的根本原因以及各种解决方案，你可以展现出自己的技术深度和解决问题的能力。同时，面试官也更愿意看到你能够思考问题，提出创新的解决方案。

阅读()评论(0)赞 ()标签：京东 / Redis / 缓存

其乐融融 发布于 2023/10/05 02:15:07

尽量使用大文件，而非小文件。似乎这个并不好实现，因为文件的大小是业务决定的，我们似乎很难控制文件的大小。但是，如果是自己开发的应用程序， 在保存数据的时候尽量以大文件的形式，而非小文件的形式，这对性能是有益的。​

阅读()评论(0)赞 ()标签：NFS / 小文件 / 业务

其乐融融 发布于 2023/09/19 02:15:06

bigcache 的开发者是 allegro，是波兰的一个电商网站，参考资料中给出了他们的技术博客的原文，文中详细描述了他们问题的背景以及思考，值得研究。

阅读()评论(0)赞 ()标签：Golang / 高性能 / 缓存库

其乐融融 发布于 2023/09/09 02:15:06

纠删码则是将用户的原始数据进行切分，形成 K 个大小相等的分片，然后对这些分片进行编码，形成 M 个校验分片。校验分片的大小和数据分片相同。K+M 个分片会被分布在不同的机器上。

阅读()评论(0)赞 ()标签：存储 / EC / 系统

其乐融融 发布于 2023/08/31 02:15:05

配置存储策略不是必须的，如果是标准vSAN，可以配置多个存储策略，比如网络RAID1，RAID5等，创建虚拟机的时候，可以根据虚拟机的重要程度选择不同的策略。

阅读()评论(0)赞 ()标签：vSAN / 存储 / 策略

其乐融融 发布于 2023/08/07 02:15:16

在我们的一些内部系统中，用户信息是每个页面都要用到的，尤其是 userId 字段，会与每个获取数据接口挂钩，但这个数据是不会变的，一直请求是没有意义的，为减少接口的访问次数，可以将主要数据缓存在 localStorage 内，方便其他接口获取。

阅读()评论(0)赞 ()标签：浏览器 / 本地 / 存储

其乐融融 发布于 2023/08/07 02:15:13

用户写入数据，实际就是先写入到 wal 中，写到 wal 之后，你会得到一个位置信息 ChunkPosition，然后把 Key+ChunkPosition 存储到内存数据结构中即可。

阅读()评论(0)赞 ()标签：KV / 存储 / ChunkPosit

其乐融融 发布于 2023/08/07 02:15:06

如果在实现用户的某些需求时，需要编写一组复杂的SQL语句才能实现的时候，那么我们就可以将这组复杂的SQL语句集提前编写在数据库中，由JDBC调用来执行这组SQL语句。把编写在数据库中的SQL语句集称为存储过程。

阅读()评论(0)赞 ()标签：MySQL / 存储 / SQL

其乐融融 发布于 2023/07/11 02:15:12

最近VictoriaMetrics发布了预览版的VictoriaLogs，类似Loki专门用于存储日志。鉴于VictoriaMetrics的良好名声，还是让大家对这条搅局的「鲶鱼」充满了一定的期待。VictoriaMetrics为什么要入局搞VictoriaLogs呢？

阅读()评论(0)赞 ()标签：Loggie / 监控项目

其乐融融 发布于 2023/07/08 02:15:08

缓存失效策略应谨慎选择，以平衡性能和数据准确性之间的权衡。通过理解不同的缓存失效策略，软件工程师可以选择适当的策略来优化缓存性能，降低延迟，同时确保存储在缓存中的数据准确且最新。

阅读()评论(0)赞 ()标签：缓存 / 平衡 / 性能

其乐融融 发布于 2023/06/26 02:15:12

本文阐述的内容较多，整合了很多有用的信息，从 Java 基本的 I/O 类库结构开始说起，主要介绍了 IO 的传输格式和传输方式，包括字节流和字符流接口相关的分类介绍，以及磁盘 I/O 和网络 I/O 的基本工作方式。

阅读()评论(0)赞 ()标签：I/O / Java / 字节流

其乐融融 发布于 2023/06/24 02:15:45

医疗行业正处于数字化转型的爆发期，数字基础设施是关键。面对数字化转型带来的医疗数据爆发式增长、海量设备需要互联互通、数据存储与网络安全高要求等挑战

阅读()评论(0)赞 ()标签：数据存储

其乐融融 发布于 2023/06/24 02:15:40

本指南的目的是创建一个工作流，我们可以在该工作流中通过Maven和CI服务器来构建，存储，管理和监视已编译的制品。

阅读()评论(0)赞 ()标签：Maven / Jenkins

其乐融融 发布于 2023/06/24 02:15:34

制造行业数字化转型的大潮已来，随着数字经济与实体经济的深度融合，以数据存储为代表的创新数据基础设施必将成为制造业数字化转化型的新引擎

阅读()评论(0)赞 ()标签：数据存储

其乐融融 发布于 2023/06/24 02:15:29

Ceph 的性能要跟上硬件发展的速度一直很有挑战的，因为 Ceph 的架构是十年前的——它对单核 CPU 性能的依赖使它无法充分利用不断增长的 IO。

阅读()评论(0)赞 ()标签：Crimson / 硬件 / CPU

其乐融融 发布于 2023/06/24 02:15:25

宏杉科技产品部总工张夏男从地理信息行业对存储的需求进行分析，分享了宏杉科技面向地理信息系统的一站式数据存储解决方案。

阅读()评论(0)赞 ()标签：宏杉

其乐融融 发布于 2023/06/24 02:15:23

记录所有内容并确保所有相关信息可用（包括实际更改时间、使用的内核/软件包/固件/…版本）。完整的文档是我们在本案例中最重要的资产，因为我们有紧急处理期间以及RCA（故障回溯）期间所需的所有数据和信息。

阅读()评论(0)赞 ()标签：Ceph / 故障 / 服务器

其乐融融 发布于 2023/06/24 02:15:15

异步 IO 的两个阶段，用户进程都是非阻塞的，用户进程将整个 IO 操作都交由内核完成，内核完成后会发送通知。在此期间，用户进程不需要去检查 IO 操作的状态，也不需要主动的去拷贝数据。

阅读()评论(0)赞 ()标签：IO / 模型 / 进程

其乐融融 发布于 2023/06/24 02:15:12

内存缓存/运行时缓存分为两部分：活动缓存（ActiveResource）和Lru内存缓存（LruResourceCache）。

阅读()评论(0)赞 ()标签：Glide / 缓存 / 机制

其乐融融 发布于 2023/06/24 02:15:07

为了高可靠，ES如果使用本地盘的话一般会使用两副本，也就是说存储1PB数据需要2PB的物理空间。

阅读()评论(0)赞 ()标签：Curve / 数据存储

其乐融融 发布于 2023/06/23 02:16:06

在实际开发过程中，实际上LT更易用一些，毕竟系统帮助我们做了大部分校验通知工作，之前提到的SELECT和POLL，默认采用的也都是这个。但是需要注意的是，当有成千上万个客户端连接上来开始进行数据发送，由于LT的特性，内核会频繁的处理通知操作，导致其相对于ET来说，比较的耗费系统资源，所以，随着客户端的增多，其性能也就越差。

阅读()评论(0)赞 ()标签：IO / 多路 / 复用模型

其乐融融 发布于 2023/06/23 02:16:03

Dell PowerScale凭借出色的技术创新和简单易用、易于扩展等众多优势，荣获2022年度中国IT行业存储优秀产品奖。

阅读()评论(0)赞 ()标签：Dell / PowerScale