初探云原生下的AI应用文件系统-JuiceFS
导读:本文由梯度科技资深开发工程师屈骏对撰写,主要在云原生环境下介绍大数据,下文件存储提出的挑战和需求,在这样的背景下产生的JuiceFS的目标和架构设计,以及在大数据、人工智能等方案业务领域中的价值与收益。
前言
Kubernetes已经成为事实的应用编排标准,越来越多的应用在不断的向云原生靠拢,实现弹性伸缩、故障自愈等特性,其中还包括了大数据、人工智能等应用,等应用的使用大规模的非结构,在传统场景下已经有自己的解决方案,比如 HDFS、对象存储,然而当它们迁移到云端时,对架构也提出了新的挑战。
大数据上云,由于云端的动态迁移特性,需要支持存算分离,这也是数据湖架构发展的趋势,而标准的 HDFS 计算全局网络应用以及其NameNode
初探云原生下的AI应用文件系统-JuiceFS相关推荐
- 东数西算热潮下,云原生如何发挥 AI 算力澎湃动能?
今年二月,东数西算工程全面启动,在各界掀起了一股热潮,资本.媒体.行业,乃至民众都纷纷加入了话题讨论. 如今,算力不仅仅是数字经济时代的新生产力,更是成为与 "水.电.气" 并驾齐 ...
- 初探云原生应用管理(二): 为什么你必须尽快转向 Helm v3
系列介绍:这个系列是介绍如何用云原生技术来构建.测试.部署.和管理应用的内容专辑.做这个系列的初衷是为了推广云原生应用管理的最佳实践,以及传播开源标准和知识.在这个系列文章的开篇初探云原生应用管理(一 ...
- 初探云原生应用管理(一): Helm 与 App Hub
系列介绍:初探云原生应用管理系列是介绍如何用云原生技术来构建.测试.部署.和管理应用的内容专辑.做这个系列的初衷是为了推广云原生应用管理的最佳实践,以及传播开源标准和知识.通过这个系列,希望帮助大家学 ...
- 云原生下日志方案的架构设计
上一篇中我们介绍了为什么需要一个日志系统.为什么云原生下的日志系统如此重要以及云原生下日志系统的建设难点,相信DevOps.SRE.运维等同学看了是深有体会的.本篇文章单刀直入,会直接跟大家分享一下如 ...
- 云原生下的开发测试实践
本文整理自阿里巴巴技术专家金戟和砧木的视频分享<云原生下的开发测试>. 测试环境管理之困与阿里巴巴的解决之道 查看全文 http://www.taodudu.cc/news/show-42 ...
- 技术分享 | 《云原生下的IAST落地实践》
云原生技术成为近年来炙手可热的话题,是业务创新发展的重要驱动力.随着云原生产业规模不断扩大,云端应用在整个生命周期中的每一个阶段都面临着不同的安全挑战,企业需要在安全的架构下设计DevOps流程与工具 ...
- 万物云原生下的服务进化 | 京东云技术团队
导读: 在万物云原生下的环境下,Java的市场份额也因耗资源.启动慢等缺点,导致在云原生环境里被放大而降低,通过这篇文章,读者可以更好地了解如何在云原生环境下通过升级相关版本和使用GraalVM打出原 ...
- 《六周玩转云原生》- 云原生下的DevOps与持续交付
六周玩转云原生 为了让开发者们在这个特殊的时期里可以学习到更多干货,京东智联云开发者特别策划了 <六周玩转云原生>系列课程,让我们的开发者可以迅速入门,持续充电. 时光倒流到本世纪初,&q ...
- 云原生下的DevOps与持续交付
课程概要 2009年,一场演讲在O'Reilly Velocity大会上一炮而红,演讲中有一句话深得人心:"由于开发和运维需要在Flickr(一个图片存储和视频托管网站)上合作,这导致开发者 ...
最新文章
- C++中的参数传递方式:传值、传地址、传引用总结
- 看看物联网架构,快速了解物联网
- exchange2003的部署
- 阿里巴巴直播防控中的实人认证技术
- Windows中EFS加密及解密应用
- python 文本框位置_「每日一练」Python文本框的显示和插入
- GPS拓展无线同步模块GSYN1000系列在广域同步测量的应用方案
- matlab imagesc clims,imagesc
- java spring log4j_配置spring的log4j日志记录
- nova.api.openstack.auth解析(ocata版本)
- java中读取配置文件的内容
- 在线工具大全,程序员必备
- java毕业设计宠物店管理系统源码+系统+数据库+lw文档+调试运行
- 黑苹果内置硬盘识别成外置硬盘_空间大?安全更重要,麦沃 K35274D硬盘阵列盒使用体验--数据无价...
- dfuse API 添加新分类查询,为您提供更多细化的搜索
- VS调用大恒相机sdk实时显示图像并进行图像处理+OPENCV
- 【FF14】工匠配方爬取
- 百度地图——地图找房功能
- C语言实现动态数组大小
- msra数据集_微软机器阅读理解超越人类水平,CoQA数据集得分刷新记录
热门文章
- ajax 失败textstatus,rails 3 jquery ajax调用与statusText失败:“parsererror”
- 【Hack The Box】linux练习-- Previse
- mysql 怎么表示正无穷_“2到正无穷”用符号怎么表示?
- SuspendLayout()方法的理解 1
- MyCat:第二章:Mycat前世今生,java同步锁原理
- 纯软件公司的先驱 甲骨文公司(一)——硅谷老兵新传
- 【水文模型】评价指标
- Aurora HDR 2019 for Mac 1.0.1高级 HDR 软件。
- 前端性能分析工具-Lighthouse
- 【惠普打印机驱动安装】