JuiceFS 在理想汽车的使用和展望】的更多相关文章

理想汽车是中国新能源汽车制造商,设计.研发.制造和销售豪华智能电动汽车,于 2015 年 7 月创立,总部位于北京,已投产的自有生产基地位于江苏常州,通过产品创新及技术研发,为家庭用户提供安全及便捷的产品及服务. 在中国,理想汽车是成功实现增程式电动汽车商业化的先锋,首款及目前唯一一款商业化的增程式电动汽车车型理想 ONE 是一款六座中大型豪华电动 SUV(运动型多用途汽车), 配备了增程系统及先进的智能汽车解决方案,于 2019 年 11 月开始量产, 并于 2021 年 5 月 25 日推出…
理想汽车在 Hadoop 时代的技术架构 首先简单回顾下大数据技术的发展,基于我个人的理解,将大数据的发展分了4个时期: 第一个时期: 2006 年到 2008 年.2008 年左右,Hadoop 成为了 Apache 顶级项目,并正式发布了 1.0 版本,它的基础主要是基于谷歌的三驾马车,GFS.MapReduce.BigTable 去定义的. 第二个时期: 2009 年到 2013 年阶段.雅虎.阿里.Facebook 等企业对大数据的应用越来越多.2013 年底 Hadoop 正式发布 2…
开源一周年 JuiceFS 开始于 2017 年,是一款云原生分布式文件系统,旨在帮助企业解决多云.跨云.混合云环境下所面临的诸多挑战:数据安全和保护.大数据架构升级.海量小文件访问.Kubernetes 标准存储等. JuiceFS 完全兼容 POSIX.HDFS.S3 访问协议,并提供 Kubernetes CSI 驱动,在全球公有云上均有全托管服务.为了更好的打造让开发者爱不释手的软件,我们于 2021 年 1 月 11 日在 GitHub 上开源了 JuiceFS. 今天, JuiceF…
大家好,我是来自 Juicedata 的高昌健,今天想跟大家分享的主题是<JuiceFS 在数据湖存储架构上的探索>,以下是今天分享的提纲: 首先我会简单的介绍一下大数据存储架构变迁以及它们的优缺点,然后介绍什么是 JuiceFS,其次的话会再重点介绍一下关于 JuiceFS 和数据湖的一些结合和关联,最后会介绍一下 JuiceFS 和数据湖生态的集成. 大数据存储架构变迁 纵观整个大数据存储架构的变迁,可以看到有非常明显的三个阶段:第一个阶段就是从最早的 Hadoop.Hive 等项目诞生之…
6 月 25 日,在商业公司 SphereEx 正式成立一月之余的今天,我们很高兴的宣布 Apache ShardingSphere 迎来了 5.0.0-beta 版本的正式发布.经过半年多的优化和打磨,ShardingSphere 5.0.0-beta 版本在 DistSQL.生态对接.可插拔架构等亮点功能方面有了大幅度的突破,正式从分库分表中间件向分布式数据库生态转化.欢迎大家测试使用! 5.0.0-beta 具体版本发布信息如下: 新特性 全新 DistSQL 用于加载及展示 Shardi…
5月14日,数据前沿技术领域初创公司 SphereEx 获得来自红杉中国种子基金.初心资本的数百万美元天使轮融资. SphereEx是一家致力于构建新型分布式数据基础设施的公司,秉承开源.共享.生态.平台理念,致力于数据领域前沿技术创新.其研发的分布式中间件ShardingSphere,具备"平台化.可插拔.云原生"等核心技术特点,是大规模数据应用.数据增值应用的理想解决方案. SphereEx的核心创始团队来自Apache顶级项目 ShardingSphere.头部互联网公司.及知名…
2021 年 12 月 9 日,SeaTunnel (原名 Waterdrop) 成功加入 Apache 孵化器,进入孵化器后,SeaTunnel 社区花费了大量时间来梳理整个项目的外部依赖以确保整个项目的合规性,终于在贡献者们四个月的努力下,社区于 2022 年 3 月 18 日正式发布了首个 Apache 版本,该版本一次性通过 Apache 孵化器严苛的 2 轮投票审查,最大程度地保证了 SeaTunnel 软件 License 的合规性.同时这意味着 2.1.0 版本,是经过 SeaTu…
作者简介 王振华,趣头条大数据总监,趣头条大数据负责人. 王海胜,趣头条大数据工程师,10 年互联网工作经验,曾在 eBay.唯品会等公司从事大数据开发相关工作,有丰富的大数据落地经验. 高昌健,Juicedata 解决方案架构师,十年互联网行业从业经历,曾在知乎.即刻.小红书多个团队担任架构师职位,专注于分布式系统.大数据.AI 领域的技术研究. 背景 趣头条大数据平台目前有一个近千节点的 HDFS 集群,承载着存储最近几个月热数据的功能,每日新增数据达到了百 TB 规模.日常的 ETL 和…
真实世界里的钢铁侠--特斯拉汽车公司和SpaceX公司总裁马斯克(31岁).当我们得意于「站在山上踢几块石头下去」或是「站在风口上的猪」的成功理论的时候,我们真的成功了吗?我们到底创造了什么?改变了什么?「特别推荐小伙伴们看看这一期最新的对话节目」 他是Paypal创始人,纯电动汽车制造商Tesla的总裁,全球首位成功发射火箭的私人老板,他的真空管道车Hyperloop计划让世界疯狂,他在10年苦斗近乎破产边缘制造出了一款出色跑车.彻底把同行甩在身后,他也许是下一个改变世界的人--(伊隆·马斯克…
VR虚拟现实技术在教育领域的前景展望 VR虚拟现实技术能迅速火起来,是基于它突破了人们对三维空间在时间与地域上的感知限制,以及市场需求愿景的升级.此技术可广泛地应用到城市规划.室内设计.工业仿真.古迹复原.桥梁道路设计.房地产销售.旅游教学.水利电力.地质灾害.教育培训等众多领域,可提供切实可行的解决方案,从而降低成本与风险.作者蒋燕玲则看好VR虚拟现实技术在教育培训领域里的应用.众所周知,教育行业从最早单一枯燥的说教与图文教学,随后融入了视听媒体,再到后来计算机在教育中的普及应用后复合媒体的发…