赛博战略核武器–大规模的艺术,中央集权、分治、级联、一致、介稳与弹性
曼哈顿计划
Manhattan
前言
现代分布式架构一般是建立在经世致用的分治策略之上,这是一种古老的策略和方法论。引用古老的炼金术拉丁语 “Solve et coagula”(分解和混凝),希腊人把这种过程解释于知识的产生 “Noegenesis “,形容为知识产生的过程,古中国古话则称为 “不破不立”。这似乎是宇宙底层的基础法则,一种泛数据的重组过程,一种自顶向下拆解并递归向上重组。
大规模分治和级联控制通常具有巨大的能力,合理的级联扳机可以带来巨大的造物能力或巨大的破坏能力。这类方法论被现代多种计算机领域所应用,如我们耳熟能详的MapReduce、微服务、RingReduce、多路/多通道和阵列等架构,这些架构通常被用于解决大规模数据处理、深度模型训练、服务能力提供和高性能等大规模临界领域。
绪论
曼哈顿计划,是索伦项目的建设计划,旨在建设一套功能完备的大规模数据处理、分析、服务和应用平台。提供OLAP分析、搜索引擎、大规模通用任务调度、数据集市、数据地图、云部署、多模态数据主题数据集等多样能力。
该设计本质是探索非微观的、维度宏观、战略的、战术不敏感的大数据反映的上层建筑的宏观维度,同时本计划也是非商业的、学术的大规模实验项目。这是一种降维打击,系统设计不会过度关注非常局部的设计,强调系统性的功能落地。
索伦是一套系统完备的分布式大型设计
索伦是最顶级的全局工程,下属由天网基架、克苏鲁数仓、Sparta中台等多个子系统组成。
Hydra是服务于索伦的
全局架构爆炸拆解蓝图
全局架构鸟瞰图
全局架构鸟瞰图
Author:undefined Create time:2024-10-24 12:39
Last editor:undefined Update time:2025-01-14 22:46