火山引擎DataLeap:更强的数据目录搜索能力,做到一步找数
随着数据管理变得更加复杂,元数据的重要性呈指数级增加。如今,Data Catalog(数据目录)被看成是元数据管理的最佳工具,而一个通用的Data Catalog平台,通常包含元数据管理,搜索,血缘,标签,术语等功能。其中,搜索是Data Catalog的入口功能,承担着让用户“找到数”
更新日期:2023-07-26
来源:系统之家
随着数字经济成为当前全球主要国家推动经济复苏的关键举措,算力作为生产力发挥着越来越重要的作用,数字经济全球竞争的下一条赛道已然聚焦于“算力”与“算力网络”。
为此,我国发布多条相关政策,明确提出要“推进云网协同和算网融合发展”、启动“东数西算”工程、以及加快构建算力、算法、数据、应用资源协同的全国一体化大数据中心体系等,将算力网络的关注度推上了一个新的台阶。
思特奇算力网络核心产品
加速算网融合创新发展
思特奇自2019年开始对算力网络展开研究,通过云原生、云网融合、SDN、在网计算、意图感知、算力度量、算力建模、算力路由算法、算力编排等核心技术的创新研发,实现云和网的深度融合、资源统一管理和调度,让云、边、端梯度层次化分流管理,实现算力服务的层次化提供,按照不同业务场景提供不同层次服务质量的算力服务。
思特奇算网融合一体化运营平台应算力网络而生,通过实现对“云三层”从算力资源的管理、调度、控制、提供、编排、运维、运营方面提供全面的功能模块。
思特奇算网融合一体化运营平台功能架构图
功能架构
门户展现层:东数西算/西存/东视西渲可视化大屏展示;
算网运营层:资源式向任务式产品管理与受理模式转变;营销式、服务式算网产品推荐;多量纲计费、算力并网与结算;
算网大脑:多样化算力统一采集;任务式调度、算力编排引擎、算力智能分析赋能、标准能力开放;
算力服务网关:通过算力标准化封装、接口标准化及算力服务规格标准化,实现算力的全生命周期管理;
算网管控层:多云管理与控制、边缘云控制、算力标准化与算力度量,SDN控制器。
实践案例
X省大数据局枢纽算力调度运营平台
国家层面于2022年批示了建设8大枢纽节点、10个数据中心集群,力求构建一体化大数据算力服务体系,实现西部算力资源对东部数据运算的支撑,赋能数字经济。
其中X省数据中心众多、部署分散,尚未形成统一的调度管理中心。现有的数据中心已实现的4个政企DC的网络互联及DC直连,只是做到了云资源整合,并未实现真正的资源调度。因此,需要进一步对各DC的算力资源进行统一量化、调度,建设安全可靠的算力交易平台,实现算力提供方和算力使用方之间的算力资源交易。
经过对局方需求的深度调研分析,思特奇通过建设算网资源一体化调度平台,打通算力供需双方动态对接的全流程,构建公共算力资源池,实现算力资源的按需配给的自动匹配。基于用户算力需求,平台进行适合算力提供方调度,将满足用户需求的算力提供方以及对应的价格进行推荐,优先推荐三种:最优体验、最优成本、最优效率。
项目核心建设内容包括算力调度中心及算力商城,其中算力调度中心作为算力交易的核心后台,主要针对需求方的算力需求完成算力意图的解析和资源的适配,保证算力资源可以基于用户算力需求意图进行调度推荐不同维度的多种方案,供算力需求方进行选择,完成算力资源的甄选。
算力调度中心整体流程
1算力运营展示:可展示全国算力运营情况及各省算力运营情况;
2算力供需方管理:包括客户资格审核以及供应商资质审核管理能力;
3线下交易工单管理:实现线下交易工单列表展示、客户经理匹配以及工单详情管理。
算力商城打通算力供需双方动态对接的全流程,建设算网资源一体化调度平台,实现算力资源的按需使用。
算力商城整体流程
算力商城包括对算力买方的算力产商品分类管理与交易展示能力以及对算力卖方的合作伙伴注册认证流程管理。通过算力商城支持建立丰富的行业云商品地图,并对商品进行对类展现,用户能够快速找到所需服务,包括:计算服务、存储服务、网络服务、容灾备份服务、数据库服务、中间件服务、容器微服务、容灾备份、大数据、国产密码等。
建设成效
2022年8月在XX省大数据局建设算网运营交易平台,围绕算力商城、算网运营、算网编排与调度、算网服务网关等子系统建设了门户管理、算力交易、算力运营管理、合作伙伴管理、信用评估、数算网统一调度、流量调度等近五十项子功能,为算力供需双方提供一体化交易平台,实现算力资源的按需使用。
目前,算力商城门户登录次数已累计上千次,商城完成算力交易达数百笔,每月交易额近百万,且已接入近三十个算力合作伙伴,完成数十种算力注册服务,且能对枢纽统筹算力商对应算力池的PUE进行实时化监控呈现。
火山引擎DataLeap:更强的数据目录搜索能力,做到一步找数
随着数据管理变得更加复杂,元数据的重要性呈指数级增加。如今,Data Catalog(数据目录)被看成是元数据管理的最佳工具,而一个通用的Data Catalog平台,通常包含元数据管理,搜索,血缘,标签,术语等功能。其中,搜索是Data Catalog的入口功能,承担着让用户“找到数”
火山引擎ByteHouse助力大地量子精准、高效预测天气
伴随着气象技术的发展以及城市气象设施的完善,气象监测服务能力在不断提高,实现短期甚至中长期的气象预测成为可能。短期、长期的天气形势预测,不仅能帮助相关行业、有关部门针对性地进行极端天气防范准备,降低气象灾害带来的影响;还可以提升对风力、水力等可再生能
ISC 2023技术高峰会召开,赛博昆仑创始人郑文彬分享网络空间对抗新观点
8月9日,第十一届互联网安全大会(ISC 2023)AI新场景·安全新边界技术高峰会在北京召开。大会汇聚了业界专家学者、企业领袖和技术专业人员,分享AI新场景下前沿技术、创新产品及实践经验。赛博昆仑创始人兼CEO郑文彬受邀到会,并以“漏洞持久战”为题发表演讲,分享了包
登顶2023年上半年新能源汽车质量“榜一大哥”,极狐汽车用实力说话
近日,《2023年上半年新能源汽车质量排行》出炉,极狐阿尔法T、极狐阿尔法S分别以远高于平均值的绝对优势,成为“新能源中型SUV”与“新能源中大型车”两个细分榜单的“榜一大哥”,印证着国产新能源汽车也能“开不坏”的事实。《2023年上半年新能源汽车质量排行》以中
新华·AIGC人才培优工程暨“数字人”产品发布会圆满举行
AI赋能教育,创新引领未来。8月8日,由中国广告协会融媒体工作委员会支持,中国东方教育集团主办,石家庄新华电脑学校、河北新华未来技工学校、中广AIGC产业发展联盟承办,北京中广华云智能科技有限公司、石家庄燕阵网络科技有限公司协办的新华·AIGC人才培优工程暨“数字人
那些把爱好当事业的人,最后怎么样了?
你选工作时,会选择喜欢的?还是大家眼里稳妥的“好工作”?在各种压力的“威胁”下,大部分人都会被迫选择后者。于是,“不喜欢现在的工作”,几乎成为了当代年轻人的通病。但今天,我们却见识到了两位执着于自我爱好的青年,一不小心就把兴趣玩成了事业,甚至完全转换了
央视关注抖音反网暴举措,一键防暴等功能被关注
近日,央视《法治在线》栏目报道了面对网络暴力,社会各界该如何联合治理的话题。节目对抖音平台在反网络暴力所做出的策略、产品、规范和倡议等进行了重点关注。报道称,抖音上线了一键防暴等功能,系统治理网络暴力现象,对网暴事件进行了积极预防和快速响应。超200万
第二代The Freestyle三星随享智能投影仪开启预约登记,快来解锁多重专属好礼
近日,第二代The Freestyle三星随享智能投影仪即将上市,三星商城已开启新品预约登记服务。8月1日至8月31日期间进行预约登记的用户可尊享腾讯视频VIP年卡、投影仪便捷式移动电源底座与Skin外壳多项专属好礼,赠品数量有限,先到先得。据悉,该款备受关注的新品将于9月1
合合信息借AI破解版面分析与还原难题 以科技创新解决实际应用
现阶段,文档的智能化处理是计算机视觉在产业中的重要应用方向,现阶段还面临着诸多挑战。合合信息敏锐的捕捉到其中的发展机会,并通过技术性创新积极推动在相关领域的落地。合合信息表示,随着OCR技术应用面的持续拓宽,复杂多变的版面、多样化的文本内容给文档的识别
火山引擎首发“会表演”的有声内容创作平台
近日,火山引擎正式推出有声内容创作平台。该平台历经2年研发,相较传统平台,其具备多情感演绎和自动化预测两大优势。据了解,多情感演绎上,有声内容创作平台的“声音超市”不仅提供70余款适配不同题材的精品音色,还可通过丰富的情感实现更精彩的演绎;自动化预测层面
蒙牛的“2049”:更绿色,更营养,更智慧
8月4日,蒙牛集团在呼和浩特举办了全球合作伙伴答谢会。此次盛会正值蒙牛集团成立24周年,以面向第二个百年奋斗目标2049年为时间节点,旨在回顾过去、展望未来,围绕乳业发展愿景进行深入研讨。出席本次活动的嘉宾涵盖了来自政府机关、行业协会、科研院所及高校等负责人,以
让战力更“9”!掠夺者 · 擎Neo全新配置i9 HX版火爆预售中!
掠夺者·擎Neo作为相当亲民的高端电竞本,自面世以来便受到玩家追捧,全系搭载英特尔13代酷睿HX发烧级芯片,性能狂野。而全新13代i9 HX的掠夺者·擎Neo如约而至,战力全面进阶,带来强大又亲民的i9 HX“战神之力”!HX发烧芯片,战力狂野掠夺者·擎Neo高端电竞本搭载英特
小天才旗舰Z9少年版即将上市!或成为中学生手表最佳选择!
针对未成年人这个细分市场,小天才通过深挖孩子的日常习惯,洞察青少年个性化需求,持续推出多款行业领先的电话手表。此前,小天才旗舰Z9正式上市,新品带来更强大的实时定位、更丰富的健康监测,设计工艺的升级也带来更多元的产品形态。在上一代产品小天才旗舰Z8上,小
蒙牛总裁五条锦囊畅享《奶业的世界2049》
8月伊始的蒙牛,可谓是双喜临门,蒙牛不仅迎来了24周岁生日,还迎来了家乡重磅盛事——在中国乳都呼和浩特举办的世界奶业大会。蒙牛总裁卢敏放在会上畅谈了《奶业的世界2049》。卢敏放笑言,2049年我们的新中国已经迎来了第一个百年,蒙牛也到了50岁的知天命之年,而我也已经
挑战传统:AEKE领跑新时代的健康运动
近年来,健身行业蓬勃发展,随之而来的是不断涌现的新兴品牌。在这激烈竞争的市场中,家居智能运动品牌AEKE以其独特的“轻力量运动体系”成为了行业的领跑者。不拘泥于传统,AEKE坚信轻力量是一种更有效的运动方式,并在市场上取得了显著的成功。AEKE的轻力量运动体系具备许