大模型落地必须要有成熟的数据仓库、数据湖、湖仓一体作为基础吗?

由于建设成本和建设需求的局限,部分企业并没有建设成熟的数据湖、湖仓一体,只能通过人工收集大量文本数据等非结构化信息,在这样的情况下,如何快速推动大模型技术的落地?显示全部

由于建设成本和建设需求的局限,部分企业并没有建设成熟的数据湖、湖仓一体,只能通过人工收集大量文本数据等非结构化信息,在这样的情况下,如何快速推动大模型技术的落地?

收起
参与6

查看其它 1 个回答xuyy的回答

xuyyxuyy联盟成员数据架构师秦皇岛银行

由于技术水平的制约和方案的局限性,我们难以实现底层统一的数据管理。为了能用更丰富的数据源训练AI模型,需要以极高的代价将数仓的数据导出;为了实现实时数据处理,不惜选择冗长的数据处理链路,造成多份数据和多个计算引擎烟囱林立。

银行 · 2024-01-18
浏览406

回答者

xuyy
数据架构师秦皇岛银行

xuyy 最近回答过的问题

回答状态

  • 发布时间:2024-01-18
  • 关注会员:3 人
  • 回答浏览:406
  • X社区推广