Будущий Фонд создает озеро данных: крупнейшее событие в мире технологий!

219

Фонд будущего Австралии – суверенный фонд с управлением активами в размере 273 миллиарда долларов, в настоящее время внедряет систему “data lakehouse”, которая будет выступать в качестве “ядра центральной платформы данных” для всего агентства.

Проект представляет собой последний шаг в развитии среды анализа данных агентства, которая работает на платформе Databricks. В рамках саммита “День данных” в Мельбурне на прошлой неделе менеджер по данным и программной инженерии Пол Мэтисон отметил, что платформа Databricks стала ключевой для агентства, где она используется для анализа данных и критически важных рабочих процессов.

Следующим этапом развития Databricks станет создание окружения lakehouse для всех данных Фонда будущего – структурированных, полуструктурированных и неструктурированных. “Мы сейчас в процессе реализации data lakehouse в агентстве”, – отметил Мэтисон. “Lakehouse станет основной центральной платформой данных для всего агентства”.

Кроме того, для повышения производительности и снижения расходов фонд перешел от SQL-хранилищ, работающих постоянно, к “serverless SQL warehouses”, что рекомендуется Databricks. Это позволило сэкономить около 36% расходов на вычислительные ресурсы.

Фонд будущего видит вложения в Databricks как основу своих амбиций в области искусственного интеллекта, и возможность участвовать в растущем пространстве ИИ.
Оригинальная новость на сайте