Фонд будущего Австралии – суверенный фонд с управлением активами в размере 273 миллиарда долларов, в настоящее время внедряет систему “data lakehouse”, которая будет выступать в качестве “ядра центральной платформы данных” для всего агентства.
Проект представляет собой последний шаг в развитии среды анализа данных агентства, которая работает на платформе Databricks. В рамках саммита “День данных” в Мельбурне на прошлой неделе менеджер по данным и программной инженерии Пол Мэтисон отметил, что платформа Databricks стала ключевой для агентства, где она используется для анализа данных и критически важных рабочих процессов.
Следующим этапом развития Databricks станет создание окружения lakehouse для всех данных Фонда будущего – структурированных, полуструктурированных и неструктурированных. “Мы сейчас в процессе реализации data lakehouse в агентстве”, – отметил Мэтисон. “Lakehouse станет основной центральной платформой данных для всего агентства”.
Кроме того, для повышения производительности и снижения расходов фонд перешел от SQL-хранилищ, работающих постоянно, к “serverless SQL warehouses”, что рекомендуется Databricks. Это позволило сэкономить около 36% расходов на вычислительные ресурсы.
Фонд будущего видит вложения в Databricks как основу своих амбиций в области искусственного интеллекта, и возможность участвовать в растущем пространстве ИИ.
Оригинальная новость на сайте
