Databricks

Databricks — это платформа данных, к которой компании идут, когда им нужно вместе собирать обработку больших данных, аналитику и машинное обучение на облачной инфраструктуре. По нашей оценке, её главное преимущество — подход lakehouse: он сближает инженерию данных и data science вместо того, чтобы заставлять команды склеивать разные системы. Минус тоже понятен: это серьёзная платформа, а не лёгкий инструмент; ей нужны компетенции по данным, расходы на облако и команда, способная всё это настроить. В работе она ощущается как рабочий стол для больших data-команд, где ноутбуки, пайплайны и модельные задачи стоят рядом. По сравнению со старыми хранилищами данных она гибче; по сравнению с простыми BI-инструментами — заметно технически сложнее. Databricks относится к Соединённым Штатам, и это хорошо совпадает с его местом на рынке облачных data-платформ. Сильнее всего он там, где есть большие, запутанные данные и настоящие ML-задачи, а не просто обычные отчёты.