Как продемонстрировали доклады практической конференции «Технологии баз данных», организованной журналом «Открытые системы», новые архитектуры СУБД находят широкое применение, но обращение к ним обычно диктуется спецификой определенных задач. Так, например, своим появлением на свет столбцовая СУБД Clickhouse, разработка «Яндекса», обязана потребностям сервиса «Яндекс.Метрика», для которого были необходимы гибкие инструменты кастомизации отчетов и очень высокая скорость обработки данных. Не найдя нужных инструментов в доступных платформах, специалисты компании сделали собственную систему, возможности и удобство которой быстро оценили во многих отделах «Яндекса». После чего создатели системы решили «осчастливить» остальной мир – Clickhouse была выпущена в открытых кодах по лицензии Apache 2.0, которая открывает максимально широкие возможности использования.

Разработчик Clickhouse Алексей Миловидов подчеркнул, что при многочисленных достоинствах система имеет объективные ограничения: предназначенная для обработки больших объемов мелкогранулированных, хорошо структурированных и неизменяемых данных, Clickhouse не рассчитана на транзакционные задачи или обработку документов, не может служить платформой для озера данных и т. д. Ее ниши – это, например, веб-аналитика или анализ посещений сайтов (click stream).

Подчас приходится использовать даже несколько баз данных NoSQL, чтобы получить оптимальную поддержку для разных классов нагрузок. Так поступили, например, в компании Data-Centric Alliance: в основе ее системы управления данными для таргетирования онлайн-рекламы Facetz.DCA лежат четыре СУБД – Redis, MongoDB, Aerospike и Hbase. Каждая из них, как пояснил разработчик DCA Артем Ведерников, оказалась наиболее удачным выбором для реализации конкретного сценария доступа к данным о почти 600 млн анонимных интернет-пользователей, с которыми работает система.

«Под капотом» автомобильного онлайн-аукциона CarPrice тоже оказалось не одно решение для хранения и обработки данных. Руководитель отдела разработки CarPrice Юрий Буйлов рассказал, что использование нескольких инструментов – реляционной MySQL, нереляционной Redis и Go, базы данных, рассчитанной на обработку в памяти, – позволяет добиваться максимальной скорости и эффективности множества традиционных и онлайн-сервисов, из которых состоит аукцион, и реализовывать весь процесс продажи автомобиля за полчаса.

Открытой СУБД MySQL и ее клонам было посвящено несколько выступлений на конференции. Так, Света Смирнова из компании Percona, опытный специалист по технической поддержке MySQL, поделилась с аудиторией профессиональными секретами отладки производительности этой СУБД на разных уровнях – от запросов до оборудования. Разработчик компании MariaDB Сергей Петруня рассказал о возможностях репликации в новых версиях MySQL и MariaDB. Адаптация MySQL и нескольких других платформ для работы с данными к архитектуре российского процессорного семейства «Эльбрус» стала предметом доклада Сергея Королева из компании МЦСТ.

На волне импортозамещения интерес отечественных заказчиков к открытым базам данных по понятным причинам растет. Однако эти решения, как правило, относятся к разряду нишевых и не готовы выступить в качестве платформы для корпоративных управляющих систем, уверен Марк Ривкин, руководитель группы баз данных технологического консалтинга Oracle СНГ. По его мнению, требования предприятий к доступности, безопасности, масштабируемости и удобству использования могут удовлетворить только коммерческие СУБД «большой тройки» мировых производителей – IBM, Microsoft, Oracle. Ривкин подробно остановился на основных тенденциях развития таких систем, проиллюстрировав их, естественно, примерами новых и будущих возможностей СУБД Oracle. Среди факторов, выгодно отличающих коммерческую универсальную СУБД от специализированных свободных, он выделил следующие: способность к самоуправлению и самолечению, поддержка разнообразных типов нагрузок, механизмы работы с Большими Данными, специальные инструменты для обеспечения безопасности, архитектура максимальной доступности – система мер, которая позволяет защищаться от различных сбоев, а также возможность предложить заказчику машину баз данных, представляющую собой специализированный сервер, ускоряющий как транзакционную, так и аналитическую обработку.

Перспективными для коммерческих СУБД технологиями Ривкин назвал обработку данных в памяти, реализацию в процессоре отдельных команд, а в будущем – всей логики СУБД (что по силам только тем производителям, которые наряду с ПО баз данных выпускают аппаратные системы), облачную модель DBaaS («база данных как сервис»).

С характеристикой «нишевой» в отношении системы PosgreSQL не согласился Иван Панченко из Postgres Professional – российской компании, которая занимается продвижением этой открытой СУБД и разработкой бизнес-решений на ее базе. В частности, он рассказал об успешной миграции на PosgreSQL системы документооборота правительства Московской области. По словам Панченко, заказчика в данном проекте меньше всего волновал «политический» аспект использования платформы западного вендора. Основными аргументами в пользу перехода на открытое ПО были снижение лицензионных затрат, свобода и независимость от определенного поставщика, а на выбор конкретного решения повлияли масштабируемость и отказоустойчивость системы, а также наличие профессиональной команды поддержки в России.

Научные аспекты применения различных платформ баз данных нашли отражение в докладах Максима Губина из Томского политехнического университета (разработка базы знаний современного научного эксперимента), Дмитрия Игнатова из НИУ ВШЭ (обнаружение знаний в базах данных с помощью мультимодальной кластеризации), Виктора Китова из МГУ (эффективная реализация алгоритма бустинга — одного из наиболее популярных методов прогнозирования в машинном обучении).

Не секрет, что жесткая тактика лицензирования программных продуктов, характерная для Oracle, порой создает серьезные сложности для клиентов корпорации. В компании TmaxSoft утверждают, что в этом отношении у нее есть преимущество.

Здесь не только сулят пользователям СУБД Tibero примерно вдвое меньшую стоимость, чем у Oracle, но и обещают предельно понятную модель лицензирования. Недавно компания стала первой, получившей сертификат Campaign for Clear Lisensing — некоммерческой организации, которая выступает за ясность лицензий на корпоративное программное обеспечение.

«Прайс-лист Tibero умещается на одной странице, — подчеркнул Мартин Томпсон, главный агитатор инициативы CCL, на прошедшем конце 2015 года вручении сертификата. — Расценки и продукты четко выделены, нет скрытых дополнительных затрат, которые заказчикам пришлось бы выискивать».

Он также отметил, что соглашение конечного пользователя, которым сопровождается СУБД компании, занимает всего девять страниц.

На сегодняшний день на Tibero перешли почти в 150 компаниях, которые ранее использовали Oracle, в том числе для таких применений, как оперативная обработка транзакций, поддержка принятия решений и анализ Больших Данных, подчеркивают в TmaxSoft. Сейчас компания интенсивно работает над тем, чтобы этот показатель вырос, — TmaxSoft, основанная около 20 лет тому назад в Южной Корее как разработчик связующего ПО, осуществляет амбициозный план по завоеванию мирового рынка.

«Мы пользуемся невероятным успехом на азиатских рынках, — заявляет Джошуа Юлиш, директор американского офиса TmaxSoft, — и рассчитываем бросить вызов крупнейшим игрокам программного рынка, прежде всего Oracle».

Tibero более чем на 90% совместима с СУБД Oracle, аналогично ей поддерживает кластеризацию, а также ее команды, типы данных и расширения SQL. В большинстве случаев переход с Oracle на Tibero занимает всего несколько недель, утверждают в TmaxSoft.

Tibero может работать локально или в облаке, под управлением Linux и Windows на системах x86-архитектуры, под AIX на платформе PowerPC и под Solaris на серверах SPARC. Совсем недавно Tibero 6, самая новая версия реляционной СУБД, получила сертификат VMware Ready, подтверждающий совместимость с рабочими средами VMware vSphere 6.

«Среди альтернатив Oracle сегодня, помимо СУБД Microsoft и IBM, существует целый ряд систем с открытым кодом, — напоминает Фрэнк Скаво, главный аналитик Strativa. — В Tibero примечательно то, что ее разработчики стараются обеспечить максимальную совместимость c Oracle при значительно меньшей стоимости».

Важным преимуществом могут стать и более простые условия лицензирования.

«Если в Tibero действительно предложат что-то попроще, это определенно будет плюсом», — продолжил аналитик.

Во многих отношениях тактика продвижения TmaxSoft похожа на вызов, который в Amdahl во времена мэйнфреймов бросили IBM, только сегодня в роли IBM — Oracle, полагает Скаво: «Насколько я помню, продавцы IBM вдруг начали предлагать гораздо более гибкие условия, когда заказчики ясно дали понять, что всерьез рассматривают вариант перехода на Amdahl».

В TmaxSoft утверждают, что у Tibero примерно 1,6 тыс. внедрений по всему миру. Большинство из них — в Южной Корее, Китае и Японии, но недавно компания начала работать в Сингапуре и Индии, а также вышла на европейский и другие западные рынки. Сегодня у нее есть представительства в Австралии, Бразилии, Канаде, России, Турции, США и Великобритании. Кроме того, TmaxSoft заключила партнерские договоры с IBM, Amazon Web Services, Red Hat, Hewlett Packard Enterprise, CSC и Infosys.

По словам Юлиша, планируется дальнейшее расширение рынка сбыта еще на 10-15 стран: «Мы уверены, что у нас много возможностей в Европе, и надеемся на дальнейший рост в США».

Своих потенциальных заказчиков в компании видят на предприятиях различных размеров и в госструктурах: «В госсекторе очень заинтересованы в переходе на Tibero».

Карл Олофсон, вице-президент по исследованиям IDC, считает, что у бизнес-модели TmaxSoft есть шансы: «Это один из небольших игроков, которые претендуют на кусок рынка Oracle. На мой взгляд, Tibero будет привлекательной для тех, кто не пользуется всеми возможностями Oracle или применяет СУБД не для самых требовательных с точки зрения масштабируемости уровня сложности и быстродействия приложений».

Google продолжает кампанию по привлечению корпоративных клиентов к своей облачной платформе, предлагая им сервисы баз данных, которые обладают достаточной стабильностью в условиях рабочей нагрузки, характерной для производственных систем делового назначения.

Компания анонсировала три решения, ориентированных на работу с базами данных: второе поколение сервиса управляемых баз данных Cloud SQL, документальную базу данных NoSQL Cloud Datastore и сервис баз данных NoSQL Cloud Bigtable, поддерживающий, в частности, Gmail. Каждый из этих продуктов поставляется с соответствующим соглашением об уровне обслуживания, что гарантирует им высокий уровень готовности.

По словам ведущего менеджера Google по продуктам хранения и баз данных Доминика Прейса, многие компании ждут, пока облачные сервисы станут общедоступными. Нынешняя инициатива Google, как уверяют в компании, позволяет ее облачным сервисам составить конкуренцию предложениям Amazon, Microsoft и IBM для крупного бизнеса.

Одним из ключевых продуктов Google является сервис Cloud SQL, благодаря которому клиенты получают базу данных, полностью управляемую Google. Эталонные тесты показывают, что второе поколение Cloud SQL при выполнении некоторых задач работает быстрее нового сервиса Amazon Aurora.

Компания Google также упростила развертывание Microsoft SQL Server в инфраструктуре Google Compute Engine, предлагаемой в качестве сервиса. Теперь пользователи смогут запускать новые экземпляры GCE с SQL Service в течение минуты.

Google будет управлять всеми лицензиями на популярное серверное программное обеспечение баз данных Microsoft, а клиенты, которым нужен SQL Server, смогут запускать его в облаке Google. (В настоящее время соответствующий сервис находится на стадии бета-версии.)

Анонсирована поддержка продуктом Cloud Storage ключей шифрования, предоставляемых клиентами, что позволит компаниям улучшить защиту своих данных. Пользователи, при желании, смогут закрыть поставщику облачных сервисов доступ к своим данным.

О появлении новых продуктов было объявлено примерно за полтора месяца до открытия в Сан-Франциско конференции, на которой Google намерена рассказать о новых возможностях своего облака.

Сотрудники лаборатории искусственного интеллекта МТИ создали приложение, радикально упрощающее разработку интерфейсов для корпоративных баз данных. Обычно для этого нанимают программистов соответствующего профиля, и сложные запросы на SQL им приходится составлять вручную. Новая система, получившая название Sieuferd, выглядит подобно Excel, и как обещают разработчики, в ней разберется любой, кто хорошо знает эту электронную таблицу.

Запросы и отчеты в Sieuferd составляются с помощью выпадающих меню. Графический интерфейс позволяет переносить в систему данные из многих источников, сортировать и фильтровать их, группировать с помощью алгебраических функций, скрывать ненужные столбцы и строки и т. д.

Основное меню имеет всего 17 позиций, большинство из которых покажутся знакомыми пользователям электронных таблиц. В докладе, посвященном системе, ее создатели доказывают, что этих несложных функций достаточно, чтобы составить любой возможный запрос, отвечающий стандарту SQL-92.

Разработчики Sieuferd провели исследование удобства использования системы, которое показало, что уже на стадии прототипа ею пользоваться проще, чем существующими на рынке системами для работы с базами данных.

Компания EnterpriseDB намерена приблизить свой диалект, реляционную СУБД PostgreSQL с открытым кодом, к миру NoSQL и добавить туда функции автоматического сегментирования (autosharding).

Выступая на конференции NoSQL Now, проходившей в Сан-Хосе, главный архитектор баз данных EnterpriseDB Брюс Момджан рассказал о планах компании в отношении своей СУБД. «В ближайшие год-два мы намерены реализовать там функции автоматического сегментирования, благодаря которым десятки серверов Postgres будут работать унифицированным образом, разделяя друг с другом транзакции и рабочую нагрузку, – сообщил он. – Таким образом, Postgres сможет справляться с нагрузками, которые ранее были под силу только продуктам NoSQL, поддерживающим многоузловые конфигурации. В настоящее время соответствующие возможности Postgres ограничены».

Затем Момджан более подробно остановился на намерениях EnterpriseDB, указав, что поддержка Postgres больших наборов данных приобретает все большую актуальность. «Мы подошли к той черте, за которой избежать роста нагрузки уже не удастся, – подчеркнул он. – Решать этот вопрос сообщество собирается за счет автоматического сегментирования. Один центральный сервер Postgres будет принимать запросы, определять, какие сегменты лучше подходят для их обработки, и перенаправлять запросы туда. В настоящее время EnterpriseDB и NTT совместно работают над решением этой задачи».

Возможность автоматического сегментирования - уже не первое движение Postgres в сторону NoSQL. В 2012 году в СУБД были добавлены функции для работы с типом JSON, а в прошлом году программное обеспечение Postgres Extended Datatype Developer Kit позволило разработчикам использовать PostgreSQL в приложениях, которым ранее требовались только решения NoSQL.

Момджан отводит Postgres на предприятиях роль центрального брокера данных. Трудно сказать, сможет ли Postgres сравниться по скорости с системой Apache Cassandra, объединяющей 100 узлов, но по функционалу СУБД, предлагаемая EnterpriseDB, явно превосходит Cassandra. «Здесь как всегда приходится искать определенные компромиссы, – пояснил Момджан. – Какая нужна производительность, какой функционал и какое решение лучше всего подходит в данном конкретном случае?»

Поддержка внешних источников данных позволяет, оставив данные в Cassandra, обращаться к ним из Postgres, получая преимущества реляционных СУБД и аналитических средств. Postgres поддерживает и другие внешние источники данных, включая Oracle, MySQL и MongoDB.