Самые большие данные хранятся в нашей истории

История развития

В 1992 г. В.А. Дюком на международной конференции по бионическому моделированию «Биомод 92» была предложена концепция локальных контекстно-зависимых метрик. Эта концепция затем была детально описана в книге «Компьютерная психодиагностика» (1994), вышедшей большим тиражом (20 тыс. экз.) и ставшей настольной книгой у специалистов по прикладной психологии. Кроме того, данная книга была включена в список рекомендуемой литературы Министерством образования РФ в Примерной программе дисциплины «Теоретические основы информатики» (2000 г.) и рекомендована Министерством по специальности 030100 Информатика.

В концепции локальных контекстно-зависимых метрик было предложено при изучении системно сложных объектов отказаться от представлений об общем пространстве описания объектов и привязывать к каждому объекту его собственную метрику, максимально раскрывающую информационную значимость объекта в контексте задачи классификации.

В 1997 году в издательстве «Питер» вышла из печати книга В.А. Дюка «Обработка данных на ПК в примерах» (тираж 10 тыс. экз.), в которой концепция локальных контекстно-зависимых метрик была распространена на случай дискретных описаний объектов и описан эффект структурного резонанса в данных.

В 2005 году В.А. Дюк защитил на факультете прикладной математики и процессов управления СПбГУ докторскую диссертацию «Методология поиска логических закономерностей в предметных областях с нечеткой системологией». В диссертации были очерчены особенности предметных системно сложных областей, сделан аналитический обзор современных на тот период методов поиска логических правил в многомерных данных, развита теория поиска таких правил на основе представлений локальной геометрии, предложены новые способы анализа композиций логических правил, рассмотрены методы нечеткого представления логических правил и описан ряд практических примеров использования предложенной методологии.

В дальнейшем работа над новой технологией велась как в теоретическом, так и практическом плане. В настоящее время имеется два действующих прототипа программного продукта, реализующих новую технологию, эффективность которых подтверждена апробацией как на модельных, так и на реальных данных.

В 2014 г. авторский проект В.А. Дюка «Deep Data Diver — инновационная технология Big Data to Knowledge (BD2K)» успешно прошел экспертизу Фонда «Сколково» (ИТ Кластер). Для разработки и коммерциализации программных продуктов, реализующих инновационную технологию анализа больших данных, создана компания Дип Паттернс.

В августе 2014 г. компании присвоен статус участника проекта создания и обеспечения функционирования инновационного центра «Сколково».