Экспорт в ХД Deductor Warehouse
Сергей28 апреля 2010Интеграция, Data Warehouse8 комментариев
Сергей28 апреля 2010Интеграция, Data Warehouse8 комментариев
Добрый день! Хотелось бы уточнить несколько вопросов.
1. Экспорт осуществляется очень долго. Импорт в дедуктор осуществляется за 2 минуты, а экспорт в ХД дедуктора 15-20 минут на стадии экспортирования данных (группирвку, проверку не беру в расчет). При всем при этом пробовал играть с настройками: удаление измерений, группировка. Это нормально?
2. После удаления значений в процессах и измерениях сам файл как был 700 мегабай так и остался, с чем это связоно?
Комментарии
Войдите или зарегистрируйтесь для добавления комментариев.
Алексей Арустамов
28 апреля 2010 14:51 Ссылка
Обновлён
Относительно того, как можно разогнать можно просмотреть вебинар - http://www.basegroup.ru/download/webinars/big_data/
Вы используете в качестве базы Firebird, а он не самый быстрый. Вообще надо бы посмотреть сам сценарий, думаю, что в нем какие-то проблемы.
Может быть еще дело в том, что в базе накопился мусор, такое бывает, когда часто туда грузишь. Решается это очень просто - нужно сделать дамп базы и восстановить. Наверняка размер еще сократится в разы и скорость увеличится. Причина подобных проблем с базами такая же как с жесткими дисками - фрагментация.
А каким образом можно сделать так называемый "дамп" базы, если она создана в самом дедукторе?
Сценарий очень простой, выкачивается информации из сторонней БД (только нужные параметры, такие же и закачиваются в ХД Дедуктора, т.е. никакой лишней информации) и потом это закачивается в ХД дедуктора.
Deductor тут не причем. ХД - это обычная база данных, только с некоторыми предопределенными таблицами. И работать с ней можно так же как с любой базой. Дамп и прочее делается не средствами Deductor, а утилитами СУБД, либо сторонними программами для администрирования. Например, для Firebird есть классная программа администрирования IBExpert - http://www.ibexpert.com/rus/
актуализируйте, пожалуйста, ссылку на вебинар
Актуальная ссылка на вебинар, о котором идёт речь в комментариях выше - https://youtu.be/1RoZpdZsqSk
Для начала ознакомьтесь, пожалуйста, со следующими материалами, которые входят в поставку Deductor:
1. Руководство администратора
- Deductor Warehouse – хранилище данных – стр. 30
- Оптимизация хранилища данных на платформе Firebird – стр. 34
2. Руководство по импорту и экспорту
- Экспорт в Deductor Warehouse – стр. 99
- Экспорт данных в процесс – стр. 101
ПОдскажите пожалуйста где взять документ "Руководство по импорту и экспорту" ? Спасибо.
