Інформаційно-аналітична технологія моніторингу. Інформаційно-аналітичні технології, їх завдання інформаційно-аналітичні технології дозволяють

Будь-яка аналітична робота забезпечується комплексом технологій обробки інформації, заснованих на цілісної методологічної бази. Інформаційні технології - це невід'ємна частина сучасних технологій в цілому, перш за все прогностичних, освітніх, технічних, комп'ютерних та інших . В даний час, коли активно розвиваються і впроваджуються ЕОТ і високошвидкісні засоби зв'язку, їх значення сильно зростає. Однак всі ці технології залежать від «людини з олівцем» - мислителя, аналітика, здатного народжувати нові продуктивні ідеї. Без такого суб'єкта - генератора і виробника ідей вся інформаційна робота нічого не означає.

Рівень розвитку інформаційних технологій, безумовно, відіграє найважливішу роль у всіх сферах діяльності людини, перш за все в сфері управління, політики, технічних ресурсів, гуманітарних галузях науки.

Але якщо суть інформаційних технологій полягає, скоріше в тому, що вони покликані відповідним чином підготувати масиви даних для подальшого їх вивчення людиною-аналітиком (т. Е. В їх інформаційно-довідкової функції), то суть інформаційно-аналітичних технологій - в тому творчому, інтелектуальним змісті аналітичних процедур, які здійснює аналітик або особа, яка приймає рішення, після отримання набору даних.

Інформаційно-аналітичні технології (ИАТ) можна визначити як систему знань, методів, операцій і правил, що дозволяють на основі залучення енергетичних, сировинних, технічних, інтелектуальних, кадрових, організаційних, інформаційних та інших ресурсів забезпечити найбільшу ефективність того чи іншого виду діяльності. Найважливішою особливістю ИАТ є їх міждисциплінарний характер, вони знаходиться на «стику» цілого ряду наукових дисциплін, часом слабо пов'язаних між собою. До їх числа можна віднести філософію, соціологію, логіку, математику, економічну науку, інформатику, управлінську науку, психологію та інші галузі науки.

Інформаційно-аналітичні технології - це не тільки плани і проекти творчої спрямованості ...Вони можуть виступати і в якості потужного зброї. Не випадково з метою нанесення противнику максимально руйнівного удару, здатного звернути навіть творчу його діяльність на руйнування власної країни, розорення власного будинку і сім'ї, на боротьбу з вигаданими ворогами, орієнтувати його на досягнення хибних цілей, створено саме інформаційна зброя . Однією з різновидів ИАТ є і технології проведення інформаційних акцій деструктивної спрямованості .

Втім, згадаємо радянсько-латинське вислів студентів-медиків «сіміліс сімілісом» ( «клин клином вибивають») ... У якомусь сенсі ИАТ не відрізняється від ліків в дусі медицини середньовіччя. Інформаційно-аналітичні технології є і інструментом нападу, і інструментом протидії деструктивним інформаційним акціям. Можна сказати, що «ИАТ - це і отрута, і протиотруту в одному флаконі».

Пам'ятайте, «залізну логіку» з фільму «З легкою парою»? - Так ось, у фільмі ми бачили класичну схему міркувань (аналітичну техніку), спрямованих на подолання фрагментарності знань, а вже наскільки це вдалося героям - це інше питання. Вважайте, що приблизно так виглядають люди на ранок після вибуху «інформаційної бомби», точь-в-точь, як алкоголіки, по протвереженні, збирають уривчасті спогади. Саме ця процедура відновлення перемеленої в крупу світоглядної системи нам дуже знайома (починаючи з 1917 року, в середньому один раз за 20 років нашим співвітчизникам доводилося радикально міняти свої погляди, але от лихо - це завжди відбувається з великими втратами). Та й «ранок» таке настає, як правило, вже через роки - як це було в 1995 році. Тоді, в результаті перетворень, започаткованих в 1988 р, замість автомобіля «Волга» в руках у громадян виявилися папірці, спосіб застосування яких був абсолютно не очевидний, але зате слово «ваучер» вже нав'язло в зубах і здавалося привітним і знайомим.

Отже, повторимо, що на противагу інформаційному зброї, націлений на дестабілізацію і руйнування опорних елементів цілісної системи світогляду, існують засоби, що стабілізують і організують процеси мислення і цілепокладання . Саме таким засобом протидії інформаційному зброї є аналітичні технології . Але для того, щоб інформаційно-аналітичні технології дійсно могли працювати в якості системи протидії інформаційному зброї, необхідно, щоб аналітик безперервно здійснював контроль за станом свого модельного світу . Цей модельний світ, «поміщений» в голові аналітика, виступає в якості основи для реалізації всіх процесів цілепокладання. Пізніше ми розглянемо питання, пов'язані з режимами модифікації моделі світу аналітика, визначимо, що є аналітичний режим сприйняття інформації і які режими сприйняття інформації взагалі бувають. Поки обмежимося тим зауваженням, що аналітик не повинен допускати спонтанної (неусвідомленої) модифікації моделі світу, а також дбати про актуальність змісту цієї моделі.

Слід також зауважити, що читання періодичних видань, спеціальної літератури, присвяченій найрізноманітніших галузей людської діяльності, художньої (і навіть не дуже художньої) літератури має бути такою ж звичкою аналітика, як чищення зубів та інші повсякденні «ритуали». Так наприклад, навіть читання макулатури жанру «фентезі» може виявитися зайвим , Оскільки дозволяє виявити стильові кліше в ідеологічній літературі, адресованій молоді, або самим активно використовувати «рідна мова» 14-17-річних для організації запрограмованого психологічного та ідеологічного впливу.

Як бачимо, дуже важливий фактор особистості аналітика , Його соціальний і особистий досвід. Як у жодній іншій сфері, в аналітиці надзвичайну роль відіграє суб'єктивний фактор. Знання, досвід та інтуїція аналітика, його професіоналізм і громадянська відповідальність служать підставою для аналітичних оцінок і висновків.

В даний час в літературі використовується термін «інтелектуальні технології». Фактично цей термін за своїм змістом рівнозначний терміну «інформаційно-аналітичні технології».

Інформаційно-аналітичні технології дозволяють:

1. Знизити навантаження на особа, яка приймає рішення, за рахунок здійснення первинної фільтрації потоку даних.

2. Звільнити аналітика від рутинної роботи по систематизації, реферування даних.

3. Підвищити системність сприйняття даних про обстановку за рахунок введення процедур інтеграції інформації.

4. Забезпечити перетворення даних про обстановку до виду, більш зручному для сприйняття аналітиком.

5. Автоматизувати пошук аргументації на підтвердження або спростування висунутих аналітиком гіпотез.

6. Забезпечити автоматичну індикацію логічно суперечливих даних (при наявності відповідних процедур їх формалізації).

7. Забезпечити автоматичну індикацію очікуваних подій за рахунок постановки завдань автоматизованим системам.

8. Підвищити ефективність інформаційно-аналітичної роботи за рахунок алгоритмізації та стандартизації аналітичних процедур.

9. Забезпечити більш високу психологічну стійкість експерта-аналітика до стресових впливів за рахунок застосування спеціальних методик.

Як видно з переліку функцій ИАТ - це не тільки і не стільки програмні і апаратні засоби обробки даних і сигналів, скільки специфічні методики, придатні як для реалізації їх із застосуванням засобів автоматизації, так і для використання поза комплексом засобів автоматизації. В першу чергу ИАТ застосовуються в інтересах зниження напруженості і підвищення ефективності інтелектуальної праці, що часто досягається за рахунок алгоритмізації діяльності аналітика (помірною, звичайно).

Тобто в рамках ИАТ можуть бути виділені дві компоненти : автоматизація діяльності (Інструментальне напрямок) і алгоритмизация діяльності аналітика (методолого-організаційний напрямок).

Завдяки цьому ИАТ дозволяють ефективно вирішувати різноманітні практичні завдання в самих різних сферах діяльності: в науці, техніці, економіці, соціальній сфері, політиці, гуманітарних галузях і інших. На їх основі проводяться: аналіз соціально-політичної ситуації, обгрунтування вибору політичних або економічних рішень на різних рівнях владних повноважень, прогнозування результатів виборів, а також вирішуються багато інших проблем, що знаходяться в площині соціальних процесів.

У цьому сенсі ИАТ спрямовані на забезпечення діяльності різних осіб, які приймають рішення в умовах дефіциту часу, неповноти відомостей про досліджуваних процесах, нечіткості, суперечливості чи недостовірності інформації.

Інформаційно-аналітичний блок моніторингу виконує його основну функцію, оскільки для прийняття обґрунтованих управлінських рішень відповідним органам важливим є аналіз і оцінка стану об'єкта і динаміки показників його діяльності. Ефективну інформаційно-аналітичну підтримку рішення необхідних завдань здатні забезпечити системи автоматизації аналітичної діяльностіфахівців органів управління, організують процеси збору, зберігання і обробки інформації. Концепція такого роду систем для широкого класу керованих об'єктів повинно ґрунтуватися на сучасній технології інтегрованих сховищ даних і поглибленого аналітичної обробки накопиченої інформації на базі сучасних інформаційних технологій.

Як уже зазначалося, традиційними і загальноприйнятими джерелами первинної інформації є статистична звітність, бухгалтерський та управлінський облік, фінансова звітність, анкетування, інтерв'ю, опитування і т.

Етап аналітичного і статистичного обробкиструктурованої первинної інформації також кілька традиційних загальноприйнятих підходів. Виникнення цих підходів і системна інтеграція їх були зумовлені об'єктивною необхідністю автоматизації обліково-статистичних робіт з метою якомога точнішого, якісного і своєчасного відображення процесів, що протікають в аналізованої предметної області а також виявлення їх характерних тенденцій.

Автоматизація статистичних робіт отримала відображення в створенні і функціонуванні автоматизованих статистичних інформаційних систем: в 1970-х роках - автоматизованої системи державної статистики (АСДС), а з 1988 року - в проектуванні єдиної статистичної інформаційної системи (ЕСІС). Основним завданням цих розробок були збір і обробка обліково-статистичної інформації, необхідної для планування і управління народним господарством на базі широкого застосування економіко статистичних методів, засобів обчислювальної та організаційної техніки, систем зв'язку в органах державної статистики.

У структурно-територіальному аспекті АСДС була строго ієрархічної, мала чотири рівні: союзний, республіканський, обласний, районний (міський). На кожному рівні обробки інформації здійснювалося з метою реалізації завдань перш за все даного рівня.

У функціональному аспекті в АСДС виділяють функціональні і забезпечувальні підсистеми. Ці підсистеми, незалежно від змісту конкретних статистичних завдань, реалізовували функції збору і обробки статистичної інформації, комплексного статистичного аналізу, контролю над виконанням показників, отримання статистичних даних, необхідних для поточного і оперативного планування, своєчасного подання керівним органам всі необхідні статистичних даних. З точки зору користувача моніторингові завдання за своїм призначенням поділяються на:

регламентні задачі, пов'язані з обробкою даних статистичної звітності на відповідних структурно-територіальних рівнях АСДС;

завдання інформаційно-довідкового обслуговування; завдання поглибленого економічного аналізу.

Регламентні завдання пов'язані з обробкою даних статистичної звітності на рівнях АСДС. Кожна регламентна завдання, як правило, пов'язана з обробкою даних деякої конкретної форми статистичної звітності або декількох, тісно пов'язаних за змістом форм звітності. Рішення таких завдань здійснюється комплексами електронного обробки інформації, які являють собою сукупність програмних, технічних та організаційних засобів з використанням локальних масивів інформації.

Завдання інформаційно-довідкового обслуговування передбачають формування за запитами необхідних статистичних даних для оперативного складання доповідей, аналітичних записок та довідок, не регламентовані за змістом. їх рішення забезпечується за допомогою автоматизованого банку даних у вигляді системи накопичення, зберігання, пошуку, обробки і видачі інформації за запитами користувачів в потрібному вигляді.

Завдання поглибленого економічного аналізу засновані на використанні:

динамічних рядів (побудова полігонів, гістограм частот і кумулятивних ліній, підбір трендів з обраного класу функцій);

згладжування вихідного динамічного ряду, діагностика на основі обраного тренда і авторегрессионной моделі, аналіз залишків на автокорреляции і нормальність)

парної регресії (визначення рівнянь лінійної і нелінійної регресії, оцінка їх статистичних характеристик, відбір оптимальної форми зв'язку);

множинної регресії (визначення матриці парних коефіцієнтів кореляції, визначення рівнянь множинної лінійної регресії),

факторного аналізу (отримання лінійної моделі, описується невеликим числом факторів, розрахунок значень "навантажень на загальні фактори" і найзагальніших факторів, графічна інтерпретація факторів на площині і в просторі);

кореляційного аналізу (отримання кореляційних матриць, середніх і стандартних відхилень).

Організаційно-технологічна форма вирішення даного класу задач - аналітичні комплекси, що представляють собою сукупність пакетів прикладних програм, орієнтованих на реалізацію математико-статистичних методів. Для охоплення широких часових діапазонів аналізованих даних використовується реєстрова форма моніторингу на основі автоматизованих регістрів, що дозволяють зберігати і обробляти значні сукупності даних, організованих

у вигляді масивів, незалежних від структури статистичних звітів по кожному об'єкту або певної групою об'єктів моніторингу. Реєстрова форма моніторингу особливо ефективна для статистичної інформації, що характеризує відносно стійкі об'єкти, тому регістри можна розглядати як автоматизовану картотеку груп однорідних одиниць статистичного спостереження певного типу. Її застосування дає можливість користувачеві шляхом заповнення уніфікованого бланка запиту отримувати різні дані, що характеризують стан того чи іншого об'єкта.

Важливим напрямком удосконалення статистичного моніторингу стало забезпечення підвищення змістовності, достовірності і оперативності звітних даних на основі поєднання поточної звітності, одноразових обліків, вибіркових і монографічних обстежень, а також оптимізації потоків інформації. Особливий акцент зроблений на вдосконаленні економіко-математичних методів аналізу та прогнозування розвитку систем. Крім того, істотним прогресом в еволюції методів моніторингу послужило використання нових інформаційних технологій, а саме:

розробка комплексної технології обробки інформації при використанні банків даних та комп'ютерних мереж;

створення засобів комп'ютерного моделювання систем обробки даних;

розробка інтелектуалізованих типів інтерфейсу кінцевого користувача з комп'ютером на базі автоматизованих робочих місць, що передбачають використання експертних систем.

Нові інформаційні технології суттєво розширили можливість прямого автоматизованого доступу до необхідної статистичної інформації, урізноманітнило склад і зміст аналітичних робіт. З'явилася можливість інтеграції однієї статистичної інформаційної системи моніторингу з іншими інформаційними системами всіх рівнів управління каналами телекомунікаційних зв'язків.

Однак всі розглянуті методи аналітичного та статистичного оброблення даних мають істотний недолік. Вся сукупність даних обробляється в них як розрізнена безліч, через що відсутня їх системне єдність. Між тим чи іншим інформаційними потоками може бути встановлений лише штучний зв'язок шляхом об'єднання їх в певну звітну форму. Однак неможливо передбачити всі форми для всіх можливих явищ і зв'язків. Традиційні методи аналітичного та статистичного оброблення даних не враховують того, що між будь-якими явищами і подій існує природний зв'язок, заснований на універсальних, притаманних усім їм показниках. При наявності системи таких природних

зв'язків з'являється можливість зіставляти з даним явищем все пов'язані з ним в явному або неявному вигляді чинники, події, дані. Моніторингу, заснованому на такому підході, властива повнота охоплення причинно-наслідкових зв'язків факторів взаємовпливу прихованих тенденцій. Все це розглядається в нерозривній системній єдності.

Усунути вказаний недолік можна завдяки вельми поширеному останнім часом підходу до проблеми аналітичного і статистичного оброблення даних на основі новітньої технології OLAP - Online Analitical Processing (оперативний аналіз даних).

Термін OLAP позначає методи, які дають можливість користувачам баз даних в реальному часі генерувати описові та порівняльні відомості даних і отримувати відповіді на різні аналітичні запити. До визначальних принципів концепції OLAP відносяться:

багатовимірне концептуальне уявлення - бази даних OLAP повинні підтримувати багатовимірне представлення даних, передбачає класичні операції розбиття і обертання концептуального куба даних;

прозорість - користувачам не потрібно знати, що вони використовують базу даних OLAP. Для отримання ними даних і прийняття потрібних рішень вони можуть використовувати добре знайомі їм інструменти. їм також не потрібно що-небудь знати про джерело даних;

доступність - програмні засоби повинні самі вибирати і зв'язуватися з найкращим для формування відповіді на цей запит джерелом даних. Вони повинні забезпечувати автоматичне відображення своєї логічного схеми в різні гетерогенні джерела даних;

узгоджена продуктивність - продуктивність практично не повинен залежати від кількості вимірювань в запиті. Системні моделі повинні бути досить потужними, щоб впоратися з усіма змінами розглянутої моделі;

підтримка архітектури клієнт-сервер - кошти OLAP повинні бути в змозі працювати в клієнт-серверному середовищі, так як передбачається, що сервер багатовимірної бази даних повинен бути доступний з інших програм та інструментів;

рівноправність всіх вимірювань - кожне вимір даних має бути еквівалентно одночасно і за структурою, і за операційним можливостям. Основна структура даних, формули і формати звітів не повинні орієнтуватися на якийсь один вимір даних;

динамічне обробки розріджених матриць - типові багатовимірні моделі можуть з легкістю звертатися до великої безлічі

посилань на осередки, багато з яких не мають даних в якийсь конкретний момент. Ці відсутні значення повинні зберігатися ефективним чином і не виробляти негативного впливу на точність або швидкість вилучення інформації;

підтримка безлічі корістурачів - кошти OLAP повинні підтримувати і заохочувати роботу в групах та обмін ідеями і результатами аналізу між користувачами. Для цього дуже важливо наявність на багато користувачів доступу до даних;

підтримка операцій між різними вимірами. Все багатовимірні операції (наприклад, агрегація) повинні визначатися і бути доступними таким чином, щоб вони виконувалися одноманітно і узгоджено, незалежно від кількості вимірювань;

інтуїтивне управління даними - дані, що надаються користувачеві-аналітику, повинні містити всю інформацію, необхідну для ефективної навігації (формування зрізів, зміни рівня деталізації подання інформації) і виконання відповідних запитів;

гнучке формування звітів - користувач має мати можливість отримувати будь-які необхідні йому дані і формувати їх в будь-якому необхідному йому вигляді;

необмежені вимірювання і рівні агрегації - не повинно обмежень по кількості підтримуваних вимірювань.

Використання систем, заснованих на технології OLAP, дає можливість:

організувати єдиний інформаційний сховище, засноване на даних статистичної та іншої звітності;

забезпечувати простий і ефективний доступ до інформації сховища з розмежуванням прав доступу

забезпечити можливість оперативного аналітичної обробки даних, що зберігаються, проведення статистичного аналізу;

упорядкувати, стандартизувати і автоматизувати створення форм аналітичних звітів з відображенням даних в заданому вигляді.

Головною відмінною рисою і важливою перевагою багатовимірного представлення даних в порівнянні з традиційними інформаційними методиками є можливість спільного аналізу великих груп параметрів у взаємній зв'язку, що важливо при вивченні складних явищ.

Технологія OLAP помітно скорочує час збору і аналізу первинної інформації, необхідної для прийняття рішень в тій чи іншій сфері людської діяльності, а також підвищує наочність і інформативність звітів про процеси та явища, що відбуваються в цих сферах.

OLAP-системи дозволяють накопичувати великі обсяги даних, що збираються з різних джерел. Така інформація зазвичай

Перш ніж створювати таку систему, слід розглянути і з'ясувати три основних питання:

дані накопичувати і як на концептуальному рівні моделювати дані і управляти збереженням їх; як аналізувати дані;

як ефективно завантажити дані з декількох незалежних джерел.

Ці питання можна співвіднести з трьома основними компонентами системи підтримки прийняття рішень: сервер сховища даних, інструментарій оперативного аналітичної обробки даних і інструменти для поповнення сховища даних.

Оскільки організація інформаційних сховищ є предметом інших дисциплін, розглянемо лише питання аналітичної обробки даних. В даний час існує ряд засобів OLAP, які можна використовувати для аналізу інформації. Це такі програмні продукти як MicroStrategi 7 і, WebIntelligence, Cognos Powerplay, AlphaBlox тощо. Зробимо огляд зазначених продуктів, грунтуючись на таких критеріях:

зручність користування - програмний продукт повинен бути досить простим для користувача, який не має спеціальної підготовки;

інтерактивність - програмний засіб має реалізовувати інтерактивні можливості, в тому числі: перегляд документів, динамічне оновлення наявних документів, забезпечує доступ до останньою інформацією, Динамічне виконання запитів до джерел даних, динамічне необмежену "поглиблення в дані";

функціональність - додаток повинен забезпечувати такі ж можливості, як і традиційні клієнт / серверні аналоги;

доступність - інформація повинна бути доступною для будь-якого пристрою і робочого місця, а клієнтська частина - бути невеликою, щоб задовольнити різним рівням пропускної здатності мережі користувача і відповідати стандартизованої технології;

архітектура - це критерій характеризує аспекти програмної реалізації продукту;

незалежність від джерел даних - додаток повинен забезпечувати доступ до документів будь-якого типу і надавати інтерактивний доступ до реляційних і багатовимірних баз даних,

продуктивність і масштабованість - для забезпечення продуктивності і масштабованості додатки необхідно реалізувати можливості універсального доступу до баз даних, можливість кешування сервером даних тощо;

забезпечення безпеки - аспекти адміністрування додатків для надання різних прав доступу різних категорій користувачів;

вартість впровадження і адміністрування - вартість впровадження продукту OLAP в розрахунку на одного користувача має бути істотно нижче, ніж для традиційних продуктів.

MicroStrategi 7 і: -Набір програмних продуктів з широким діапазоном функцій, побудований на уніфікованої серверній архітектурі. Користувача середу реалізовано в Місго- Strategi Web Professional.

Користувачам пропонується ряд статистичних, фінансових і математичних функцій для комплексного OLAP і реляційного аналізу. Для всіх користувачів передбачений доступ як до агрегированной, так і до детальної інформації (на рівні транзакцій). Можна виконувати нові обчислення, фільтрувати дані звіту, обертати і додавати проміжні сумарні значення, оперативно змінювати зміст звіту.

Основні функціональні можливості досягаються за рахунок наступних засобів:

MicroStrategi 7 і OLAP Services - інтерфейс до продуктів "третіх" фірм;

технологія Intelligent Cube - спрощує виконання аналізу і розгортання, надаючи зведену інформацію для швидкого перегляду в інтерактивному режимі;

MicroStrategi Narrowcaster - дає користувачам можливість пересилати показники або платити їх через Web- інтерфейс. Користувачі можуть пересилати електронною поштою свої звіти, планувати пересилання звітів, публікації їх для робочих груп і експортувати в Excel, PDF або HTML-формати.

У цьому продукті забезпечується міжплатформенних підтримка та інтеграція, переносимість в Unix, підтримка серверів додатків "третіх" фірм.

В основі продукту лежить XML-архітектура. Користувачі можуть інтегрувати XML-код, створений в MicroStrategi Web, в свої додатки, або форматувати його потрібним чином.

Тонкий клієнт, реалізований у форматі HTML, усуває проблеми сумісності з браузерами, розгортається через всі засоби мережевого захисту. Вид і функції програми можна налаштувати під конкретні потреби. Можна вбудовувати MicroStrategi Web в інші програми, що працюють в мережі.

Комп'ютери, на яких працює MicroStrategi Web, можна об'єднувати в кластери, забезпечує масштабованість і надійність. Передбачено додавання додаткового обладнання. якщо

трапляється збій при виконанні завдання, воно передається на інший комп'ютер з того самого кластера.

Дані захищені на рівні осередків з використанням фільтрів захисту і списків управління доступом. Безпека Web-трафіку забезпечується технологією шифрування даних на транспортному рівні - SSL (Secire SocxeT Level - рівень захищених сокетів).

WebIntelligence-Web-продукт для створення запитів, звітів і аналізу даних. Надає користувачам мережі (як Intranet, так і Extranet) захищений доступ до даних для подальшого дослідження їх і управління ними. Він робить аналітичні можливості доступними для різних категорій користувачів. Забезпечено широкий набір засобів бізнес-аналізу, в тому числі створення складних звітів, виконання обчислень, фільтрація, деталізація і агрегація.

Weblntelligence забезпечує наступні можливості:

форматування і друк звітів в режимі візуального проектування;

багатоблокові звіти. У складних звітах для передачі вичерпної інформації іноді необхідно розмістити відразу декілька таблиць або діаграм. Для цього в WebIntelligence передбачена можливість додавання декількох блоків і діаграм в один звіт;

можливості деталізації даних в інтерактивному режимі.

Продукт забезпечує ряд функцій:

доступ до даних, які зберігаються як в традиційних реляційних базах, так і на OLAP-сервері;

функції аналізу даних;

можливість спільного використання інформації. WebIntelligence є "тонким" клієнтом, не вимагає установки і супроводу програмного забезпечення додатків або проміжного програмного забезпечення баз даних на клієнтському місці. При установці клієнтської частини передбачена можливість вибору технології. Забезпечується розгортання на платформах Microsoft Windows і Unix.

За допомогою WebIntelligence можна досліджувати і аналізувати різні OLAP-джерел даних, а також спільно використовувати OLAP і реляційні дані.

Продукт налаштовується таким чином, щоб найбільшою мірою відповідати корпоративній структурі будь-якого об'єкта.

WebIntelligence може виконуватися як на одному сервері, так і на декількох NT або Unix-машинах. Сервери можна додавати в систему в міру необхідності, якщо трапляється збій на одному з компонентів, автоматично використовується інший. Виважена балансування навантаження між декількома серверами оптимізує системні ресурси і гарантує короткий час відгуку.

Weblntelligence використовує різні технології захисту інформації. При необхідності компоненти позначаються за допомогою технології цифрових сертифікатів. Для роботи з різними системами мережевого захисту використовується протокол передачі гіпертексту.

Додаток має стандартний Web-інтерфейс. Підтримуються основні можливості (вибірка даних із заданими вимірами і значеннями, "поглиблення" в дані, вкладені перехресні таблиці, обчислення, включення / відключення відображення рядків, стовпців і графіків; фільтри, сортування) для перегляду, дослідження, звітності та публікації OLAP-даних в інтерактивному режимі.

Cognos Powerplay забезпечує виконання таких функцій: застосування HTML / JavaScript, яке надає універсальний доступ для користувача, що працює з Netscape Navigator версії 3.0 і вище або Microsoft Internet Explover;

доступ до OLAP-даних будь-якого користувача об'єкта; створення і публікація ВРМ-звітів (Business Performance Management - управління ефективністю бізнесу) у вигляді PDF- документів для Cognos Upfront порталу, завдяки чому користувачі мають доступ до найважливіших корпоративних даних в середовищі Web;

перетворення даних з PDF-формату на динамічні звіти, їх подальше дослідження і передачі результатів на Upfront;

сервер підтримує роботу з платформами: Windows NT, Windows 2000 і вище, SUN Solaris, HP / UX, IBM AIX.

Завдяки підтримці протоколу SSL PoverPlay гарантує захищеність даних, направляються через Web. Крім того, задаючи класи користувачів, системні адміністратори можуть контролювати доступ їхніх як до локальних кубів, так і в оболонці Web- порталу. Ці класи зберігаються в спеціальному, доступному за протоколом LDAP (Light Directory Access Protocol - полегшений протокол доступу до мережевого каталогу), програмному компоненті, який відповідає за централізоване управліннябезпекою всієї системи, а також за інтеграцію з поточним захистом.

Використання HTML для реалізації клієнтських місць передбачає функціонування сервера PoverPlay в захищеному середовищі. Тим самим забезпечується безпечне розгортання додатків для клієнтів, партнерів і постачальників.

AlphaBlox- сполучна програмне забезпечення, яке надає інструментарій та компонувальні блоки для роботи в Web. Завдяки цьому усуваються складності, пов'язані із захистом мережевих з'єднаньз базами даних, авторизацією і форматуванням даних Аналітична платформа AlphaBlox реалізована на основі стандартизованої І2ЕЕ-сумісної архітектури.

Продукти AlphaBlox спроектовані для проведення аналітичних обчислень всередині і поза об'єктом.

Особливий інтерес представляють Java-компоненти (Віох). З цих компонентів можна створити аналітичний Web-додаток. Одна з трудомістким завдань при створенні Web-продукту OLAP - відображення і форматування даних в браузері. Дуже часто дані потрібно показувати як таблицю або діаграми. При створенні програми з використанням AlphaBlox в нього можна вставити будь-яку кількість таких Java-компонентів і налаштувати їх для вирішення потрібних завдань шляхом завдання певних параметрів аплетів, тим самим контролюючи вигляд і функції компонентів. Цей програмний продукт забезпечує наступні можливості: доступ до інформації - дані витягуються з різних реляційних і багатовимірних баз даних;

запити і аналіз - компоненти виконують прості і складні запити до різних джерел даних, при цьому не потрібно програмування на CQL;

уявлення - можливість представлення даних в різних форматах(У вигляді звітів, таблиць, діаграм).

Java-компоненти мають модульну структуру і можуть використовуватися багаторазово. їх можна застосовувати при реалізації аналітичних можливостей для безлічі бізнес-функцій. Оскільки вони управляються набором параметрів, їх властивості можна змінювати за допомогою текстового редактора. Це забезпечує гнучкість при розробці та модернізації аналітичного рішення. Компоненти можна налаштовувати для задоволення певних бізнес-вимог і повторно використовувати, впроваджуючи додаткові додаткив інших сферах діяльності. Розробники додатків можуть писати додатковий код на JSP, JavaServlets або мовою JavaScript.

AlphaBlox-рішення використовують сервіси, що надаються сервером додатків і середовищем Java Runtime Environment (JRE), будь-які Java-розширення або замовні розширення, розроблені для цієї платформи.

Структура додатків AlphaBlox грунтується на стандартах і допускає інтеграцію з наявними операційними системами, Транзакційні інфраструктурою, з традиційними системами. Забезпечується призначений для користувача доступ до даних з різних джерел і подальший аналіз їх.

AlphaBlox використовує стандартні ресурси і можливості сервера додатків, в тому числі http-обробки / кешування і управління памьятпо / процесами, а також інтеграцію з Web-серверами. Крім того, 12ЕЕ-сумісна архітектура усуває зайве оновлення сторінок і дозволяє виконувати основну логіку на сервері.

AlphaBlox використовує ту ж модель захисту, і сервер додатка, реалізовану за допомогою стандартних функцій платформи J2EE. За рахунок цього усувається необхідність в створенні незалежної моделі механізму захисту.

Простота розгортання - одне з головних переваг Web- додатки. Це в повній мірі стосується додатків AlphaBlox. Однак для них потрібні певні версії браузерів і Java платформи, тоді як тонкий HTML-клієнт працює в більшості браузерів.

Оперативний аналіз даних на базі технології OLAP дозволяє аналітикам, менеджерам і виконавцям вникнути в дані, використовуючи фіксований, загальний, інтерактивний доступ до широкого розмаїття можливих форматів даних, які були отримані з необроблених даних, щоб відобразити реальний стан об'єкта у вигляді, зрозумілому користувачам. Функціональність OLAP характеризується динамічним багатовимірним аналізом зведених даних об'єкта, необхідних для підтримки кінцевого користувача аналітичними діями, включаючи обчисленням і моделюванням, які можуть застосовуватися до даних шляхом аналізу тренду над послідовними інтервалами часу, виконання зрізу ггідмножіни даних для перегляду на екрані, зміни рівня деталізації подання інформації в більш глибоких рівнів узагальнення тощо.

OLAP-засоби зосереджені на забезпеченні багатовимірного аналізу інформації. Для досягнення цього використовуються багатовимірні моделі зберігання і представлення даних. Дані організовані в кубах (або гіперкубах), визначених в багатовимірному просторі, складається з окремих вимірювань. Кожен вимір включає безліч рівнів деталізації. Типові операції OLAP включають операції зміни рівня деталізації подання інформації (просування вгору і вниз по ієрархії вимірів), вибору певних частин куба і переорієнтації багатовимірного представлення даних на екрані (отримання зведеної таблиці).

Для баз даних OLAP розроблений еталонний тест АРВ-1. Цей тест моделює реальну ситуацію для серверного програмного забезпечення OLAP. Стандарт визначає набір вимірювань, які визначають логічну структуру. Логічна структура бази даних складається з шести вимірювачів: час, сценарій, міра, продукт, замовник і канал. Еталонний тест не передбачає конкретної фізичної моделі: вхідні дані забезпечуються в форматі файлів ASCII. Операції тесту ретельно моделюють стандартні операції OLAP над великими обсягами даних, які послідовно завантажуються з внутрішніх або зовнішніх джерел. Дані операції включають агрегацію інформації, деталізацію даних по ієрархії, обчислення нових даних, заснованих на бізнес-моделях тощо.

Розглянуто можливості технології OLAP є основою організації і багатовимірного аналізу моніторингової інформації. Розглянемо етапи цього процесу.

Перш ніж завантажити інформацію в багатовимірну базу даних моніторингу (ББД), її слід витягти з різних джерел, очистити, перетворити і консолідувати (рис. 1.3). Надалі ціЬ інформацію треба періодично оновлювати.

Мал. 1.3.

Витяг даних - це процес вибірки даних з операційних баз даних і інших джерел. Аналіз наявних джерел інформації показує, що більша частина їх представлена ​​у вигляді табличних даних, отриманих або в електронному або в друкованому вигляді. Сучасні засоби сканування та розпізнавання зображень дозволяють практично повністю автоматизувати цей етап підготовки даних.

Перш ніж заносити інформацію в базу даних, обов'язково потрібно виконати її очищення. Зазвичай очищення передбачає заповнення відсутніх значень, коригування помилок і інших допущених при введенні даних помилок, визначення стандартних скорочень і форматів, заміну синонімів стандартними ідентифікаторами тощо. Дані, які визначаються як помилкові і не можуть бути виправлені, відкидаються.

Після очищення даних необхідно перетворити всю отриману інформацію в формат, який буде відповідати вимогам використовуваного програмного продукту(OLAP-сервера). Процедура перетворення набуває особливої ​​важливості, коли необхідно об'єднати дані, що надійшли з кількох різних джерел. Цей процес називається консолідацією.

Етап завантаження інформації в ББД полягає в створенні необхідної структури даних і заповненні її інформацією, отриманою на попередніх етапах підготовки даних.

Витяг інформації з ББД дозволяє здійснювати Microsoft SQL Server Analysis Services, яка є одночасно постачальником як багатовимірних даних (multidimensional data provider), так і табличних даних (tabular data provider). Таким чином, виконання запиту повертає або багатовимірний набір даних, або звичайну таблицю залежності від використовуваної мови запитів. Analysis Services підтримує як SQL, так і розширення MDX (multidimensional expressions).

SQL-запити можуть передаватися в Analysis Services, використовуючи такі засоби доступу до даних:

Microsoft OLE DB і OLE DB для OLAP;

Microsoft ActiveX Data Objects (ADO) і ActiveX Data Objects Multidimensional (ADO MD).

OLE DB для OLAP розширює можливості OLE DB, включаючи об'єктами, специфічними для багатовимірних даних. ADO MD розширює ADO аналогічним чином.

Microsoft SQL Server Analysis Services дозволяє виконувати залити з MDX-розширеннями, які забезпечують багатий і потужний синтаксис запитів для роботи з багатовимірними даними, збереженими OLAP-сервером в кубах. Analysis Services підтримує функції MDX для визначення обчислюваних полів, побудови локальних кубів даних та виконання запитів, використовуючи компонент зведених таблиць (Pilot Table Services).

Можливе створення призначених для користувача функцій, які працюють з багатовимірними даними. Взаємодія з ними (передачі аргументів і повернення результату) відбувається з використанням синтаксису MDX.

Analysis Services забезпечує більше 100 вбудованих MDX- функцій для визначення складних обчислюваних полів. Ці функції поділяються на такі категорії: робота з масивами; робота з вимірами; робота з ієрархіями; робота з рівнями ієрархій; логічні функції; робота з об'єктами; числові функції; робота з наборами; робота з рядками; робота з кортежами.

Можливе створення локальних кубів, призначених для перегляду на комп'ютерах, де встановлено OLAP-сервера. Створення локальних кубів вимагає використання MDX-синтаксису і проходить через компонент зведених таблиць (Pilot Table Services), який є OLE DB-клієнтом OLAP-сервера. Цей компонент також робить автономну роботу з локальними кубами при відсутності з'єднання з OLAP-сервером, надаючи інтерфейс джерела даних OLE DB. Для створення локальних кубів використовують оператори CREATE CUBE і INSERT INTO.

Мова запитів MDX, яка є розширенням SQL, дозволяє здійснювати запити кубів з даними і повертати результат у вигляді багатовимірних наборів даних.

Так само, як і в звичайному SQL, творець MDX-запиту повинен спочатку визначити структуру набору даних, повертається. У більшості випадків творець MDX-запиту уявляє собі повернутий набір даних у вигляді багатовимірних структур. На відміну від звичайного SQL-запиту, який оперує з таблицями для отримання двомірного набору записів, MDX-запит має справу з кубами для формування багатовимірного результативного набору даних. Слід зазначити, що MDX-запит може повертати і двовимірні набори даних, які є окремим випадком багатовимірного набору даних.

Візуалізація багатовимірних наборів даних може бути досить важкою. Один з методів візуалізації полягає в обмеженні подачі плоскою, двомірної таблиці, використовуючи безліч вкладених вимірювань вздовж однієї осі. Така вкладеність призведе до появи підзаголовків.

Pilot Table Services, яка входить до складу Microsoft SQL Server Analysis Services, є OLAP-сервером, призначеним для отримання доступу до даних OLAP. Цей компонент функціонує як клієнт Analysis Services.

Функції Pilot Table Services полягають в аналізі даних, побудові кубів і в оптимальному управлінні пам'яттю. Компонент надає інтерфейс до багатовимірних даних. Можливо збереження даних в локальному кубі на комп'ютері клієнта і подальший аналіз без підключення до OLAP-сервера. Pilot Table Services потрібен для виконання наступних завдань:

встановлення з'єднання з OLAP-сервером як клієнтським компонентом;

надання програмам інтерфейсу OLE DB з OLAP- розширеннями;

функціонування в якості табличного джерела даних, підтримує підмножина SQL;

функціонування в якості багатовимірного джерела даних, підтримує MDX-розширення;

створення локального куба даних;

функціонування в якості мобільного настільного OLAP- клієнта.

Компонент зведених таблиць може працювати тільки з одним локальним розділом куба. Також в ньому немає вбудованої системи управління рівнями надання інформації. Тому продуктивність Pilot Table Services прямо пропорційна обсягу даних, до яких він адресується.

Слід зазначити, що OLAP-інтерфейс простий і вимагає знань не більше, ніж електронна таблиця. OLAP дозволяє використовувати різні форми звітів, інтерфейс інтерактивного аналізу даних і можливість генерації друкованих форм. Однак у порівнянні з традиційними способами програмування і генерації призначених для користувача звітів OLAP не тільки в сотні разів зменшує витрати на програмування, але і змінює сам принцип роботи користувача зі звітом.

Відмінність OLAP як інструменту генерації звітів полягає в можливості автоматичного й інтерактивного виконання таких операцій з даними:

рекурсивного угруповання даних; обчислення проміжних підсумків по підгрупах; обчислення остаточних підсумків.

Команди на виконання цих операцій даються самим користувачем. Як елементи управління виступають розділи використовуваної таблиці. Коли користувач змінює форму звіту (наприклад, переміщує стовпчики), система виконує розрахунки проміжних підсумків і відображає новий звіт.

Додатково користувач може змінити сортування і виконати фільтрацію по довільним поєднаннями даних, побачити дані в процентному вираженні, змінити масштаб і виконати інші необхідні перетворення звіту (ці можливості не є неодмінним атрибутом технології OLAP, а залежать від конкретної реалізації інструменту).

В результаті користувач може самостійно, інтуїтивно зрозумілим йому способом з наявного набору даних сформувати всі можливі для цього набору види звітів. Це допомагає подолати одвічний обмеження інформаційних систем, яке полягає в тому, що потужність інтерфейсів завжди нижче потужність бази даних.

Технологія OLAP дозволяє реалізувати практично всі можливі види табличного зображення вмісту бази даних. Якщо продукт досить гнучкий, то завданням програміста є опис семантичного шару (словника), після чого кваліфікований користувач може самостійно створювати нові куби, оперуючи термінами відомої йому предметної сфери. Решта користувачів можуть формувати звіти по кожному кубу.

Таким чином, технологія OLAP служить як розробникам, так і користувачам у всіх тих випадках, коли потрібно бачити інформацію у формі табличних звітів, в яких дані згруповані, а для груп обчислено підсумкові показники.

Досвід показує, що недостатньо надати користувачам великий куб, що складається з безлічі вимірів і фактів. Це обумовлено наступними причинами.

По-перше, в кожен момент користувачеві потрібен цілком певний звіт.

По-друге, деякі алгоритми обчислення підсумків описуються складними формулами, а користувач може не володіти достатньою кваліфікацією для їх визначення.

По-третє, OLAP-звіт може мати специфічну, задану автором звіту методику розрахунку підсумків, розташування вимірювань і початкових умов сортування.

По-четверте, у багатьох випадках зрозуміти дані простіше, якщо дивитися не на таблицю з цифрами, а на діаграму. Для настройки OLAP-діаграми іноді потрібно мати непогану просторову уяву, оскільки куб з безліччю вимірів потрібно відобразити як набір фігур або ліній в тривимірному малюнку. Кількість властивостей сучасних графічних компонентів обчислюється тисячами, тому попереднє налаштування діаграми або графіка для OLAP-звіту може зайняти багато часу.

По-п'яте, як і для будь-якого іншого звіту, для OLAP-звіту важливо його ефектне оформлення, що включає налаштування заголовків і підписів, квітів і шрифтів.

Таким чином, для комфортної роботи користувача OLAP-звіт повинен містити певний набір прикладних метаданих, що описують алгоритми агрегації, попередні умови фільтрації і сортування, заголовки і коментарі, правила візуального оформлення.

При візуалізація інформації багатовимірного куба значущим фактором є впорядкування вимірювань згідно їх схожістю. Основна ідея полягає в тому, що вимірювання, які характеризують схожі параметри, розташовуються поруч. Для визначення подібних вимірів застосовують різні методи кластеризації, зокрема, можна використовувати евристичні алгоритми.

Описана інформаційно-аналітична технологія не є єдино можливою. Але всі вони розвитком Business intelligence (ВІ), призначенням якої є збір, систематизація, аналіз та подання інформації. Вибір конкретної інформаційно-аналітичної технології залишається за користувачем з урахуванням особливостей об'єкта предметної сфери.

В Україні вже створюються відповідні інформаційно-аналітичні структури, які розробляють власні технології обробки інформації, але вони діють поки особняком, дрібно, без координації і взаємодії

. Інформаційно-аналітичні технології в сфері управління - це сукупність методів збору і обробки інформації про дослідницькі процеси, специфічні процеси діагностики, аналізу та синтезу, а також оцінки наслідків прийняття різних варіантів рішень

Існують різні варіанти класифікації інформаційно-аналітичних технологій, але найбільш доцільною, на думку вчених і фахівців, є типологізація по чотирьох базових ознаками, наведена в табл 21

. Таблиця 21 типологізації. ІНФОРМАЦІЙНО-АНАЛІТИЧНИХ. ТЕХНОЛОГІЙ

розрізняють моніторингові, ініційовані і кумулятивні аналітичні дослідження. Моніторингові дослідження призначені для довгострокового аналітичного спостереження за розвитком певної ситуації з метою забезпечення можливості квітня ріорного синтезу управлінських рішень, які мають профілактичне або попереджуючий характер. Технологія особливо добре може бути розроблена для моніторингових досліджень, так як в них досить чітко регла аментуються окремі етапи обробки інформацііції.

. ініційовані аналітичні дослідження проводяться за раніше незапланованими дорученнями керівництва або в результаті виявлення при проведенні моніторингових досліджень нових проблемних ситуацій. Ініційовані ис ня будемо розглядати як окремий вид досліджень, акцентує увагу на початкових стадіях нових ись.

. кумулятивні дослідження характеризуються високими вимогами до оперативності їх проведення (включаючи початок і завершення), застосуванням спеціалізованих методів обробки експертної інформації

Для всіх видів дослідження передбачається проведення багатостороннього аналізу ситуації, що вивчається з урахуванням історії її розвитку, результатів досліджень подібних ситуацій, а також використанням широкого спектру адекватних теоретичних підходів і евристичних проблем. Зупинимося детальніше на кожному з перерахованих бачивши.

. Моніторингові аналітичні дослідження як правило регламентуються етапами обробки інформації, обраної тематики і фіксованим набором джерел. Головне тут - сувора орієнтація на конкретну постановку задачі, групу аналітиків і експертів, з забезпечують цілеспрямовану змістовну обробку інформаціії.

. моніторинг - безперервне спостереження за станом навколишнього середовища і управління ним шляхом своєчасного інформування про можливості настання несприятливих, критичних або неприпустимих ситуацій

Моніторингові дослідження передбачають отримання статистичних або змістовних показників, що характеризують об'єкт спостереження і які можна виміряти. Система спостережень будується на фіксації дискретних них кількісних характеристик об'єкта спостереження, накопичення цих відомостей і на можливості шляхом інтелектуальної інтерпретації отриманих відомостей зробити висновки про якісний стан об'єкта. Мо ніторінг грунтується на спостереженні типових рис у поведінці об'єктів спостереження і на своєчасній фіксації на їх фоні різних відхилень від норммі.

. Інформаційно-аналітичний моніторинг - вид інформаційної діяльності, пов'язаний з процесами аналізу, синтезу інформації із застосуванням методів моделювання, експертного оцінювання, діагностики і прогнозування, що реалізуються в режимах постійного збору інформації з традиційних і нетрадиційних джерел з метою регулярного інформаційного забезпеченнякористувачі.

Беручи до уваги, що в аналітичних службах одночасно ведеться кілька моніторингових досліджень, а джерел інформації може бути досить багато, технологію організації її збору та аналітичної обробки м можна уявити поетапної.

На перших етапах в аналітичній службі здійснюють прийом, реєстрацію і первинну обробку інформації, що надійшла. Ці етапи, як правило, поєднуються з традиційним процесом прийому кореспонденції з помо огою засобів автоматизації діловодства. Вхідні документи реєструються, в базу даних вводяться їх основні характеристики, включаючи назву і анотацію. Важливо, щоб анотація була змістовно орієнтована на т ематіку досліджень, що проводяться аналітичної служебнимбою.

Далі необхідно забезпечити прив'язку повних текстів документів, що надійшли в електронному вигляді, в реєстраційні дані і автоматично завантажити їх в інформаційно-пошукову систему, що дозволяє в подальшому оперативно знайти необхідні фрагменти текстів документів не тільки за реєстраційними даними, але і за змістом. Для цього повинні використовуватися програмно-технічні засоби, що забезпечують в ісокоякісній пошук інформації, представленої в текстовому, графічному або в табличному віді.

Якщо документи надходять на паперовому носії, то доцільно перетворити їх в електронний вигляд за допомогою сканера. В цьому випадку, розпізнавання текстів не обов'язково - інформація може зберігатися і і в факсимільному вигляді (при наявності запам'ятовуючих), оскільки процедура розпізнавання досить трудомістка, а необхідність подальшого використання всього вихідного матеріалу в тексто ном форматі не завжди очевидна зараз на світовому ринку заслуженим увагою користуються системи підтримки факсимільного діловодства, які передбачають застосування досить нетрадиційних для української р інкові програмно-технічних средствеів.

На наступному етапі аналітичних досліджень додатково виявляється тематична або проблемна (з прив'язкою до конкретного завдання) орієнтація інформації, що надійшла проводиться її розподіл по відповідним рубриках. Як правило, цю роботу виконують вручну висококваліфіковані фахівці, які є досвідченими і навіть беруть участь у дослідженнях. Вона пов'язана із змістовним осмисленням надійшла і визначенням необхідності її використання в тому чи іншому дослідженні. Головне тут - забезпечити максимальну повноту добірки інформації по кожній розв'язуваної в аналітичній службі проблеми. Жорстка тематична фільтрація інформації неприпустима. Кожен кінцевий користувач, аналітик повинен мати можливість оперативно отримувати відкриті інформаційні матеріали, навіть якщо на перших етапах вони були відне сіни до суміжних для його інтересів тематичних і проблемних. Рубраубрік.

Пошук відповіді на питання про якісну автоматизацію розподілу (рубрикація) вхідний текстової інформаціїза тематичними і проблемних рубриках триває вже не один десяток років, проте щодо відповідності але україномовних повнотекстових документів, на нашу думку, рішення ще не знайдено. Є теоретичні і практичні дослідження, присвячені забезпеченню високоякісного пошуку повнотекстових документів. В цілому ж аналітичні матеріали в процесі моніторингу готують експерти-аналітики. Однак і тут значне місце, особливо на заключному етапі, займають діалогові технологічні засоби редагування і візуального графічним ного представлення інформації. Ці технологічні компоненти використовуються в будь-якому аналітичному дослідженні і заслуговують окремого розгляду)