Управление тематическими данными в больших и сверхбольших хранилищах: механизмы, модели, программное обеспечение (состояние, задачи, решения)

Автор: Васенин Валерий Александрович

Журнал: Проблемы информатики @problem-info

Рубрика: Информатика безопасных систем

Статья в выпуске: 1 (5), 2010 года.

Бесплатный доступ

Рассматривается проблема создания современных автоматизированных систем управления тематической информацией, разнородные по структуре источники которой размещены на территориально распределен- ной сетевой среде и представляют собой большие, корпоративного масштаба, или сверхбольшие (Интернет) хранилища данных. Предложены основанные на опытных данных новые подходы к управлению информа- цией включая механизмы, математические модели, алгоритмы и аппаратно-программные средства их реа- лизации.

Пространства данных, полнотекстовый поиск, графовые модели, полуструктурированные данные, виртуальная интеграция, качество услуг, онтология, разграничение доступа

Короткий адрес: https://sciup.org/14320018

IDR: 14320018

Список литературы Управление тематическими данными в больших и сверхбольших хранилищах: механизмы, модели, программное обеспечение (состояние, задачи, решения)

  • АНДРЕЕВ О. О., ВАСЕНИН В. А. И ДР. Критически важные объекты и кибертерроризм. Ч. 1. Системный подход к организации противодействия/Под ред. В. А. Васенина. М.: МЦНМО, 2008.
  • АНДРЕЕВ О. О., ВАСЕНИН В. А. И ДР. Критически важные объекты и кибертерроризм. Ч. 2. Аспекты программной реализации средств противодействия/Под ред. В. А. Васенина. М.: МЦНМО, 2008.
  • FRANCLIN M., HALEVY A., MAIER D. From databases to dafepases: a new abstraction for information monedement//SIGMOD Record. 2005. V. 34, N 4. [Electron resource]. http://www.citforum.ru//databe/articles/from_ab_to ds/.
  • КЛЕЙНРОК Л. Вычислительные системы с очередями. М.: Мир, 1979.
  • МИЗИН И. А. Сети коммутации пакетов/И. А. Мизин, В. А. Богатырев, А. П. Кулешов. М.: Радио и связь, 1986.
  • БЛЕК Ю. Сети ЭВМ: протоколы, стандарты, интерфейсы. М.: Мир, 1990.
  • ВАСЕНИН В. А. Российские академические сети Интернет (состояние проблемы решения)/Под ред. В. А. Садовничего. М.: РЭФИА, 1997.
  • САДОВНИЧИЙ В. А. Российский Интернет в цифрах и фактах/В. А. Садовничий, В. А. Васенин, А. А. Мокроусов. М.: Изд-во Моск. гос. ун-та, 1999.
  • ВАСЕНИН В. А. К созданию концепции интегрированной информационной системы распределенных информационных ресурсов Московского государственного университета им. М. В. Ломоносова/В. А. Васенин, С. А. Афонин, А. А. Коршунов. М.: Изд-во Моск. гос. ун-та, 2001.
  • ВАСЕНИН В. А., АФОНИН С. А., КОЗИЦЫН А. С., ШУНДЕЕВ А. С. Поиск в сверхбольших хранилищах данных и высокопроизводительные системы с массовым параллелизмом//Тр. Междунар. конф. "Программные системы: теория и приложения". Переславль-Залеcский, 13-14 мая 2004 г. М.: Физматлит, 2004. Т. 1. С. 211-228.
  • ВАСЕНИН В. А., АФОНИН С. А., КОЗИЦЫН А. С. Автоматизированная система тематического анализа информации//Информационные технологии. 2009. № 4 (Приложение).
  • МАЖУКИН А. В. Поисковые системы сети Internet. М.: Изд-во Моск. гуманитарного ун-та, 2007.
  • АФОНИН С. А., КОЗИЦЫН А. С., ТИТОВ А. С. Автоматизированная система для тематического анализа информации//Критически важные объекты и кибертерроризм. Ч. 2. Аспекты программной реализации средств противодействия/Под ред. В. А. Васенина. М.: МЦНМО, 2008. C. 497-577.
  • VASENIN V. A., AFONIN S. A. To the problem of building an integrated system of university distributed information resources//Proc. of the Finnish data processing week conf., Petrozavodsk, 2001. Petrozavodsk: Petrozavodsk State University, 2001. P. 152-177.
  • PAPAKONSTANTINOU Y., GARCIA-MOLINA H., WIDOM J. Object exchange across heterogeneous information sources//Proc. of the Intern. conf. on data engng. IEEE Computer Society, Washington (USA), 1995. P. 251-260.
  • AFONIN S., KHAZOVA E. Membership and finiteness problems for rational sets of regular languages//Intern. J. Foundations Computer Sci., 2006. N 17(3). P. 493-506.
  • АФОНИН С. А. Алгоритмы эффективного вычисления конъюнктивных регулярных путевых запросов//Вычисл. технологии. 2007. № 12(2). С. 24-33.
  • Afonin S. The view selection problem for regular path queries//Proc. of the 9th Intern. symp. on theoretical informatics LATIN 2008, Buzios, 2008. Lecture Notes in Computer Science. 2008. V. 4957. P. 121-132.
  • ХАЗОВА Е. Е. Алгоритмы построения однословной перезаписи регулярных путевых запросов. Дис.... канд. физ.-мат. наук. М., 2009.
  • BUNEMAN P., DAVIDSON S., HILLEBRAND G., SUCIU D. A query language and optimization techniques for unstructured data//ACM SIGMOD Records, 25(2), ACM, New York, 1996. P. 505-516.
  • ABITEBOUL S., VIANU V. Regular path queries with constraints//Proc. of the Intern. symph. on principles of database systems (PODS 97), 1997. P. 122-133.
  • FERNANDEZ M. F., SUCIU D. Optimizing regular path expressions using graph schemas//Proc. of the 14th Intern. conf. on data engng. Orlando (USA). Washington: IEEE Computer Society Press, 1998. P. 14-23.
  • АФОНИН А. С. Алгоритмы эффективного вычисления конъюнктивных регулярных путевых запросов в базах полуструктурированных данных. Дис.... канд. физ.-мат наук. М., 2007.
  • ГОРЕЛОВ С. С., ВАСЕНИН В. А. Усечение пространства поиска в полуструктурированных базах данных при помощи иерархии схем документов//Программирование. 2005. № 6. С. 41-55.
  • ГОРЕЛОВ С. С. Оптимальные иерархии схем для поиска по конъюнктивным регулярным путевым запросам в полуструктурированных базах данных//Программирование. 2006. № 4. С. 38-56.
  • ГОРЕЛОВ С. С. Эффективные модели поиска в базах полуструктурированных данных на основе иерархии схем документов. Дис.... канд. физ.-мат наук. М., 2009.
  • HIRST G. Ontology and the Lexicon: Handbook on ontologies in information systems. Ser. Handbooks in Information Systems. Ed. by S. Staab, R. Studer. S. l.: Springer, 2003. P. 209-230.
  • CALVANESE D., EITER T., ORTIZ M. Regular path queries in expressive description logics with nominals//Proc. of the 21st Intern. joint conf. on artificial intelligence (IJCAI 2009), Pasadena (USA). San Francisco: Morgan Kaufmann Publ. Inc., 2009. P. 714-720.
  • CALVANESE D., GIUSEPPE D.G., LENZERINI M., ROSATI R. View-based query answering over description logic ontologies//Proc. of the 11th Intern. conf. on the principles of knowledge representation and reasoning (KR 2008), Sydney (Australia). S. l.: AAAI Press, 2008. P. 242-251.
  • КУЗНЕЦОВ С. Д., ПЛЕШАЧКОВ П. О. Управление транзакциями в РСУБД с поддержкой XML//Программирование. 2006. № 5. С. 3-20.
  • COOX S., SIMANOVSKY A. Regular expressions in XML Schema Evolution//Proc. of the ISTA'2003. Kharkiv (Ukraine), Lecture Notes in Informatics, GI-Edition, 2003. P. 1-7.
  • КУЗНЕЦОВ С. Д., АЗНАУРЯН Н. А., НОВАК Л. Г., ГРИНЕВ М. Н. SLS: нумерующая схема для больших XML-документов//Программирование. 2006. № 1. С. 12-25.
  • KUZNETSOV S., FOMICHEV A., GRINEV M. Sedna: A Native XML DBMS//Proc. of the 32nd Conf. on current trends in theory and practice of computer science. Lecture notes in computer science. Merin (Czech Republic), 2006. Lecture notes in computer science. V. 3831. Berlin: S. n., 2006. P. 272-281. Информатика безопасных систем 83
  • LUKICHEV M., BARASHEV D. XML Query algera for cost-based optimization//Proc. of the SYRCoDIS, Moscow, 2007. CEUR, Aachen, 2007. P. 62-69.
  • АФОНИН С. А., ГОРЕЛОВ С. С., ХАЗОВА Е. Е. Слабоструктурированные данные и поиск на основе онтологий//Материалы Всерос. конф. с междунар. участием "Знания-онтологии-теории" (ЗОНТ-09), Новосибирск, 22-24 окт. 2009 г. Новосибирск: Ин-т математики им. С. Л. Соболева СО РАН, 2009. С. 119-123.
  • АНТИПИН К. В., ФОМИЧЕВ А. В., ГРИНЕВ М. Н. И ДР. Оперативная интеграция данных на основе XML: системная архитектура BizQuery//Тр. Ин-та системного программирования. 2004. №. 5. С. 157-174.
  • FERNANDEZ M., KADYSKA Y., SUCIU D. SilkRoute: A framework for publishing relational data in XML//ACM Transactions on Database Systems. 2002. N 27(4). P. 438-493.
  • CHAWATHE S., GARCIA-MOLINA H., HAMMER J., ET AL. The TSIMMIS project: integration of heterogeneous information sources//Proc. of the 10th Meeting of the information processing society of Japan, Tokyo (Japan), Oct., 1994. Tokyo: Information Proc. Soc. of Japan, 1994. P. 7-18.
  • КАЛИНИЧЕНКО Л. А. Методы и средства интеграции неоднородных баз данных/Под ред. Л. Н. Королева. М.: Наука. Глав. ред. физ.-мат. лит., 1983.
  • ШУНДЕЕВ А. С., ПЕРШИН И. С. Интеграция данных: от баз данных к информационным ресурсам//Материалы Всерос. конф. с междунар. участием "Знания -онтологии -теории" (ЗОНТ-09), Новосибирск, 20-22 окт. 2009. Новосибирск: Ин-т математики им. С. Л. Соболева СО РАН, 2009. С. 41-45.
  • МАКУНИН И. В. К вопросу о построении системы виртуальной интеграции данных для эффективного управления разнородными данными//Информационные технологии моделирования и управления. 2008. Вып. 1(44). С. 78-86.
  • JORDI ROS, WEI K. TSAI. An optimal distributed protocol for fast convergence to maxmin rate allocation//Department of Electrical and Computer Enging., Univ. of California, Irvine (USA). June, 2000. [Electron resource]. http://citeseerx.ist.psu.edu/viewdoc/summary?doi=10.1.1.37.1444.
  • HARRISON D., YONG XIA, SHIVKUMAR KALYANARAMAN, KISHORE RAMACHADRAN. An edge-based framework for flow control//ESCE and CS Departments, Rensselaer Polytechnic Institute, 2002. [Electron resource]. http://www.ecse.rpi.edu/Homepages/shivkuma/research/papers/edgebased. pdf.
  • SALIL S. KANHERE, HARISH SETHU. On the latency bound of pre-order deficit round robin//Proc. of the IEEE 27th Annual conf. on local computer, networks. Tampa (USA), Nov., 2002. P. 508-517.
  • SALIL S. KANHERE, HARISH SETHU. Prioritized elastic round robin: an efficient and low-latency packet scheduler with improved fairness//Techn. Rep. DU-CS-03-03. Department of Computer Sci., Drexel Univ., Philadelphia (USA). 2003. PA 19104.
  • ВАСЕНИН В. А., СИМОНОВА Г. И. Математические модели управления трафиков в Интернет: новые подходы на основе TCP/AQM//Автоматика и телемеханика. 2005. № 8. С. 948-960.
  • DROGSETH D. EMA: network lifecycle management. A solution approach to managing networks. [Electron resource]. http://www.harbrook.net/consulting/solutions/pdf/Downloads/EMA_HP-NLM_WP.pdf.
  • up.time IT systems management software. [Electron resource]. http://www.uptimesoftware.com/overview.php.
  • FREY J., KNAPP L., SZULEWSKI R. Network management. [Electron resource]. http://www.redbooks.ibm.com/redpapers/pdfs/redp3676.pdf.
  • http://en.wikipedia.org/wiki/Comparison_of_network_monitoring_systemsT.
  • BARTH W. Nagios, 2nd edition system and network monitoring. No Starch Press, Oct. 2008. P. 720.
  • TARUS BALOG. Enterprise-Wide Network Management with OpenNMS. [Electron resource]. http://www.oreillynet.com/pub/a/sysadmin/2005/09/08/opennms.html.
  • ВАСЕНИН В. А., КОРНЕЕВ В. В., ЛАНДИНА М. Ю., РОГАНОВ В. А. Система функционального активного мониторинга FLAME. Программирование. 2003. № 3. С. 57-72.
  • АСТАПОВ И. С., ДЗЫБА М. С., КОРШУНОВ А. А. Система мониторинга работоспособности информационно-телекоммуникационной среды//Тез. Междунар. молодежной науч.-техн. конф. "Высокопроизводительные вычислительные системы" (ВПВС-2008), Таганрог (Россия), 1-5 сент. 2008 г. С. 5-7.
  • JOSEM GOMEZ IGNACIO, JOSЙ M. GУMEZ, IGNACIO GIRБLDEZ, MANUEL DE BUENAGA. Text categorization for internet content filtering//Inteligencia Artificial, Revista Iberoamericana de Inteligencia Artificial. 2003. № 20. P. 34-52.
  • ЗАБОРОВСКИЙ В. С., СИЛИНЕНКО А. В. Логико-динамические аспекты моделирования процессов контентной фильтрации прикладных протоколов//Материалы III Междунар. науч. конф. по проблемам безопасности и противодействия терроризму, Москва (Россия), 25-27 окт. 2007 г. М.: МЦНМО, 2008. С. 272-277.
  • ВАСЕНИН В. А., ШАПЧЕНКО К. А., АНДРЕЕВ О. О. Математические модели и механизмы логического разграничения доступа в операционной системе Linux: текущее состояние и перспективы развития // Материалы II Междунар. науч. конф. по проблемам безопасности и противодействия терроризму // V Общерос науч. конф. "Математика и безопасность информационных технологий" (МаБИТ-06), Москва (Россия), 25−26 окт. 2006 г. М.: МЦНМО, 2007. С. 159−171.
  • ШАПЧЕНКО К. А. К вопросу о средствах ОС Linux для управления доступом при использовании ролевых политик безопасности // Материалы Междунар. науч. конф. по проблемам безопасности и противодействия терроризму // IV Общерос. науч. конф. "Математика и безопасность информационных технологий". Москва, 2-3 ноября 2005 г. М.: МЦНМО, 2006. С. 257-281.
  • AFONIN S., KHAZOVA E. Membership and finiteness problems for rational sets of regular languages//Proc. of the Developments in language theory/Ed. by C. De Felice, A. Restivo. Lecture Notes in Computer Science. S. l. V. 3572. 2005. P. 88-99.
  • ГРИНЕВА М. П. Методы поддержки активного поведения систем управления базами XML-данных. Дис.... канд. физ.-мат. наук. М., 2007.
Еще
Статья научная