Kompresja danych a ekonomiczna efektywność systemu przechowywania danych

• Autorzy: Jakub Swacha

Warianty tytułu

Data Compression and Economic Efficiency of Data Storage System

• Języki publikacji: PL

Abstrakty

Ekonomiczna efektywność systemu przechowywania danych stanowi stosunek wartości uzyskanych korzyści do kosztów budowy i utrzymania takiego systemu. Wartość użytkowa informacji maleje wraz z wydłużaniem się czasu potrzebnego na dostęp do niej, z kolei koszt urządzeń służących do przechowywania danych wzrasta wraz z szybkością dostępu do danych, którą zapewniają. Podstawowym celem zarządzania przechowywaniem danych jest przyporządkowanie danym, z uwzględnieniem ich użytkowej wartości, najbardziej właściwej i efektywnej ekonomicznie infrastruktury informatycznej służącej do ich przechowywania. Istotnym czynnikiem zmieniają- cym relację kosztów i korzyści przechowywania danych jest kompresja danych. Jej zaimplementowanie w systemie z jednej strony obniża koszty (poprzez zmniejszenie pojemności pamięci masowej potrzebnej do przechowania danych), z drugiej obniża także wartość korzyści (przede wszystkim, obniżając szybkość dostępu do danych). W niniejszym artykule opisano wyniki badań przeprowadzonych z wykorzysta- niem szeregu najpopularniejszych obecnie algorytmów kompresji bezstratnej na systemie testowym zbudowanym z komponentów powszechnie używanych w niewielkich systemach przechowywania danych. (abstrakt oryginalny)

EN

An important factor affecting the relation of costs to benefits of data storage is data compression. Implementing it reduces the storage costs (by decreasing the capacity required to store the data), but on the other hand it increases the usage costs (because of additional compression/decompression procedures). This paper covers the results of experiments involving a selection of the most popular lossless compression algorithms and a test system based on widely used low-cost components, typical for small data storage systems. (original abstract)

Słowa kluczowe

PL

Kompresja danych; Zarządzanie bazami danych; Bazy danych

EN

Data compression; Databases management; Databases

• Czasopismo: Studia i Materiały Polskiego Stowarzyszenia Zarządzania Wiedzą
• Rocznik: 2008
• Tom: 17
• Strony: 213-223

Twórcy

autor

Jakub Swacha

• Uniwersytet Szczeciski

Bibliografia

• 1. Average hourly earnings of production and nonsupervisory workers on private nonfarm payrolls by industry sector and selected industry detail, seasonally adjusted, U.S. Bureau of Labor Statistics, http://www.bls.gov/news.release/empsit.t17.htm, dane za 03.2008. [dost p: 2008-05-29].
• 2. Bergmans W.: Maximum Compression. The Test Files, http://www.maximumcompression.com/data/files, 2007 [dost p: 2008-05-29].
• 3. Burrows M., Wheeler D. J.: A block-sorting data compression algorithm. SRC Research Report 124, Digital Equipment Corporation, Palo Alto, CA, USA, 1994.
• 4. Cennik sklepów internetowych, http://computers.pricegrabber.com/hard- drives/p/11/st=pop_category, [dost p: 2008-05-29].
• 5. Cypryjański J.: Metodyczne podstawy ekonomicznej oceny inwestycji informatycznych przedsiębiorstw, Uniwersytet Szczeciński, Szczecin 2007.
• 6. Deutsch P.: DEFLATE Compressed Data Format Specification version 1.3. RFC1951, Network Working Group 1996. http://www.ietf.org/rfc/rfc1951.txt.
• 7. Gailly J-L., Adler M.: Zip 2.32 (program do kompresji), 2006. http://www.info-zip.org/.
• 8. Historical Notes about the Cost of Hard Drive Storage Space (Smith I., ed.). http://www.littletechshoppe.com/ns1625/winchest.html, January 21, 2008 [dost p: 2008- 05-29].
• 9. Larose D.T.: Odkrywanie wiedzy z danych. Wprowadzenie do eksploracji danych, Wydawnictwo Naukowe PWN, Warszawa 2006.
• 10. Mahoney M.: Adaptive Weighing of Context Models for Lossless Data Compression. Technical Report CS-2005-16, Florida Institute of Technology, Melbourne, FL, USA.
• 11. Mahoney M.: PAQ 8o10t (program do kompresji), 2008. http://www.cs.fit.edu/~mmahoney/compression/paq8o10t.zip, [dost p: 2008-08-03].
• 12. Martelock Ch.: CCM 1.30c (program do kompresji), 2008. http://christian.martelock.googlepages.com/dl_ccm130c.zip.
• 13. Pavlov I.: 7-Zip 4.57 (program do kompresji), 2007. http://www.7-Zip.org.
• 14. Roshal A.: WinRar 3.62 (program do kompresji), 2007. http://www.rarlab.com/download.htm.
• 15. Schindler M.: A fast block-sorting algorithm for lossless data compression. In: Proceedings of the Data Compression Conference, IEEE Computer Society, Los Alamitos, CA, USA, 1997, 469.
• 16. Shkarin D.: PPM: One Step to Practicality. In: Proceedings of the Data Compression Conference, IEEE Computer Society, Los Alamitos, CA, USA, 2002, 202-211.
• 17. Shkarin D.: PPMd var. J (program do kompresji), 2006. http://www.compression.ru/ds.
• 18. Short J. E.: Information Lifecycle Management: An Analysis of End User Perspectives. Working Paper 06-01, University of California, San Diego, CA, USA, January 2006.
• 19. Swacha J.: CoTe: A Software Tool for Compression Benchmarking. In: Proceedings Data Compression Conference. IEEE Computer Society, Los Alamitos, CA, USA, 2008, 547.
• 20. Swacha J.: Design of low-cost system for compressed storage benchmarking. Polish Journal of Environmental Studies, 16, 4A, 2007, 328-330.
• 21. Swacha J.: Ekonomiczne miary efektywności kompresji danych. Informatyka Ekonomiczna, nr 9. Prace Naukowe Akademii Ekonomicznej we Wrocławiu nr 1144. Wydawnictwo Akademii Ekonomicznej we Wrocławiu, Wrocław 2006, 2 52-268.
• 22. Swacha J.: Popularne standardy kompresji danych. Pro Dialog, nr 9, 1999, 23-32.
• 23. Swacha J.: Usprawnienie systemów informatycznych poprzez użycie kompresji danych. W: Informatyka w globalnym wiecie (Kisielnicki J., red.). Wydawnictwo Polsko- Japońskiej Wyższej Szkoły Technik Komputerowych, Warszawa 2006, 3 64-370.
• 24. Swacha J.: Zarządzanie przechowywaniem danych: zarys praktycznej metodyki oceny efektywności. W: Zarządzanie wiedz i technologiami informatycznymi (Orłowski C., Kowalczuk Z., Szczerbiński E., red.), Pomorskie Wydawnictwo Naukowo-Techniczne, Gdańsk 2008, 139-146.
• 25. Szyjewski Z., Swacha J.: A New Method of Predictive-substitutional Data Compression. In: Internet Technologies, Applications and Societa l Impact. Kluwer Academic Publishers, Boston, 2002, 123-134.
• 26. The Expanding Digital Universe: A Forecast of Worldwide Information Growth Through 2010 (Gantz J. F., ed.), IDC, Framingham, MA, USA, March 2007. http://www.emc.com/about/destination/digital_universe.
• 27. Toigo J. W.: Zarządzanie przechowywaniem danych w sieci, Helion, Gliwice 2004.
• 28. Worldwide Disk Storage Market Experiences Strong Fourth Quarter Growth as 2007 Revenues Surge Higher, According to IDC (Nisbet B., Yezhkova N., eds.), IDC, Framingham, MA, USA, March 6, 2008.
• ---