Pcompress

Pcompress adalah sebuah utilitas open source baris perintah kompresi paralel, dekompresi dan deduplication, dengan memisahkan input data ke dalam potongan.
Pcompress fitur Delta kompresi, pilihan blok tetap, kompresi metadata, dukungan untuk beberapa algoritma, termasuk LZMA, LZMA-multithreaded, PPMD, Bzip2 atau LZ4, integritas data yang kuat, filter, mengubah Matrix, enkripsi, otentikasi pesan, metadata, tumpang tindih pengolahan, kustom pengalokasi, modus yang solid, padding, dan banyak lagi

Apa yang baru dalam rilis ini:.

• Ini adalah rilis utama menampilkan pengarsipan dukungan berdasarkan Libarchive. Teknik canggih yang digunakan untuk mendeteksi jenis file dan menggunakan algoritma yang tepat untuk kompres lebih baik. Filter seperti PackJPG untuk JPEG dan Dispack untuk executables digunakan untuk meningkatkan compressability. Beberapa heuristik membantu mendeteksi data yang sudah dikompresi dan menghindari langkah kompresi mahal. Entri arsip juga diurutkan cluster konten terkait dan mencapai kompresi yang lebih baik. Batas Data split untuk beberapa thread paralel ditentukan dari jenis file dan perubahan hash bergulir. Mmap dan Zero-Copy teknik yang digunakan secara internal bila memungkinkan untuk meningkatkan kinerja. Beberapa optimasi juga telah dilakukan untuk mengurangi penggunaan memori. Penggunaan telah disederhanakan dengan sebagian besar fitur otomatis dikonfigurasi berdasarkan tingkat kompresi.
• Dengan perubahan ini Pcompress dapat bertindak sebagai Pengarsip penuh baku, seperti tar atau cpio dan memberikan rasio kompresi yang lebih baik dan kinerja yang lebih baik daripada mode kompresi file tunggal. Pcompress membandingkan sangat menguntungkan dengan utilitas pengarsipan terkemuka lainnya.

Apa yang baru di versi 2.4:

• Versi ini perbaikan beberapa masalah, termasuk beberapa crash kasus sudut dan beberapa buffer overflows.
• Data Deduplication sekarang dapat dilakukan dengan menggunakan blok sekecil 2KB, memberikan rasio dedupe jauh lebih tinggi daripada hampir semua perangkat lunak deduplication lainnya.
• kinerja deduplication berbasis Kesamaan telah diperbaiki.
• akurasi deteksi Memori bebas juga telah ditingkatkan.

Apa yang baru di versi 2.3:

• Versi ini perbaikan beberapa bug dan menyediakan beberapa perbaikan dalam efisiensi
dan kinerja.
• The Kesamaan efektivitas deteksi untuk kesamaan berbasis dekat tepat deduplication telah diperbaiki.
• Pada persyaratan memori waktu yang sama untuk indeks telah berkurang.
• Akurasi data partisi antara benang telah diperbaiki.
• Chunking dan kinerja pengindeksan telah diperbaiki dan perhitungan KMV Sketch sekarang lebih akurat.
• Rilis ini bergerak semua fungsi inti menjadi shared library dalam persiapan untuk sebuah antarmuka API yang akan diperkenalkan dalam rilis mendatang.

Apa yang baru di versi 2.2:.

• Hal ini terutama rilis Bugfix
• Ini perbaikan beberapa crash dengan input tidak valid dan membangun masalah pada Debian6 dan prosesor non-SSE4 tua.
• Pencocokan Kesamaan Min-tumpukan berbasis Delta Encoding telah diperbaiki dan dibuat lebih cepat dan lebih akurat.
• Akurasi scalable Segmented global Deduplication telah lebih ditingkatkan menjadi lebih dari 95%.
• testcases Lebih telah ditambahkan.

Apa yang baru di versi 2.1:.

• Versi ini menambahkan perbaikan bug dan peningkatan kinerja banyak
• Akurasi dalam menemukan duplikat Global Dedupe telah diperbaiki.
• SHA256 sekarang algoritma standar blok hash untuk dedupe, dengan kemampuan untuk mengubah secara terpisah dari hash verifikasi potongan.
• Secara keseluruhan, banyak peningkatan kinerja memiliki telah dibuat, dengan paralelisme yang lebih baik, lebih SSE vektorisasi, dan cepat menyortir dan meningkatkan penanganan daftar hash segmen berkas, sehingga lebih kecil I / O dan akses random sedikit.
• Bugs dalam menghitung di memori ukuran indeks telah diperbaiki untuk menghindari meluap RAM gratis dan swapping ke disk.