Hızlı çoklu iş parçacıklı parsyncfp ile dosya kopyalama

Giriş

Günümüzün bilgi işlem dünyasında, çoklu görev temel bir gereklilik haline gelmiştir. Mevcut kaynakları verimli bir şekilde kullanmak ve uygulamalarımızın performansını artırmak için genellikle çoklu iş parçacığına güveniriz. Bu adım adım kılavuzda, parsyncfp kütüphanesini kullanarak hızlı çoklu iş parçacığı oluşturma sürecinde size yol göstereceğiz.

Multithreading nedir?

Programlamada, multithreading aynı anda birden fazla iş yapmanıza olanak tanır. Uygulamalarınızı bu şekilde daha hızlı ve daha duyarlı hale getirebilirsiniz.

Şimdi multithreading'i ve nasıl çalıştığını tanımlayalım.

Multithreading, bir programda birden fazla iş parçacığının aynı anda çalışmasıdır. İş parçacıkları bağımsız olarak çalışır ve kendi yürütme bağlamlarına sahiptir. Çoklu görev, çok sayıda görevi paralel olarak çalıştırarak uygulamalarınızın performansını ve yanıt verebilirliğini artırır.

Parsyncfp nedir?

Parsyncfp, dosyaları boyuta veya sayıya göre, rsync 'e yığın bazında beslenebilen yığın dosyalar halinde toplar.

Parsyncfp, parsync'e boyut veya sayıya göre dosya atlama ve aktarımı duraklatma ve devam ettirme gibi birkaç ekstra özellik ekler. Ayrıca bir dizin ağacını yansıtma veya yerel bir sabit sürücüye yedekleme gibi daha gelişmiş seçenekler için destek ekler. Bu şekilde pfp, kaynak dizinin özyinelemeli inişinin tamamı tamamlanmadan önce dosyaları aktarabilir. Çok büyük dizin ağaçları ile uğraşırken, bu özellik çok yararlı olabilir.

Ek olarak, pfp aktarımlara kaldıkları yerden devam etme olanağı sunar, bu da özellikle bir sistem çökmesi durumunda yararlıdır. pfp ayrıca aktarım sürecini duraklatma ve devam ettirme olanağı sunarak kullanıcının aktarım sürecini kendi tercihlerine göre özelleştirmesine olanak tanır.

~/.parsyncfp dosyaları

Varsayılan olarak, önbellek dizini fpart günlüğünü, tüm PID dosyalarını ve yığın dosyalarını içeren fpcache dizinini içerir. Fpart yığınlama çok hızlı olduğu için, parsyncfp artık önbelleğin yeniden kullanımını sağlamaz. Günlük dosyaları tarih damgalıdır ve üzerine yazılmaz. Önbellek için alternatif konumlar belirtmenin yanı sıra, birden fazla parsyncfp'nin aynı anda çalışabilmesi için birden fazla örnek için konum belirtebilirsiniz. Ancak, başlangıçta çalışan birbirlerinin fpart'larını tespit edecek ve bu durumu sorgulayacaklardır. Çoklu ana bilgisayar sürümünde GÖNDER ana bilgisayarlarında çalışan rsync'ler konusunda uyarılacaksınız.

Hızlı çoklu iş parçacıklı Parsyncfp ile dosya kopyalama & Adım Adım Kılavuz

Adım 1. Dosya Kaynağına Kaydet - pfp'nin yalnızca KAYNAK üzerine yüklenmesi gerekir

wget <a href="https://raw.githubusercontent.com/hjmangalam/parsyncfp/master/parsyncfp">https://raw.githubusercontent.com/hjmangalam/parsyncfp/master/parsyncfp</a> 
chmod +x parsyncfp

Adım 2. Anahtarı uzak makineye kopyalayın ( önce bir ssh-keygen yapmak gerekebilir)

ssh-keygen
ssh-copy-id 1.1.1.1<strong>
</strong>

Adım 3. Sonra yüklemeniz gerekir

apt-get install fpart

Adım 4. Paketlerde yer almıyorsa, https://github.com/martymac/fp...running adresinde bulabilirsiniz.

./parsyncfp --NP=10 --altcache=/dir/local/tmp --startdir='/dir/local/' www 192.168.67.1:/var/dir/

Bazı Anahtar Terimler

  • altcache - ara dosyaların depolanacağı yer. Bu seçenek gerekli değildir.
  • NP - iş parçacığı sayısını belirtir.
  • www - bu /dir/local/ 'den /var/dir/ 'e kopyalanacak klasördür - bir boşlukla ayrılmış birkaç klasör belirtebilirsiniz.

Kaynak: https://github.com/hjmangalam/parsyncfp