NILFS2 - /বাড়ির জন্য একটি বুলেটপ্রুফ ফাইল সিস্টেম

আপনি জানেন, যদি ঝামেলা হতে পারে তবে তা অবশ্যই ঘটবে। সম্ভবত প্রত্যেকেরই এমন ঘটনা ঘটেছে যখন একটি সাম্প্রতিক গুরুত্বপূর্ণ ফাইল ঘটনাক্রমে মুছে ফেলা হয়েছে, বা পাঠ্য সম্পাদকের মধ্যে ভুলবশত পাঠ্য নির্বাচন করা হয়েছে এবং ধ্বংস করা হয়েছে।

আপনি যদি হোস্টার বা ওয়েবসাইটের মালিক হন, তাহলে আপনি সম্ভবত ব্যবহারকারীর অ্যাকাউন্ট বা আপনার ওয়েবসাইট হ্যাকিংয়ের সম্মুখীন হয়েছেন। এই ধরনের ক্ষেত্রে, ঘটনাক্রম পুনরুদ্ধার করা, প্রবেশের পদ্ধতি এবং আক্রমণকারীর দ্বারা ব্যবহৃত দুর্বলতা খুঁজে বের করা গুরুত্বপূর্ণ।

NILFS2 ফাইল সিস্টেম এই ধরনের সমস্যা সমাধানের জন্য নিখুঁত।

এটি 2.6.30 সংস্করণ থেকে Linux কার্নেলে উপস্থিত রয়েছে।

এই ফাইল সিস্টেমের বিশেষত্ব হল যে এটি একটি সংস্করণ নিয়ন্ত্রণ সিস্টেমের মতো: আপনি সবসময় সিস্টেমের অবস্থাকে ফিরিয়ে আনতে পারেন এবং কিছু সময় আগে এটি কেমন ছিল তা দেখতে পারেন।

এই কার্যকারিতা প্রদান করার জন্য, আপনাকে ক্রোন স্ক্রিপ্ট কনফিগার করতে, স্ন্যাপশট নেওয়া ইত্যাদির প্রয়োজন নেই। NILFS2 ফাইল সিস্টেম নিজেই এই সব করে। এটি কখনই পুরানো ডেটা ওভাররাইট করে না এবং যদি পর্যাপ্ত ফাঁকা জায়গা থাকে তবে সর্বদা ডিস্কের নতুন এলাকায় লেখা হয়। কপি-অন-রাইট নীতির সাথে সম্পূর্ণ সঙ্গতিপূর্ণ।

প্রকৃতপক্ষে, একটি ফাইলের যেকোনো পরিবর্তন স্বয়ংক্রিয়ভাবে ফাইল সিস্টেমের একটি নতুন স্ন্যাপশট তৈরি করে, তাই আপনি এই FSটিকে টাইম মেশিন হিসেবে ব্যবহার করতে পারেন এবং ফাইলের অবস্থা রিওয়াইন্ড করতে পারেন।

История

NILFS2 এর গভীরতায় বিকশিত হয়েছিল নিপ্পন টেলিগ্রাফ এবং টেলিফোন কর্পোরেশন, আসলে, রাষ্ট্রীয় মালিকানাধীন (এটির একটি নিয়ন্ত্রণকারী অংশ রয়েছে) এবং জাপানের বৃহত্তম টেলিযোগাযোগ সংস্থা। আরো সুনির্দিষ্টভাবে, নেতৃত্বাধীন সাইবারস্পেস ল্যাবরেটরিগুলিতে রিউসুকে কোনিশি.

এটি ঠিক কিসের জন্য তৈরি করা হয়েছিল তা অজানা, তবে, এটি অনুমান করা যেতে পারে যে এই ধরনের এফএস, তার "টাইম মেশিন" কার্যকারিতা সহ, ডেটা সংরক্ষণের জন্য আদর্শ যা গোয়েন্দা পরিষেবাগুলি খনন করতে চাইতে পারে যাতে পুরো ছবি পুনরায় চালানোর জন্য এসএমএস, ইমেইল ইত্যাদি...

NILFS2 সম্ভাব্য অভ্যন্তরীণ নিরাপত্তা পরিষেবাগুলির জন্য একটি অত্যন্ত মূল্যবান হাতিয়ার, কারণ এটি আপনাকে মেল ডাটাবেসের সমস্ত মুছে ফেলা চিঠিগুলি পুনরুদ্ধার করতে দেয়, কর্মচারীদের জ্যামগুলি প্রকাশ করে যারা পরবর্তীতে তাদের ফাইলগুলি মুছে বা পরিবর্তন করে তাদের ছদ্মবেশ করার চেষ্টা করতে পারে৷

কিভাবে আপনি আপনার সমগ্র চিঠিপত্র ইতিহাস ট্র্যাক করতে পারেন?লিনাক্স সার্ভারে (এবং এটিই যেখানে অভ্যন্তরীণ নিরাপত্তার জন্য NILFS2 ইনস্টল করা উচিত), ইমেল সংরক্ষণের ফাইল পদ্ধতিটি প্রায়শই ইমেল বার্তাগুলি সংরক্ষণ করতে ব্যবহৃত হয়। তথাকথিত বিন্যাস মেইলদির. লাগাতে যথেষ্ট কুরিয়ার মেইল ​​সার্ভার এবং Maildir-এ মেল স্টোরেজ কনফিগার করুন। অন্য ফরম্যাট MBOX একটি বড় টেক্সট ফাইল যা সহজেই পৃথক বার্তাগুলিতে পার্স করা যায়।

যদি মেল সার্ভার একটি ডাটাবেস ব্যবহার করে, তাহলে NILFS2 ডাটাবেসের পরিবর্তনের সঠিক সময় এবং এই মুহূর্তের যেকোনো একটিতে ডাটাবেস পুনরুদ্ধার করার ক্ষমতা পুনরুদ্ধার করা সম্ভব করবে। এবং তারপরে সেই সময়ে এটিতে কী ছিল তা দেখতে আপনাকে ডাটাবেস সরঞ্জামগুলি ব্যবহার করতে হবে ...

যাইহোক, কিছু ভুল হয়েছে. হয় জাপান সরকার প্রত্যেককে পর্যবেক্ষণ করার বিষয়ে তার মন পরিবর্তন করেছে (একটি লা ইয়ারোভায়া নীতি), অথবা প্রথাগত HDD-তে NILFS2-এর কর্মক্ষমতা সমানের নিচে পরিণত হয়েছে, এবং NILFS2 GPL লাইসেন্সের অধীনে মুক্তি পেয়েছে এবং খুব দ্রুত লিনাক্স কার্নেলে প্রবেশ করেছে, যেহেতু উচ্চ যোগ্য জাপানী লেখা কোড সম্পর্কে কোন বিশেষ অভিযোগ ছিল না, লিনাক্স কার্নেলের বিকাশকারীদের এটি ছিল না।

NILFS2 কেমন?

ব্যবহারের দৃষ্টিকোণ থেকে: একটি সংস্করণ নিয়ন্ত্রণ সিস্টেমে SVN. প্রতিটি এফএস চেকপয়েন্ট এমন একটি প্রতিশ্রুতি যা ব্যবহারকারীর অজান্তেই স্বয়ংক্রিয়ভাবে তৈরি হয় যখনই কোনো পরিবর্তন হয়: তা মুছে ফেলা, ফাইলের বিষয়বস্তু পরিবর্তন করা বা অ্যাক্সেসের অধিকার পরিবর্তন করা। প্রতিটি কমিটের একটি সংখ্যা থাকে যা রৈখিকভাবে বৃদ্ধি পায়।

একটি প্রোগ্রামারের দৃষ্টিকোণ থেকে: একটি বৃত্তাকার বাফার। ফাইল সিস্টেম পরিবর্তনগুলি জমা করে এবং সেগুলিকে আনুমানিক 8 এমবি (2000 * 4096, যেখানে 2000 হল ব্লকের উপাদানগুলির সংখ্যা এবং 4096 হল মেমরি পৃষ্ঠার আকার) এর সমান একটি খণ্ডে লিখে। পুরো ডিস্কটি এই ধরনের খণ্ডে বিভক্ত। রেকর্ডিং ক্রমানুসারে এগিয়ে. ফাঁকা স্থান ফুরিয়ে গেলে, প্রাচীনতম স্ন্যাপশটগুলি মুছে ফেলা হয় এবং খণ্ডগুলি ওভাররাইট করা হয়।

মৌলিক NILFS2 গুডিজ

• সংস্করণ!!!
• ব্যর্থতার পরে একটি ফাইল সিস্টেম পুনরুদ্ধার করার পদ্ধতিটি সহজ: লোড করার সময়, সঠিক চেকসাম থাকা শেষ অংশটি অনুসন্ধান করা হয় এবং এটিতে একটি সুপারব্লক ইনস্টল করা হয়। এটি একটি প্রায় তাত্ক্ষণিক অপারেশন।
• এই কারণে যে রেকর্ডিং সবসময় রৈখিকভাবে এগিয়ে যায়, তারপর:
  • ধীর র্যান্ডম লেখার সাথে একটি SSD তে চললে ভাল ফলাফল দেখাতে পারে।
  • NILFS2 SSD রিসোর্স সংরক্ষণ করে, যেহেতু প্রায় কোন লেখার গুণন ফ্যাক্টর নেই।
    আরও স্পষ্টভাবে, এটি 2 এর বেশি নয়।আসল বিষয়টি হল যে যখন চক্রাকারে পুরো ডিস্কটি পুনর্লিখন করা হয়, তখন NILFS2 অপরিবর্তনীয় ডেটা নতুন টুকরোগুলিতে (খণ্ডে) স্থানান্তর করবে।

    যদি আমাদের ডিস্কে 10% অপরিবর্তিত ডেটা থাকে, তাহলে আমরা 10টি সম্পূর্ণ পুনর্লিখনের সাথে 1% রাইট বৃদ্ধি পাব। ঠিক আছে, ডিস্কের 50টি সম্পূর্ণ পুনর্লিখনের জন্য ডিভাইসের 50% পূর্ণতায় 1% বৃদ্ধি।

    সর্বাধিক লিখিত লাভ হল 2। এটি খুবই কম যে বিবেচনা করে সবকিছু ক্রমানুসারে লেখা হয়। সাধারণভাবে, লেখার অ্যানিমেশন একটি 4096-বাইট সেক্টর সহ একটি প্রচলিত খণ্ডিত ফাইল সিস্টেমের চেয়ে কম হবে। (চিন্তা দ্বারা অনুপ্রাণিত মন্তব্য).

• দূরবর্তী NILFS2 FS-তে প্রতিলিপি বাস্তবায়নের সম্ভাব্য সহজতা

/বাড়ির জন্য NILFS2

ইউনিক্স-এর মতো অপারেটিং সিস্টেমে, একটি নিয়ম হিসাবে, একটি /হোম ফোল্ডার থাকে যেখানে ব্যবহারকারীর ডেটা সংরক্ষণ করা হয়। বিভিন্ন প্রোগ্রাম এই ফোল্ডারে তাদের ব্যবহারকারী-নির্দিষ্ট সেটিংস সংরক্ষণ করে।

এবং কে, ব্যবহারকারী না হলে, প্রায়শই ভুল করে? তাই, তারা যেমন বলে, ঈশ্বর নিজেই NILFS2 ব্যবহার করার আদেশ দিয়েছেন /বাড়িতে৷

অধিকন্তু, SSD-এর ব্যাপক ব্যবহারে, এখন আর CoW ফাইল সিস্টেম ব্যবহার করার সময় গুরুতর ড্রডাউন নিয়ে চিন্তা করতে হবে না।

হ্যাঁ, আমরা ZFS এবং BTRFS-এ যতবার চাই ততবার FS স্ন্যাপশট তৈরি করতে পারি, কিন্তু স্ন্যাপশটের মধ্যে হারিয়ে যাওয়া ফাইল পরিবর্তন হওয়ার ঝুঁকি সবসময় থাকে। এবং ছবিগুলি এখনও পরিচালনা করা দরকার: পুরানোগুলি মুছে ফেলা দরকার। NILFS2-এ, এই সব স্বয়ংক্রিয়ভাবে ঘটে, আক্ষরিক অর্থে প্রতি কয়েক সেকেন্ডে।

আমি lvcreate ব্যবহার করে একটি লজিক্যাল ভলিউম তৈরি করেছি (nvme ভলিউম গ্রুপে, থিন পুল থিন)। আমি এটিকে lvm ভলিউমে তৈরি করার সুপারিশ করছি, কারণ এটি সহজেই পরে প্রসারিত করা যেতে পারে। আমি শালীন সংস্করণের গভীরতার জন্য NILFS50-এর সাথে 2% বিনামূল্যে ডিস্ক স্পেস রাখার পরামর্শ দিই।

lvcreate -V10G -T nvme/thin -n home

এবং এটি NILFS2 এ ফর্ম্যাট করেছে:

mkfs.nilfs2 -L nvme_home /dev/nvme/home

mkfs.nilfs2 (nilfs-utils 2.1.5)
Start writing file system initial data to the device
      Blocksize:4096  Device:/dev/nvme/home1  Device Size:10737418240
File system initialization succeeded !!

এর পরে, আপনাকে বর্তমান /হোম থেকে সমস্ত ডেটা অনুলিপি করতে হবে।

আমি রুট ব্যবহারকারী হিসাবে আমার অ্যাকাউন্টে লগ ইন করার আগে কম্পিউটার বুট করার সাথে সাথেই এটি করেছি। যদি আমি আমার ব্যবহারকারী হিসাবে লগ ইন করি, কিছু প্রোগ্রাম আমার ব্যবহারকারীর /home/user ফোল্ডারে সকেট এবং ফাইল খুলবে, যা পরিষ্কার কপিকে কঠিন করে তুলবে। আপনি জানেন, রুট ব্যবহারকারীর জন্য হোম ফোল্ডার সাধারণত /root পাথে অবস্থিত, তাই /home পার্টিশনে কোনো ফাইল খুলবে না।

mkdir /mnt/newhome
mount -t nilfs2 /dev/nvme/home /mnt/newhome
cp -a /home/. /mnt/newhome

শেষ লাইনের জন্য, দেখুন প্রবন্ধ.

এরপর আমরা /etc/fstab সম্পাদনা করি, যেখানে /home-এর জন্য ফাইল সিস্টেম মাউন্ট করা হয়

/dev/disk/by-label/nvme_home /home nilfs2    noatime 0 0

বিকল্প noatime কর্মক্ষমতা উন্নত করার জন্য প্রয়োজন যাতে প্রতিটি ফাইল অ্যাক্সেসের সাথে সময় পরিবর্তন না হয়। পরবর্তী আমরা রিবুট.

NILFS2-এ ছবির প্রকারভেদ।

মুছে ফেলার অনাক্রম্যতা ছাড়াই একটি নিয়মিত স্ন্যাপশটকে চেকপয়েন্ট বা পুনরুদ্ধার পয়েন্ট বলা হয়।
স্বয়ংক্রিয়-মোছা থেকে সুরক্ষিত একটি স্ন্যাপশটকে একটি স্ন্যাপশট বলা হয়, তারপরে কেবল একটি স্ন্যাপশট।

চেকপয়েন্ট দেখা lscp কমান্ড ব্যবহার করে সম্পন্ন করা হয়

স্ন্যাপশট দেখুন lscp -s

আমরা যে কোনো সময় ব্যবহার করে নিজেরাই স্ন্যাপশট এবং চেকপয়েন্ট তৈরি করতে পারি:

mkcp [-s] устройство

আমরা ডেটা পুনরুদ্ধার করি।

NILFS আমাদেরকে মূল FS শাখার সাথে কাজ করার সমান্তরালে যতগুলি পুরানো স্ন্যাপশট চাই ততগুলি মাউন্ট করার অনুমতি দেয়। কিন্তু শুধুমাত্র রিড মোডে।

সবকিছু এভাবে সাজানো। NILFS2 যে নিয়মিত চেকপয়েন্টগুলি তৈরি করে তা যে কোনও সময় স্বয়ংক্রিয়ভাবে মুছে ফেলা যেতে পারে (যখন ডিস্কের স্থান ফুরিয়ে যায় বা nilfs_cleanerd নিয়ম অনুসারে), তাই ইনস্টলেশনের আগে আমাদের অবশ্যই চেকপয়েন্টটিকে একটি স্ন্যাপশটে রূপান্তর করতে হবে বা, রাশিয়ান ভাষায়, স্ন্যাপশটটি ক্যাপচার করতে হবে।

chcp ss номер_чекпоинта

এর পরে, আমরা স্ন্যাপশটটি মাউন্ট করতে পারি, উদাহরণস্বরূপ, এইরকম:

mount -t nilfs2 -r -o cp=номер_чекпоинта /dev/nvme/home /mnt/nilfs/номер_чекпоинта

এর পরে আমরা স্ন্যাপশট থেকে /home এ পুনরুদ্ধার করা ফাইলগুলি কপি করি।
এবং পরবর্তীকালে আমরা স্ন্যাপশট থেকে অ-মোছা পতাকাটি সরিয়ে ফেলি যাতে ভবিষ্যতে স্বয়ংক্রিয় আবর্জনা সংগ্রহকারী পুরানো ডেটা মুছে ফেলতে পারে:

chcp cp номер_чекпоинта

NILFS2 এর জন্য ইউটিলিটি

কিন্তু এই সমস্যা। হ্যাঁ, অবশ্যই, আমরা একটি ফাইল সিস্টেম তৈরি করতে পারি, অনলাইনে এর আকার পরিবর্তন করতে পারি, চ্যালেঞ্জপয়েন্টগুলির তালিকা দেখতে পারি, তৈরি করতে এবং মুছতে পারি। nilfs2-utils প্যাকেজ একটি ন্যূনতম ভদ্রলোকের সেট প্রদান করে।

যেহেতু এনটিটি তার তহবিল কমিয়েছে, তাই কোনো দ্রুত নিম্ন-স্তরের ইউটিলিটি নেই যা আপনাকে ফাইল পরিবর্তনের ইতিহাস প্রদর্শন করতে বা স্ন্যাপশটের মধ্যে পার্থক্য করতে দেয়।

আমার n2u ইউটিলিটি

এই শূন্যতা পূরণ করতেই আমি লিখেছিলাম আপনার n2u ইউটিলিটি, যা একটি নির্দিষ্ট ফাইল/ডিরেক্টরিতে পরিবর্তনের ইতিহাস প্রদর্শন করতে পারে:

n2u log filename

আউটপুট এই মত কিছু:

          CHECKPOINT        DATE     TIME     TYPE          SIZE  MODE
             1787552  2019-11-24 22:08:00    first          7079    cp
             1792659  2019-11-25 23:09:05  changed          7081    cp

এটি নির্বাচিত বাস্তবায়ন পদ্ধতির জন্য বেশ দ্রুত কাজ করে: এটি দ্বিখণ্ডন পদ্ধতি ব্যবহার করে ফাইলের মধ্যে পার্থক্য খোঁজে, দ্রুত মাউন্ট করা এবং বিভিন্ন স্ন্যাপশটে ফাইল/ডিরেক্টরি তুলনা করে।

আপনি কী ব্যবহার করে চেকপয়েন্টের একটি পরিসীমা সেট করতে পারেন -cp CP1:CP2 বা -cp {YEAR-MM-DD}:{YEAR-MM-DD}.

আপনি একটি নির্দিষ্ট ফাইল বা ডিরেক্টরির জন্য চেকপয়েন্টগুলির মধ্যে পার্থক্য দেখতে পারেন:

n2u diff -r cp1:cp2 filename

আপনি পরিবর্তনের সম্পূর্ণ কালানুক্রম প্রদর্শন করতে পারেন: একটি নির্দিষ্ট ফাইল/ডিরেক্টরির চেকপয়েন্টগুলির মধ্যে সমস্ত পার্থক্য:

n2u blame [-r cp1:cp2] filename

এই কমান্ডে তারিখের ব্যবধানও সমর্থিত।

ডেভেলপারদের একটি কান্নাকাটি

হাবরে অনেক বিশেষজ্ঞ আছেন। অনুগ্রহ করে NILFS2 শেষ করুন। রিপ্লিকেশন করুন, রিভিশন, রিফ্লিঙ্ক এবং অন্যান্য গুডির মধ্যে নিম্ন-স্তরের দ্রুত পার্থক্য করুন!

রেফারেন্স

অফিসিয়াল NILFS ওয়েবসাইট.

সংগ্রহস্থল:
NILFS2.
NILFS2 ইউটিলিটি এবং মডিউল.

নিউজলেটার:
NILFS2 বিকাশকারীদের জন্য ই-মেইল নিউজলেটার. linux-nilfs সাবস্ক্রিপশনের জন্য আইডি।
নিউজলেটার সংরক্ষণাগার.

nilfs_cleanerd সেটআপ গাইড.
বেঞ্চমার্কিং EXT4, Btrfs, XFS এবং NILFS2 পারফরম্যান্স টেস্ট.

ব্লাগোডারনোস্টি:

• NILFS2 বিকাশকারী: Ryusuke Konishi, Koji Sato, Naruhiko Kamimura, Seiji Kihara, Yoshiji Amagai, Hisashi Hifumi এবং Satoshi Moriai. অন্যান্য প্রধান অবদানকারীরা হলেন: আন্দ্রেয়াস রোহনার, ড্যান ম্যাকগি, ডেভিড আরেন্ড্ট, ডেভিড স্মিড, ডেক্সেন ডেভরিস, দিমিত্রি স্মিরনভ, এরিক স্যান্ডিন, জিরো সেকিবা, মাত্তেও ফ্রিগো, হিতোশি মিতাকে, তাকাশি ইওয়াই, ব্যাচেস্লাভ দুবেকো।
• অ্যাম্বলিন এন্টারটেইনমেন্ট এবং ইউনিভার্সাল পিকচার্সের কাছে একটি চমৎকার সিরিজের চলচ্চিত্রের জন্য। "ভবিষ্যতে ফিরে". পোস্টের প্রথম ছবি "ব্যাক টু দ্য ফিউচার 3" মুভি থেকে নেওয়া।
• কোম্পানী RUVDS সমর্থন এবং Habré-এ আপনার ব্লগে প্রকাশ করার সুযোগের জন্য।

দ্রষ্টব্য একটি ব্যক্তিগত বার্তায় আপনি যে কোনো ত্রুটি লক্ষ্য করুন দয়া করে পাঠান. আমি এই জন্য আমার কর্ম বৃদ্ধি.

আপনি থেকে একটি ভার্চুয়াল মেশিন অর্ডার করে NILFS2 নিয়ে পরীক্ষা করতে পারেন৷ RUVDS নীচের কুপন সহ। সমস্ত নতুন ক্লায়েন্টদের জন্য 3 দিনের একটি বিনামূল্যে ট্রায়াল সময় আছে।

উত্স: www.habr.com