CEPH ਨਾਲ ਅਨੁਭਵ ਕਰੋ

ਜਦੋਂ ਇੱਕ ਡਿਸਕ 'ਤੇ ਫਿੱਟ ਹੋਣ ਤੋਂ ਵੱਧ ਡਾਟਾ ਹੁੰਦਾ ਹੈ, ਤਾਂ ਇਹ RAID ਬਾਰੇ ਸੋਚਣ ਦਾ ਸਮਾਂ ਹੈ। ਇੱਕ ਬੱਚੇ ਦੇ ਰੂਪ ਵਿੱਚ, ਮੈਂ ਅਕਸਰ ਆਪਣੇ ਬਜ਼ੁਰਗਾਂ ਤੋਂ ਸੁਣਦਾ ਸੀ: "ਇੱਕ ਦਿਨ RAID ਬੀਤੇ ਦੀ ਗੱਲ ਹੋ ਜਾਵੇਗੀ, ਵਸਤੂਆਂ ਦੀ ਸਟੋਰੇਜ ਦੁਨੀਆ ਨੂੰ ਭਰ ਦੇਵੇਗੀ, ਅਤੇ ਤੁਸੀਂ ਇਹ ਵੀ ਨਹੀਂ ਜਾਣਦੇ ਕਿ CEPH ਕੀ ਹੈ," ਇਸ ਲਈ ਮੇਰੇ ਸੁਤੰਤਰ ਜੀਵਨ ਵਿੱਚ ਪਹਿਲੀ ਚੀਜ਼ ਮੇਰਾ ਆਪਣਾ ਕਲੱਸਟਰ ਬਣਾਉਣਾ ਸੀ। ਪ੍ਰਯੋਗ ਦਾ ਉਦੇਸ਼ ਸੀਫ ਦੀ ਅੰਦਰੂਨੀ ਬਣਤਰ ਤੋਂ ਜਾਣੂ ਹੋਣਾ ਅਤੇ ਇਸਦੇ ਉਪਯੋਗ ਦੇ ਦਾਇਰੇ ਨੂੰ ਸਮਝਣਾ ਸੀ। ਮੱਧਮ ਆਕਾਰ ਦੇ ਕਾਰੋਬਾਰਾਂ ਅਤੇ ਛੋਟੇ ਕਾਰੋਬਾਰਾਂ ਵਿੱਚ ਸੇਫ ਨੂੰ ਲਾਗੂ ਕਰਨਾ ਕਿੰਨਾ ਜਾਇਜ਼ ਹੈ? ਕਈ ਸਾਲਾਂ ਦੇ ਸੰਚਾਲਨ ਅਤੇ ਕੁਝ ਅਟੱਲ ਡਾਟਾ ਦੇ ਨੁਕਸਾਨ ਤੋਂ ਬਾਅਦ, ਪੇਚੀਦਗੀਆਂ ਦੀ ਸਮਝ ਪੈਦਾ ਹੋਈ ਕਿ ਸਭ ਕੁਝ ਇੰਨਾ ਸੌਖਾ ਨਹੀਂ ਹੈ। CEPH ਦੀਆਂ ਵਿਸ਼ੇਸ਼ਤਾਵਾਂ ਇਸਦੇ ਵਿਆਪਕ ਗੋਦ ਲੈਣ ਵਿੱਚ ਰੁਕਾਵਟਾਂ ਖੜ੍ਹੀਆਂ ਕਰਦੀਆਂ ਹਨ, ਅਤੇ ਉਹਨਾਂ ਦੇ ਕਾਰਨ, ਪ੍ਰਯੋਗ ਇੱਕ ਅੰਤ ਵਿੱਚ ਪਹੁੰਚ ਗਏ ਹਨ। ਹੇਠਾਂ ਚੁੱਕੇ ਗਏ ਸਾਰੇ ਕਦਮਾਂ, ਪ੍ਰਾਪਤ ਨਤੀਜੇ ਅਤੇ ਕੱਢੇ ਗਏ ਸਿੱਟਿਆਂ ਦਾ ਵਰਣਨ ਹੈ। ਜੇ ਜਾਣਕਾਰ ਲੋਕ ਆਪਣਾ ਤਜਰਬਾ ਸਾਂਝਾ ਕਰਨ ਅਤੇ ਕੁਝ ਨੁਕਤੇ ਸਮਝਾਉਣ ਤਾਂ ਮੈਂ ਧੰਨਵਾਦੀ ਹੋਵਾਂਗਾ।

ਨੋਟ: ਟਿੱਪਣੀਕਾਰਾਂ ਨੇ ਕੁਝ ਧਾਰਨਾਵਾਂ ਵਿੱਚ ਗੰਭੀਰ ਗਲਤੀਆਂ ਦੀ ਪਛਾਣ ਕੀਤੀ ਹੈ ਜਿਸ ਲਈ ਪੂਰੇ ਲੇਖ ਨੂੰ ਸੋਧਣ ਦੀ ਲੋੜ ਹੈ।

CEPH ਰਣਨੀਤੀ

CEPH ਕਲੱਸਟਰ ਆਰਬਿਟਰਰੀ ਸਾਈਜ਼ ਦੀਆਂ ਡਿਸਕਾਂ ਦੇ ਇੱਕ ਆਰਬਿਟਰਰੀ ਨੰਬਰ K ਨੂੰ ਜੋੜਦਾ ਹੈ ਅਤੇ ਉਹਨਾਂ 'ਤੇ ਡਾਟਾ ਸਟੋਰ ਕਰਦਾ ਹੈ, ਹਰੇਕ ਟੁਕੜੇ (ਡਿਫੌਲਟ ਰੂਪ ਵਿੱਚ 4 MB) ਨੂੰ ਇੱਕ ਦਿੱਤੇ ਨੰਬਰ N ਵਾਰ ਦੀ ਨਕਲ ਕਰਦਾ ਹੈ।

ਆਉ ਦੋ ਸਮਾਨ ਡਿਸਕਾਂ ਦੇ ਨਾਲ ਸਭ ਤੋਂ ਸਧਾਰਨ ਕੇਸ 'ਤੇ ਵਿਚਾਰ ਕਰੀਏ. ਉਹਨਾਂ ਤੋਂ ਤੁਸੀਂ ਜਾਂ ਤਾਂ RAID 1 ਜਾਂ N=2 ਨਾਲ ਇੱਕ ਕਲੱਸਟਰ ਨੂੰ ਅਸੈਂਬਲ ਕਰ ਸਕਦੇ ਹੋ - ਨਤੀਜਾ ਉਹੀ ਹੋਵੇਗਾ। ਜੇਕਰ ਤਿੰਨ ਡਿਸਕਾਂ ਹਨ ਅਤੇ ਉਹ ਵੱਖ-ਵੱਖ ਆਕਾਰਾਂ ਦੀਆਂ ਹਨ, ਤਾਂ N=2 ਨਾਲ ਇੱਕ ਕਲੱਸਟਰ ਨੂੰ ਇਕੱਠਾ ਕਰਨਾ ਆਸਾਨ ਹੈ: ਕੁਝ ਡਾਟਾ ਡਿਸਕ 1 ਅਤੇ 2 'ਤੇ ਹੋਵੇਗਾ, ਕੁਝ ਡਿਸਕ 1 ਅਤੇ 3 'ਤੇ ਹੋਵੇਗਾ, ਅਤੇ ਕੁਝ ਹੋਵੇਗਾ। 2 ਅਤੇ 3 'ਤੇ, ਜਦੋਂ ਕਿ RAID ਨਹੀਂ ਹੋਵੇਗਾ (ਤੁਸੀਂ ਅਜਿਹੇ RAID ਨੂੰ ਇਕੱਠਾ ਕਰ ਸਕਦੇ ਹੋ, ਪਰ ਇਹ ਇੱਕ ਵਿਗਾੜ ਹੋਵੇਗਾ)। ਜੇ ਇੱਥੇ ਹੋਰ ਵੀ ਡਿਸਕਾਂ ਹਨ, ਤਾਂ RAID 5 ਬਣਾਉਣਾ ਸੰਭਵ ਹੈ; CEPH ਵਿੱਚ ਇੱਕ ਐਨਾਲਾਗ ਹੈ - erasure_code, ਜੋ ਕਿ ਡਿਵੈਲਪਰਾਂ ਦੀਆਂ ਸ਼ੁਰੂਆਤੀ ਧਾਰਨਾਵਾਂ ਦਾ ਖੰਡਨ ਕਰਦਾ ਹੈ, ਅਤੇ ਇਸਲਈ ਇਸਨੂੰ ਨਹੀਂ ਮੰਨਿਆ ਜਾਂਦਾ ਹੈ। RAID 5 ਮੰਨਦਾ ਹੈ ਕਿ ਇੱਥੇ ਬਹੁਤ ਘੱਟ ਡਰਾਈਵਾਂ ਹਨ, ਜੋ ਸਾਰੀਆਂ ਚੰਗੀ ਹਾਲਤ ਵਿੱਚ ਹਨ। ਜੇਕਰ ਇੱਕ ਫੇਲ ਹੋ ਜਾਂਦੀ ਹੈ, ਤਾਂ ਬਾਕੀਆਂ ਨੂੰ ਉਦੋਂ ਤੱਕ ਰੁਕਣਾ ਚਾਹੀਦਾ ਹੈ ਜਦੋਂ ਤੱਕ ਡਿਸਕ ਨੂੰ ਬਦਲਿਆ ਨਹੀਂ ਜਾਂਦਾ ਅਤੇ ਡੇਟਾ ਨੂੰ ਇਸ ਵਿੱਚ ਰੀਸਟੋਰ ਨਹੀਂ ਕੀਤਾ ਜਾਂਦਾ। CEPH, N>=3 ਦੇ ਨਾਲ, ਪੁਰਾਣੀਆਂ ਡਿਸਕਾਂ ਦੀ ਵਰਤੋਂ ਨੂੰ ਉਤਸ਼ਾਹਿਤ ਕਰਦਾ ਹੈ, ਖਾਸ ਤੌਰ 'ਤੇ, ਜੇਕਰ ਤੁਸੀਂ ਡੇਟਾ ਦੀ ਇੱਕ ਕਾਪੀ ਨੂੰ ਸਟੋਰ ਕਰਨ ਲਈ ਕਈ ਚੰਗੀਆਂ ਡਿਸਕਾਂ ਰੱਖਦੇ ਹੋ, ਅਤੇ ਬਾਕੀ ਦੀਆਂ ਦੋ ਜਾਂ ਤਿੰਨ ਕਾਪੀਆਂ ਨੂੰ ਵੱਡੀ ਗਿਣਤੀ ਵਿੱਚ ਪੁਰਾਣੀਆਂ ਡਿਸਕਾਂ 'ਤੇ ਸਟੋਰ ਕਰਦੇ ਹੋ, ਤਾਂ ਜਾਣਕਾਰੀ ਸੁਰੱਖਿਅਤ ਹੋ ਜਾਵੇਗਾ, ਕਿਉਂਕਿ ਹੁਣ ਲਈ ਨਵੀਆਂ ਡਿਸਕਾਂ ਜ਼ਿੰਦਾ ਹਨ - ਕੋਈ ਸਮੱਸਿਆ ਨਹੀਂ ਹੈ, ਅਤੇ ਜੇਕਰ ਉਹਨਾਂ ਵਿੱਚੋਂ ਇੱਕ ਟੁੱਟ ਜਾਂਦੀ ਹੈ, ਤਾਂ ਪੰਜ ਸਾਲ ਤੋਂ ਵੱਧ ਦੀ ਸੇਵਾ ਜੀਵਨ ਵਾਲੀਆਂ ਤਿੰਨ ਡਿਸਕਾਂ ਦੀ ਇੱਕੋ ਸਮੇਂ ਅਸਫਲਤਾ, ਤਰਜੀਹੀ ਤੌਰ 'ਤੇ ਵੱਖ-ਵੱਖ ਸਰਵਰਾਂ ਤੋਂ, ਇੱਕ ਬਹੁਤ ਹੀ ਅਸੰਭਵ ਹੈ. ਘਟਨਾ.

ਕਾਪੀਆਂ ਦੀ ਵੰਡ ਵਿੱਚ ਇੱਕ ਸੂਖਮਤਾ ਹੈ. ਮੂਲ ਰੂਪ ਵਿੱਚ, ਇਹ ਮੰਨਿਆ ਜਾਂਦਾ ਹੈ ਕਿ ਡੇਟਾ ਨੂੰ ਹੋਰ (~ 100 ਪ੍ਰਤੀ ਡਿਸਕ) PG ਵੰਡ ਸਮੂਹਾਂ ਵਿੱਚ ਵੰਡਿਆ ਗਿਆ ਹੈ, ਜਿਨ੍ਹਾਂ ਵਿੱਚੋਂ ਹਰ ਇੱਕ ਨੂੰ ਕੁਝ ਡਿਸਕਾਂ ਤੇ ਡੁਪਲੀਕੇਟ ਕੀਤਾ ਗਿਆ ਹੈ। ਮੰਨ ਲਓ K=6, N=2, ਫਿਰ ਜੇਕਰ ਕੋਈ ਵੀ ਦੋ ਡਿਸਕਾਂ ਫੇਲ ਹੋ ਜਾਂਦੀਆਂ ਹਨ, ਤਾਂ ਡਾਟਾ ਖਤਮ ਹੋਣ ਦੀ ਗਾਰੰਟੀ ਦਿੱਤੀ ਜਾਂਦੀ ਹੈ, ਕਿਉਂਕਿ ਪ੍ਰੋਬੇਬਿਲਟੀ ਥਿਊਰੀ ਦੇ ਅਨੁਸਾਰ, ਘੱਟੋ-ਘੱਟ ਇੱਕ PG ਹੋਵੇਗਾ ਜੋ ਇਹਨਾਂ ਦੋ ਡਿਸਕਾਂ 'ਤੇ ਸਥਿਤ ਹੋਵੇਗਾ। ਅਤੇ ਇੱਕ ਸਮੂਹ ਦਾ ਨੁਕਸਾਨ ਪੂਲ ਵਿੱਚ ਸਾਰਾ ਡਾਟਾ ਅਣਉਪਲਬਧ ਬਣਾਉਂਦਾ ਹੈ। ਜੇਕਰ ਡਿਸਕਾਂ ਨੂੰ ਤਿੰਨ ਜੋੜਿਆਂ ਵਿੱਚ ਵੰਡਿਆ ਜਾਂਦਾ ਹੈ ਅਤੇ ਡੇਟਾ ਨੂੰ ਸਿਰਫ਼ ਇੱਕ ਜੋੜੇ ਵਿੱਚ ਡਿਸਕਾਂ ਉੱਤੇ ਸਟੋਰ ਕਰਨ ਦੀ ਇਜਾਜ਼ਤ ਦਿੱਤੀ ਜਾਂਦੀ ਹੈ, ਤਾਂ ਅਜਿਹੀ ਵੰਡ ਕਿਸੇ ਇੱਕ ਡਿਸਕ ਦੇ ਅਸਫਲ ਹੋਣ ਲਈ ਵੀ ਰੋਧਕ ਹੁੰਦੀ ਹੈ, ਪਰ ਜੇਕਰ ਦੋ ਡਿਸਕਾਂ ਫੇਲ੍ਹ ਹੋ ਜਾਂਦੀਆਂ ਹਨ, ਤਾਂ ਡੇਟਾ ਦੇ ਨੁਕਸਾਨ ਦੀ ਸੰਭਾਵਨਾ ਨਹੀਂ ਹੈ। 100%, ਪਰ ਸਿਰਫ 3/15, ਅਤੇ ਅਸਫਲਤਾ ਦੇ ਮਾਮਲੇ ਵਿੱਚ ਵੀ ਤਿੰਨ ਡਿਸਕਾਂ - ਸਿਰਫ 12/20. ਇਸ ਲਈ, ਡੇਟਾ ਵੰਡ ਵਿੱਚ ਐਨਟ੍ਰੋਪੀ ਨੁਕਸ ਸਹਿਣਸ਼ੀਲਤਾ ਵਿੱਚ ਯੋਗਦਾਨ ਨਹੀਂ ਪਾਉਂਦੀ ਹੈ। ਇਹ ਵੀ ਨੋਟ ਕਰੋ ਕਿ ਇੱਕ ਫਾਈਲ ਸਰਵਰ ਲਈ, ਮੁਫਤ RAM ਜਵਾਬ ਦੀ ਗਤੀ ਨੂੰ ਮਹੱਤਵਪੂਰਣ ਰੂਪ ਵਿੱਚ ਵਧਾਉਂਦੀ ਹੈ. ਹਰੇਕ ਨੋਡ ਵਿੱਚ ਜਿੰਨੀ ਜ਼ਿਆਦਾ ਮੈਮੋਰੀ, ਅਤੇ ਸਾਰੇ ਨੋਡਾਂ ਵਿੱਚ ਵਧੇਰੇ ਮੈਮੋਰੀ, ਇਹ ਓਨੀ ਹੀ ਤੇਜ਼ ਹੋਵੇਗੀ। ਇਹ ਬਿਨਾਂ ਸ਼ੱਕ ਇੱਕ ਸਿੰਗਲ ਸਰਵਰ ਉੱਤੇ ਇੱਕ ਕਲੱਸਟਰ ਦਾ ਇੱਕ ਫਾਇਦਾ ਹੈ ਅਤੇ, ਇਸ ਤੋਂ ਵੀ ਵੱਧ, ਇੱਕ ਹਾਰਡਵੇਅਰ NAS, ਜਿੱਥੇ ਬਹੁਤ ਘੱਟ ਮਾਤਰਾ ਵਿੱਚ ਮੈਮੋਰੀ ਬਣਾਈ ਗਈ ਹੈ।

ਇਹ ਇਸ ਤਰ੍ਹਾਂ ਹੈ ਕਿ CEPH ਪੁਰਾਣੇ ਉਪਕਰਨਾਂ (ਇੱਥੇ, ਬੇਸ਼ੱਕ, ਲਾਗਤਾਂ ਦੀ ਲੋੜ ਪਵੇਗੀ, ਪਰ ਵਪਾਰਕ ਸਟੋਰੇਜ ਪ੍ਰਣਾਲੀਆਂ ਦੇ ਮੁਕਾਬਲੇ ਘੱਟ) ਤੋਂ ਘੱਟ ਨਿਵੇਸ਼ ਨਾਲ ਸਕੇਲ ਕਰਨ ਦੀ ਯੋਗਤਾ ਦੇ ਨਾਲ ਦਸਾਂ ਟੀਬੀ ਲਈ ਇੱਕ ਭਰੋਸੇਯੋਗ ਡਾਟਾ ਸਟੋਰੇਜ ਸਿਸਟਮ ਬਣਾਉਣ ਦਾ ਇੱਕ ਵਧੀਆ ਤਰੀਕਾ ਹੈ।

ਕਲੱਸਟਰ ਲਾਗੂ ਕਰਨਾ

ਪ੍ਰਯੋਗ ਲਈ, ਚਲੋ ਇੱਕ ਡਿਕਮਿਸ਼ਨਡ ਕੰਪਿਊਟਰ Intel DQ57TM + Intel core i3 540 + 16 GB RAM ਲੈਂਦੇ ਹਾਂ। ਅਸੀਂ ਚਾਰ 2 TB ਡਿਸਕਾਂ ਨੂੰ RAID10 ਵਰਗੀ ਕਿਸੇ ਚੀਜ਼ ਵਿੱਚ ਸੰਗਠਿਤ ਕਰਾਂਗੇ, ਇੱਕ ਸਫਲ ਟੈਸਟ ਤੋਂ ਬਾਅਦ ਅਸੀਂ ਇੱਕ ਦੂਜਾ ਨੋਡ ਅਤੇ ਡਿਸਕਾਂ ਦੀ ਇੱਕੋ ਜਿਹੀ ਗਿਣਤੀ ਨੂੰ ਜੋੜਾਂਗੇ।

ਲੀਨਕਸ ਨੂੰ ਸਥਾਪਿਤ ਕਰਨਾ। ਵੰਡ ਨੂੰ ਅਨੁਕੂਲਿਤ ਕਰਨ ਅਤੇ ਸਥਿਰ ਹੋਣ ਦੀ ਯੋਗਤਾ ਦੀ ਲੋੜ ਹੁੰਦੀ ਹੈ। ਡੇਬੀਅਨ ਅਤੇ ਸੂਜ਼ ਲੋੜਾਂ ਨੂੰ ਪੂਰਾ ਕਰਦੇ ਹਨ। ਸੂਸ ਕੋਲ ਵਧੇਰੇ ਲਚਕਦਾਰ ਇੰਸਟਾਲਰ ਹੈ ਜੋ ਤੁਹਾਨੂੰ ਕਿਸੇ ਵੀ ਪੈਕੇਜ ਨੂੰ ਅਯੋਗ ਕਰਨ ਦੀ ਇਜਾਜ਼ਤ ਦਿੰਦਾ ਹੈ; ਬਦਕਿਸਮਤੀ ਨਾਲ, ਮੈਂ ਇਹ ਨਹੀਂ ਸਮਝ ਸਕਿਆ ਕਿ ਸਿਸਟਮ ਨੂੰ ਨੁਕਸਾਨ ਪਹੁੰਚਾਏ ਬਿਨਾਂ ਕਿਨ੍ਹਾਂ ਨੂੰ ਸੁੱਟਿਆ ਜਾ ਸਕਦਾ ਹੈ। ਡੀਬੂਟਸਟ੍ਰੈਪ ਬਸਟਰ ਦੀ ਵਰਤੋਂ ਕਰਕੇ ਡੇਬੀਅਨ ਸਥਾਪਤ ਕਰੋ। ਮਿਨ-ਬੇਸ ਵਿਕਲਪ ਇੱਕ ਟੁੱਟੇ ਹੋਏ ਸਿਸਟਮ ਨੂੰ ਸਥਾਪਿਤ ਕਰਦਾ ਹੈ ਜਿਸ ਵਿੱਚ ਡਰਾਈਵਰਾਂ ਦੀ ਘਾਟ ਹੈ। ਪੂਰੇ ਸੰਸਕਰਣ ਦੇ ਮੁਕਾਬਲੇ ਆਕਾਰ ਵਿੱਚ ਅੰਤਰ ਇੰਨਾ ਵੱਡਾ ਨਹੀਂ ਹੈ ਜਿੰਨਾ ਪਰੇਸ਼ਾਨ ਕਰਨਾ ਹੈ. ਕਿਉਂਕਿ ਕੰਮ ਇੱਕ ਭੌਤਿਕ ਮਸ਼ੀਨ 'ਤੇ ਕੀਤਾ ਜਾਂਦਾ ਹੈ, ਮੈਂ ਸਨੈਪਸ਼ਾਟ ਲੈਣਾ ਚਾਹੁੰਦਾ ਹਾਂ, ਜਿਵੇਂ ਕਿ ਵਰਚੁਅਲ ਮਸ਼ੀਨਾਂ 'ਤੇ। ਇਹ ਚੋਣ LVM ਜਾਂ btrfs (ਜਾਂ xfs, ਜਾਂ zfs - ਫਰਕ ਵੱਡਾ ਨਹੀਂ ਹੈ) ਦੁਆਰਾ ਦਿੱਤਾ ਗਿਆ ਹੈ। LVM ਸਨੈਪਸ਼ਾਟ ਇੱਕ ਮਜ਼ਬੂਤ ​​ਬਿੰਦੂ ਨਹੀਂ ਹਨ। btrfs ਇੰਸਟਾਲ ਕਰੋ। ਅਤੇ ਬੂਟਲੋਡਰ MBR ਵਿੱਚ ਹੈ। ਇੱਕ 50 MB ਡਿਸਕ ਨੂੰ FAT ਭਾਗ ਨਾਲ ਜੋੜਨ ਦਾ ਕੋਈ ਮਤਲਬ ਨਹੀਂ ਹੈ ਜਦੋਂ ਤੁਸੀਂ ਇਸਨੂੰ 1 MB ਭਾਗ ਸਾਰਣੀ ਖੇਤਰ ਵਿੱਚ ਧੱਕ ਸਕਦੇ ਹੋ ਅਤੇ ਸਿਸਟਮ ਲਈ ਸਾਰੀ ਥਾਂ ਨਿਰਧਾਰਤ ਕਰ ਸਕਦੇ ਹੋ। ਡਿਸਕ 'ਤੇ 700 MB ਲਿਆ। ਮੈਨੂੰ ਯਾਦ ਨਹੀਂ ਹੈ ਕਿ ਬੁਨਿਆਦੀ SUSE ਇੰਸਟਾਲੇਸ਼ਨ ਕਿੰਨੀ ਹੈ, ਮੈਨੂੰ ਲਗਦਾ ਹੈ ਕਿ ਇਹ ਲਗਭਗ 1.1 ਜਾਂ 1.4 GB ਹੈ.

CEPH ਨੂੰ ਸਥਾਪਿਤ ਕਰੋ। ਅਸੀਂ ਡੇਬੀਅਨ ਰਿਪੋਜ਼ਟਰੀ ਵਿੱਚ ਵਰਜਨ 12 ਨੂੰ ਨਜ਼ਰਅੰਦਾਜ਼ ਕਰਦੇ ਹਾਂ ਅਤੇ 15.2.3 ਸਾਈਟ ਤੋਂ ਸਿੱਧਾ ਜੁੜਦੇ ਹਾਂ। ਅਸੀਂ ਹੇਠ ਲਿਖੀਆਂ ਚੇਤਾਵਨੀਆਂ ਦੇ ਨਾਲ “CEPH ਹੱਥੀਂ ਸਥਾਪਿਤ ਕਰੋ” ਭਾਗ ਦੀਆਂ ਹਦਾਇਤਾਂ ਦੀ ਪਾਲਣਾ ਕਰਦੇ ਹਾਂ:

• ਰਿਪੋਜ਼ਟਰੀ ਨੂੰ ਕਨੈਕਟ ਕਰਨ ਤੋਂ ਪਹਿਲਾਂ, ਤੁਹਾਨੂੰ gnupg wget ca-ਸਰਟੀਫਿਕੇਟ ਸਥਾਪਤ ਕਰਨੇ ਚਾਹੀਦੇ ਹਨ
• ਰਿਪੋਜ਼ਟਰੀ ਨੂੰ ਕਨੈਕਟ ਕਰਨ ਤੋਂ ਬਾਅਦ, ਪਰ ਕਲੱਸਟਰ ਨੂੰ ਇੰਸਟਾਲ ਕਰਨ ਤੋਂ ਪਹਿਲਾਂ, ਪੈਕੇਜ ਇੰਸਟਾਲ ਕਰਨਾ ਛੱਡ ਦਿੱਤਾ ਗਿਆ ਹੈ: apt -y --no-install-recommends install ceph-common ceph-mon ceph-osd ceph-mds ceph-mgr
• CEPH ਨੂੰ ਇੰਸਟਾਲ ਕਰਦੇ ਸਮੇਂ, ਅਣਜਾਣ ਕਾਰਨਾਂ ਕਰਕੇ, ਇਹ lvm2 ਨੂੰ ਇੰਸਟਾਲ ਕਰਨ ਦੀ ਕੋਸ਼ਿਸ਼ ਕਰੇਗਾ। ਸਿਧਾਂਤ ਵਿੱਚ, ਇਹ ਤਰਸ ਦੀ ਗੱਲ ਨਹੀਂ ਹੈ, ਪਰ ਇੰਸਟਾਲੇਸ਼ਨ ਅਸਫਲ ਹੋ ਜਾਂਦੀ ਹੈ, ਇਸਲਈ CEPH ਵੀ ਇੰਸਟਾਲ ਨਹੀਂ ਕਰੇਗਾ।

  ਇਸ ਪੈਚ ਨੇ ਮਦਦ ਕੀਤੀ:

  cat << EOF >> /var/lib/dpkg/status
  Package: lvm2
  Status: install ok installed
  Priority: important
  Section: admin
  Installed-Size: 0
  Maintainer: Debian Adduser Developers <[email protected]>
  Architecture: all
  Multi-Arch: foreign
  Version: 113.118
  Description: No-install
  EOF
  

ਕਲੱਸਟਰ ਦੀ ਸੰਖੇਪ ਜਾਣਕਾਰੀ

ceph-osd - ਡਿਸਕ 'ਤੇ ਡਾਟਾ ਸਟੋਰ ਕਰਨ ਲਈ ਜ਼ਿੰਮੇਵਾਰ ਹੈ। ਹਰੇਕ ਡਿਸਕ ਲਈ, ਇੱਕ ਨੈਟਵਰਕ ਸੇਵਾ ਸ਼ੁਰੂ ਕੀਤੀ ਜਾਂਦੀ ਹੈ ਜੋ ਵਸਤੂਆਂ ਨੂੰ ਪੜ੍ਹਨ ਜਾਂ ਲਿਖਣ ਲਈ ਬੇਨਤੀਆਂ ਨੂੰ ਸਵੀਕਾਰ ਅਤੇ ਲਾਗੂ ਕਰਦੀ ਹੈ। ਡਿਸਕ ਉੱਤੇ ਦੋ ਭਾਗ ਬਣਾਏ ਗਏ ਹਨ। ਉਹਨਾਂ ਵਿੱਚੋਂ ਇੱਕ ਵਿੱਚ ਕਲੱਸਟਰ, ਡਿਸਕ ਨੰਬਰ ਅਤੇ ਕਲੱਸਟਰ ਦੀਆਂ ਕੁੰਜੀਆਂ ਬਾਰੇ ਜਾਣਕਾਰੀ ਹੁੰਦੀ ਹੈ। ਇਹ 1KB ਜਾਣਕਾਰੀ ਇੱਕ ਡਿਸਕ ਨੂੰ ਜੋੜਨ ਵੇਲੇ ਇੱਕ ਵਾਰ ਬਣਾਈ ਜਾਂਦੀ ਹੈ ਅਤੇ ਕਦੇ ਵੀ ਬਦਲਣ ਲਈ ਧਿਆਨ ਨਹੀਂ ਦਿੱਤਾ ਗਿਆ ਹੈ। ਦੂਜੇ ਭਾਗ ਵਿੱਚ ਕੋਈ ਫਾਈਲ ਸਿਸਟਮ ਨਹੀਂ ਹੈ ਅਤੇ CEPH ਬਾਈਨਰੀ ਡਾਟਾ ਸਟੋਰ ਕਰਦਾ ਹੈ। ਪਿਛਲੇ ਵਰਜਨਾਂ ਵਿੱਚ ਆਟੋਮੈਟਿਕ ਇੰਸਟਾਲੇਸ਼ਨ ਨੇ ਸਰਵਿਸ ਜਾਣਕਾਰੀ ਲਈ 100MB xfs ਭਾਗ ਬਣਾਇਆ ਹੈ। ਮੈਂ ਡਿਸਕ ਨੂੰ MBR ਵਿੱਚ ਬਦਲਿਆ ਅਤੇ ਸਿਰਫ 16MB ਨਿਰਧਾਰਤ ਕੀਤਾ - ਸੇਵਾ ਸ਼ਿਕਾਇਤ ਨਹੀਂ ਕਰਦੀ. ਮੈਨੂੰ ਲੱਗਦਾ ਹੈ ਕਿ xfs ਨੂੰ ਬਿਨਾਂ ਕਿਸੇ ਸਮੱਸਿਆ ਦੇ ext ਨਾਲ ਬਦਲਿਆ ਜਾ ਸਕਦਾ ਹੈ। ਇਹ ਭਾਗ /var/lib/… ਵਿੱਚ ਮਾਊਂਟ ਕੀਤਾ ਗਿਆ ਹੈ, ਜਿੱਥੇ ਸੇਵਾ OSD ਬਾਰੇ ਜਾਣਕਾਰੀ ਪੜ੍ਹਦੀ ਹੈ ਅਤੇ ਬਲਾਕ ਜੰਤਰ ਦਾ ਹਵਾਲਾ ਵੀ ਲੱਭਦੀ ਹੈ ਜਿੱਥੇ ਬਾਈਨਰੀ ਡਾਟਾ ਸਟੋਰ ਕੀਤਾ ਜਾਂਦਾ ਹੈ। ਸਿਧਾਂਤਕ ਤੌਰ 'ਤੇ, ਤੁਸੀਂ ਤੁਰੰਤ ਸਹਾਇਕ ਫਾਈਲਾਂ ਨੂੰ /var/lib/… ਵਿੱਚ ਰੱਖ ਸਕਦੇ ਹੋ, ਅਤੇ ਸਾਰੀ ਡਿਸਕ ਨੂੰ ਡੇਟਾ ਲਈ ਨਿਰਧਾਰਤ ਕਰ ਸਕਦੇ ਹੋ। ਜਦੋਂ ceph-deploy ਰਾਹੀਂ ਇੱਕ OSD ਬਣਾਉਂਦੇ ਹੋ, ਤਾਂ /var/lib/… ਵਿੱਚ ਭਾਗ ਨੂੰ ਮਾਊਂਟ ਕਰਨ ਲਈ ਇੱਕ ਨਿਯਮ ਆਟੋਮੈਟਿਕ ਹੀ ਬਣਾਇਆ ਜਾਂਦਾ ਹੈ, ਅਤੇ ceph ਉਪਭੋਗਤਾ ਨੂੰ ਲੋੜੀਂਦੇ ਬਲਾਕ ਜੰਤਰ ਨੂੰ ਪੜ੍ਹਨ ਲਈ ਅਧਿਕਾਰ ਵੀ ਦਿੱਤੇ ਜਾਂਦੇ ਹਨ। ਜੇਕਰ ਤੁਸੀਂ ਹੱਥੀਂ ਇੰਸਟਾਲ ਕਰਦੇ ਹੋ, ਤਾਂ ਤੁਹਾਨੂੰ ਇਹ ਆਪਣੇ ਆਪ ਕਰਨਾ ਚਾਹੀਦਾ ਹੈ; ਦਸਤਾਵੇਜ਼ ਇਹ ਨਹੀਂ ਕਹਿੰਦੇ ਹਨ। ਓਐਸਡੀ ਮੈਮੋਰੀ ਟਾਰਗੇਟ ਪੈਰਾਮੀਟਰ ਨੂੰ ਨਿਰਧਾਰਤ ਕਰਨ ਦੀ ਵੀ ਸਲਾਹ ਦਿੱਤੀ ਜਾਂਦੀ ਹੈ ਤਾਂ ਜੋ ਕਾਫ਼ੀ ਭੌਤਿਕ ਮੈਮੋਰੀ ਹੋਵੇ।

ceph-mds. ਘੱਟ ਪੱਧਰ 'ਤੇ, CEPH ਵਸਤੂ ਸਟੋਰੇਜ ਹੈ। ਸਟੋਰੇਜ ਨੂੰ ਬਲੌਕ ਕਰਨ ਦੀ ਸਮਰੱਥਾ ਹਰੇਕ 4MB ਬਲਾਕ ਨੂੰ ਇੱਕ ਵਸਤੂ ਦੇ ਰੂਪ ਵਿੱਚ ਸਟੋਰ ਕਰਨ ਲਈ ਹੇਠਾਂ ਆਉਂਦੀ ਹੈ। ਫਾਈਲ ਸਟੋਰੇਜ ਉਸੇ ਸਿਧਾਂਤ 'ਤੇ ਕੰਮ ਕਰਦੀ ਹੈ। ਦੋ ਪੂਲ ਬਣਾਏ ਗਏ ਹਨ: ਇੱਕ ਮੈਟਾਡੇਟਾ ਲਈ, ਦੂਜਾ ਡੇਟਾ ਲਈ। ਉਹਨਾਂ ਨੂੰ ਇੱਕ ਫਾਈਲ ਸਿਸਟਮ ਵਿੱਚ ਜੋੜਿਆ ਜਾਂਦਾ ਹੈ। ਇਸ ਸਮੇਂ, ਕੁਝ ਕਿਸਮ ਦਾ ਰਿਕਾਰਡ ਬਣਾਇਆ ਗਿਆ ਹੈ, ਇਸ ਲਈ ਜੇਕਰ ਤੁਸੀਂ ਫਾਈਲ ਸਿਸਟਮ ਨੂੰ ਮਿਟਾਉਂਦੇ ਹੋ, ਪਰ ਦੋਵੇਂ ਪੂਲ ਰੱਖਦੇ ਹੋ, ਤਾਂ ਤੁਸੀਂ ਇਸਨੂੰ ਰੀਸਟੋਰ ਕਰਨ ਦੇ ਯੋਗ ਨਹੀਂ ਹੋਵੋਗੇ। ਬਲਾਕ ਦੁਆਰਾ ਫਾਈਲਾਂ ਨੂੰ ਐਕਸਟਰੈਕਟ ਕਰਨ ਦੀ ਇੱਕ ਵਿਧੀ ਹੈ, ਮੈਂ ਇਸਦੀ ਜਾਂਚ ਨਹੀਂ ਕੀਤੀ ਹੈ. ceph-mds ਸੇਵਾ ਫਾਈਲ ਸਿਸਟਮ ਤੱਕ ਪਹੁੰਚ ਲਈ ਜ਼ਿੰਮੇਵਾਰ ਹੈ। ਹਰੇਕ ਫਾਈਲ ਸਿਸਟਮ ਨੂੰ ਸੇਵਾ ਦੀ ਇੱਕ ਵੱਖਰੀ ਉਦਾਹਰਣ ਦੀ ਲੋੜ ਹੁੰਦੀ ਹੈ। ਇੱਥੇ ਇੱਕ "ਇੰਡੈਕਸ" ਵਿਕਲਪ ਹੈ, ਜੋ ਤੁਹਾਨੂੰ ਇੱਕ ਵਿੱਚ ਕਈ ਫਾਈਲ ਸਿਸਟਮਾਂ ਦੀ ਝਲਕ ਬਣਾਉਣ ਲਈ ਸਹਾਇਕ ਹੈ - ਇਹ ਵੀ ਟੈਸਟ ਨਹੀਂ ਕੀਤਾ ਗਿਆ ਹੈ।

Ceph-mon - ਇਹ ਸੇਵਾ ਕਲੱਸਟਰ ਦਾ ਨਕਸ਼ਾ ਸਟੋਰ ਕਰਦੀ ਹੈ। ਇਸ ਵਿੱਚ ਸਾਰੇ OSDs ਬਾਰੇ ਜਾਣਕਾਰੀ, OSDs ਵਿੱਚ PGs ਨੂੰ ਵੰਡਣ ਲਈ ਇੱਕ ਐਲਗੋਰਿਦਮ ਅਤੇ ਸਭ ਤੋਂ ਮਹੱਤਵਪੂਰਨ, ਸਾਰੀਆਂ ਵਸਤੂਆਂ ਬਾਰੇ ਜਾਣਕਾਰੀ (ਇਸ ਵਿਧੀ ਦੇ ਵੇਰਵੇ ਮੇਰੇ ਲਈ ਸਪੱਸ਼ਟ ਨਹੀਂ ਹਨ: ਇੱਥੇ ਇੱਕ ਡਾਇਰੈਕਟਰੀ ਹੈ /var/lib/ceph/mon/…/ store.db, ਇਸ ਵਿੱਚ ਇੱਕ ਵੱਡੀ ਫਾਈਲ ਹੈ ਜੋ 26MB ਹੈ, ਅਤੇ 105K ਆਬਜੈਕਟ ਦੇ ਇੱਕ ਕਲੱਸਟਰ ਵਿੱਚ, ਇਹ ਪ੍ਰਤੀ ਆਬਜੈਕਟ 256 ਬਾਈਟ ਤੋਂ ਥੋੜਾ ਵੱਧ ਨਿਕਲਦਾ ਹੈ - ਮੈਨੂੰ ਲਗਦਾ ਹੈ ਕਿ ਮਾਨੀਟਰ ਸਾਰੀਆਂ ਵਸਤੂਆਂ ਦੀ ਸੂਚੀ ਸਟੋਰ ਕਰਦਾ ਹੈ ਅਤੇ ਪੀ.ਜੀ. ਉਹ ਸਥਿਤ ਹਨ). ਇਸ ਡਾਇਰੈਕਟਰੀ ਨੂੰ ਨੁਕਸਾਨ ਹੋਣ ਦੇ ਨਤੀਜੇ ਵਜੋਂ ਕਲੱਸਟਰ ਵਿੱਚ ਸਾਰਾ ਡਾਟਾ ਖਤਮ ਹੋ ਜਾਂਦਾ ਹੈ। ਇਸ ਲਈ ਇਹ ਸਿੱਟਾ ਕੱਢਿਆ ਗਿਆ ਸੀ ਕਿ CRUSH ਦਿਖਾਉਂਦਾ ਹੈ ਕਿ PGs OSD 'ਤੇ ਕਿਵੇਂ ਸਥਿਤ ਹਨ, ਅਤੇ ਆਬਜੈਕਟ PGs 'ਤੇ ਕਿਵੇਂ ਸਥਿਤ ਹਨ - ਉਹ ਡਾਟਾਬੇਸ ਦੇ ਅੰਦਰ ਕੇਂਦਰੀ ਤੌਰ 'ਤੇ ਸਟੋਰ ਕੀਤੇ ਜਾਂਦੇ ਹਨ, ਭਾਵੇਂ ਡਿਵੈਲਪਰ ਇਸ ਸ਼ਬਦ ਤੋਂ ਕਿੰਨਾ ਵੀ ਪਰਹੇਜ਼ ਕਰਦੇ ਹਨ। ਨਤੀਜੇ ਵਜੋਂ, ਸਭ ਤੋਂ ਪਹਿਲਾਂ, ਅਸੀਂ RO ਮੋਡ ਵਿੱਚ ਇੱਕ ਫਲੈਸ਼ ਡਰਾਈਵ ਤੇ ਸਿਸਟਮ ਨੂੰ ਸਥਾਪਿਤ ਨਹੀਂ ਕਰ ਸਕਦੇ ਹਾਂ, ਕਿਉਂਕਿ ਡੇਟਾਬੇਸ ਲਗਾਤਾਰ ਰਿਕਾਰਡ ਕੀਤਾ ਜਾ ਰਿਹਾ ਹੈ, ਇਹਨਾਂ ਲਈ ਇੱਕ ਵਾਧੂ ਡਿਸਕ ਦੀ ਲੋੜ ਹੈ (1 GB ਤੋਂ ਵੱਧ ਨਹੀਂ), ਦੂਜਾ, ਇਹ ਹੋਣਾ ਜ਼ਰੂਰੀ ਹੈ. ਅਸਲ ਸਮੇਂ ਵਿੱਚ ਇਸ ਅਧਾਰ ਦੀ ਨਕਲ ਕਰੋ. ਜੇ ਕਈ ਮਾਨੀਟਰ ਹਨ, ਤਾਂ ਨੁਕਸ ਸਹਿਣਸ਼ੀਲਤਾ ਆਪਣੇ ਆਪ ਯਕੀਨੀ ਹੋ ਜਾਂਦੀ ਹੈ, ਪਰ ਸਾਡੇ ਕੇਸ ਵਿੱਚ ਸਿਰਫ ਇੱਕ ਮਾਨੀਟਰ ਹੈ, ਵੱਧ ਤੋਂ ਵੱਧ ਦੋ. ਓਐਸਡੀ ਡੇਟਾ ਦੇ ਅਧਾਰ ਤੇ ਇੱਕ ਮਾਨੀਟਰ ਨੂੰ ਬਹਾਲ ਕਰਨ ਲਈ ਇੱਕ ਸਿਧਾਂਤਕ ਪ੍ਰਕਿਰਿਆ ਹੈ, ਮੈਂ ਵੱਖ-ਵੱਖ ਕਾਰਨਾਂ ਕਰਕੇ ਤਿੰਨ ਵਾਰ ਇਸਦਾ ਸਹਾਰਾ ਲਿਆ, ਅਤੇ ਤਿੰਨ ਵਾਰ ਕੋਈ ਗਲਤੀ ਸੁਨੇਹੇ ਨਹੀਂ ਸਨ, ਅਤੇ ਨਾਲ ਹੀ ਕੋਈ ਡਾਟਾ ਨਹੀਂ ਸੀ. ਬਦਕਿਸਮਤੀ ਨਾਲ, ਇਹ ਵਿਧੀ ਕੰਮ ਨਹੀਂ ਕਰਦੀ. ਜਾਂ ਤਾਂ ਅਸੀਂ OSD 'ਤੇ ਇੱਕ ਛੋਟਾ ਭਾਗ ਚਲਾਉਂਦੇ ਹਾਂ ਅਤੇ ਡੇਟਾਬੇਸ ਨੂੰ ਸਟੋਰ ਕਰਨ ਲਈ ਇੱਕ RAID ਨੂੰ ਇਕੱਠਾ ਕਰਦੇ ਹਾਂ, ਜਿਸਦਾ ਪ੍ਰਦਰਸ਼ਨ 'ਤੇ ਨਿਸ਼ਚਤ ਤੌਰ 'ਤੇ ਬਹੁਤ ਬੁਰਾ ਪ੍ਰਭਾਵ ਪਵੇਗਾ, ਜਾਂ ਅਸੀਂ ਘੱਟੋ-ਘੱਟ ਦੋ ਭਰੋਸੇਯੋਗ ਭੌਤਿਕ ਮੀਡੀਆ ਨਿਰਧਾਰਤ ਕਰਦੇ ਹਾਂ, ਤਰਜੀਹੀ ਤੌਰ 'ਤੇ USB, ਤਾਂ ਜੋ ਪੋਰਟਾਂ 'ਤੇ ਕਬਜ਼ਾ ਨਾ ਕੀਤਾ ਜਾ ਸਕੇ।

rados-gw - S3 ਪ੍ਰੋਟੋਕੋਲ ਅਤੇ ਸਮਾਨ ਦੁਆਰਾ ਆਬਜੈਕਟ ਸਟੋਰੇਜ ਨੂੰ ਨਿਰਯਾਤ ਕਰਦਾ ਹੈ। ਬਹੁਤ ਸਾਰੇ ਪੂਲ ਬਣਾਉਂਦਾ ਹੈ, ਇਹ ਅਸਪਸ਼ਟ ਕਿਉਂ ਹੈ. ਮੈਂ ਜ਼ਿਆਦਾ ਪ੍ਰਯੋਗ ਨਹੀਂ ਕੀਤਾ।

ceph-mgr - ਇਸ ਸੇਵਾ ਨੂੰ ਸਥਾਪਿਤ ਕਰਦੇ ਸਮੇਂ, ਕਈ ਮੋਡੀਊਲ ਲਾਂਚ ਕੀਤੇ ਜਾਂਦੇ ਹਨ। ਉਹਨਾਂ ਵਿੱਚੋਂ ਇੱਕ ਆਟੋਸਕੇਲ ਹੈ ਜਿਸਨੂੰ ਅਯੋਗ ਨਹੀਂ ਕੀਤਾ ਜਾ ਸਕਦਾ ਹੈ। ਇਹ PG/OSD ਦੀ ਸਹੀ ਮਾਤਰਾ ਨੂੰ ਬਰਕਰਾਰ ਰੱਖਣ ਦੀ ਕੋਸ਼ਿਸ਼ ਕਰਦਾ ਹੈ। ਜੇਕਰ ਤੁਸੀਂ ਅਨੁਪਾਤ ਨੂੰ ਹੱਥੀਂ ਨਿਯੰਤਰਿਤ ਕਰਨਾ ਚਾਹੁੰਦੇ ਹੋ, ਤਾਂ ਤੁਸੀਂ ਹਰੇਕ ਪੂਲ ਲਈ ਸਕੇਲਿੰਗ ਨੂੰ ਅਯੋਗ ਕਰ ਸਕਦੇ ਹੋ, ਪਰ ਇਸ ਸਥਿਤੀ ਵਿੱਚ ਮੋਡੀਊਲ 0 ਦੁਆਰਾ ਇੱਕ ਭਾਗ ਨਾਲ ਕਰੈਸ਼ ਹੋ ਜਾਂਦਾ ਹੈ, ਅਤੇ ਕਲੱਸਟਰ ਸਥਿਤੀ ERROR ਬਣ ਜਾਂਦੀ ਹੈ। ਮੋਡੀਊਲ ਪਾਈਥਨ ਵਿੱਚ ਲਿਖਿਆ ਗਿਆ ਹੈ, ਅਤੇ ਜੇਕਰ ਤੁਸੀਂ ਇਸ ਵਿੱਚ ਲੋੜੀਂਦੀ ਲਾਈਨ ਨੂੰ ਟਿੱਪਣੀ ਕਰਦੇ ਹੋ, ਤਾਂ ਇਹ ਇਸਨੂੰ ਅਯੋਗ ਕਰਨ ਵੱਲ ਲੈ ਜਾਂਦਾ ਹੈ। ਵੇਰਵਿਆਂ ਨੂੰ ਯਾਦ ਕਰਨ ਲਈ ਬਹੁਤ ਆਲਸੀ।

ਵਰਤੇ ਗਏ ਸਰੋਤਾਂ ਦੀ ਸੂਚੀ:

CEPH ਦੀ ਸਥਾਪਨਾ
ਪੂਰੀ ਮਾਨੀਟਰ ਅਸਫਲਤਾ ਤੋਂ ਰਿਕਵਰੀ

ਸਕ੍ਰਿਪਟ ਸੂਚੀਆਂ:

ਸਿਸਟਮ ਨੂੰ ਡੀਬੂਟਸਟਰੈਪ ਰਾਹੀਂ ਇੰਸਟਾਲ ਕਰਨਾ

blkdev=sdb1
mkfs.btrfs -f /dev/$blkdev
mount /dev/$blkdev /mnt
cd /mnt
for i in {@,@var,@home}; do btrfs subvolume create $i; done
mkdir snapshot @/{var,home}
for i in {var,home}; do mount -o bind @${i} @/$i; done
debootstrap buster @ http://deb.debian.org/debian; echo $?
for i in {dev,proc,sys}; do mount -o bind /$i @/$i; done
cp /etc/bash.bashrc @/etc/

chroot /mnt/@ /bin/bash
echo rbd1 > /etc/hostname
passwd
uuid=`blkid | grep $blkdev | cut -d """ -f 2`
cat << EOF > /etc/fstab
UUID=$uuid / btrfs noatime,nodiratime,subvol=@ 0 1
UUID=$uuid /var btrfs noatime,nodiratime,subvol=@var 0 2
UUID=$uuid /home btrfs noatime,nodiratime,subvol=@home 0 2
EOF
cat << EOF >> /var/lib/dpkg/status
Package: lvm2
Status: install ok installed
Priority: important
Section: admin
Installed-Size: 0
Maintainer: Debian Adduser Developers <[email protected]>
Architecture: all
Multi-Arch: foreign
Version: 113.118
Description: No-install

Package: sudo
Status: install ok installed
Priority: important
Section: admin
Installed-Size: 0
Maintainer: Debian Adduser Developers <[email protected]>
Architecture: all
Multi-Arch: foreign
Version: 113.118
Description: No-install
EOF

exit
grub-install --boot-directory=@/boot/ /dev/$blkdev
init 6

apt -yq install --no-install-recommends linux-image-amd64 bash-completion ed btrfs-progs grub-pc iproute2 ssh  smartmontools ntfs-3g net-tools man
exit
grub-install --boot-directory=@/boot/ /dev/$blkdev
init 6

ਇੱਕ ਕਲੱਸਟਰ ਬਣਾਓ

apt -yq install --no-install-recommends gnupg wget ca-certificates
echo 'deb https://download.ceph.com/debian-octopus/ buster main' >> /etc/apt/sources.list
wget -q -O- 'https://download.ceph.com/keys/release.asc' | apt-key add -
apt update
apt -yq install --no-install-recommends ceph-common ceph-mon

echo 192.168.11.11 rbd1 >> /etc/hosts
uuid=`cat /proc/sys/kernel/random/uuid`
cat << EOF > /etc/ceph/ceph.conf
[global]
fsid = $uuid
auth cluster required = cephx
auth service required = cephx
auth client required = cephx
mon allow pool delete = true
mon host = 192.168.11.11
mon initial members = rbd1
mon max pg per osd = 385
osd crush update on start = false
#osd memory target = 2147483648
osd memory target = 1610612736
osd scrub chunk min = 1
osd scrub chunk max = 2
osd scrub sleep = .2
osd pool default pg autoscale mode = off
osd pool default size = 1
osd pool default min size = 1
osd pool default pg num = 1
osd pool default pgp num = 1
[mon]
mgr initial modules = dashboard
EOF

ceph-authtool --create-keyring ceph.mon.keyring --gen-key -n mon. --cap mon 'allow *'
ceph-authtool --create-keyring ceph.client.admin.keyring --gen-key -n client.admin --cap mon 'allow *' --cap osd 'allow *' --cap mds 'allow *' --cap mgr 'allow *'
cp ceph.client.admin.keyring /etc/ceph/
ceph-authtool --create-keyring bootstrap-osd.ceph.keyring --gen-key -n client.bootstrap-osd --cap mon 'profile bootstrap-osd' --cap mgr 'allow r'
cp bootstrap-osd.ceph.keyring /var/lib/ceph/bootstrap-osd/ceph.keyring
ceph-authtool ceph.mon.keyring --import-keyring /etc/ceph/ceph.client.admin.keyring
ceph-authtool ceph.mon.keyring --import-keyring /var/lib/ceph/bootstrap-osd/ceph.keyring
monmaptool --create --add rbd1 192.168.11.11 --fsid $uuid monmap
rm -R /var/lib/ceph/mon/ceph-rbd1/*
ceph-mon --mkfs -i rbd1 --monmap monmap --keyring ceph.mon.keyring
chown ceph:ceph -R /var/lib/ceph
systemctl enable ceph-mon@rbd1
systemctl start ceph-mon@rbd1
ceph mon enable-msgr2
ceph status

# dashboard

apt -yq install --no-install-recommends ceph-mgr ceph-mgr-dashboard python3-distutils python3-yaml
mkdir /var/lib/ceph/mgr/ceph-rbd1
ceph auth get-or-create mgr.rbd1 mon 'allow profile mgr' osd 'allow *' mds 'allow *' > /var/lib/ceph/mgr/ceph-rbd1/keyring
systemctl enable ceph-mgr@rbd1
systemctl start ceph-mgr@rbd1
ceph config set mgr mgr/dashboard/ssl false
ceph config set mgr mgr/dashboard/server_port 7000
ceph dashboard ac-user-create root 1111115 administrator
systemctl stop ceph-mgr@rbd1
systemctl start ceph-mgr@rbd1

OSD (ਭਾਗ) ਜੋੜਨਾ

apt install ceph-osd

osdnum=`ceph osd create`
mkdir -p /var/lib/ceph/osd/ceph-$osdnum
mkfs -t xfs /dev/sda1
mount -t xfs /dev/sda1 /var/lib/ceph/osd/ceph-$osdnum
cd /var/lib/ceph/osd/ceph-$osdnum
ceph auth get-or-create osd.0 mon 'profile osd' mgr 'profile osd' osd 'allow *' > /var/lib/ceph/osd/ceph-$osdnum/keyring
ln -s /dev/disk/by-partuuid/d8cc3da6-02  block
ceph-osd -i $osdnum --mkfs
#chown ceph:ceph /dev/sd?2
chown ceph:ceph -R /var/lib/ceph
systemctl enable ceph-osd@$osdnum
systemctl start ceph-osd@$osdnum

ਸੰਖੇਪ

CEPH ਦਾ ਮੁੱਖ ਮਾਰਕੀਟਿੰਗ ਫਾਇਦਾ CRUSH ਹੈ - ਡੇਟਾ ਦੀ ਸਥਿਤੀ ਦੀ ਗਣਨਾ ਕਰਨ ਲਈ ਇੱਕ ਐਲਗੋਰਿਦਮ। ਮਾਨੀਟਰ ਇਸ ਐਲਗੋਰਿਦਮ ਨੂੰ ਗਾਹਕਾਂ ਨੂੰ ਵੰਡਦੇ ਹਨ, ਜਿਸ ਤੋਂ ਬਾਅਦ ਗਾਹਕ ਸਿੱਧੇ ਲੋੜੀਂਦੇ ਨੋਡ ਅਤੇ ਲੋੜੀਂਦੇ OSD ਲਈ ਬੇਨਤੀ ਕਰਦੇ ਹਨ। CRUSH ਕੋਈ ਕੇਂਦਰੀਕਰਨ ਯਕੀਨੀ ਨਹੀਂ ਬਣਾਉਂਦਾ। ਇਹ ਇਕ ਛੋਟੀ ਜਿਹੀ ਫਾਈਲ ਹੈ ਜਿਸ ਨੂੰ ਤੁਸੀਂ ਪ੍ਰਿੰਟ ਵੀ ਕਰ ਸਕਦੇ ਹੋ ਅਤੇ ਕੰਧ 'ਤੇ ਲਟਕ ਸਕਦੇ ਹੋ। ਅਭਿਆਸ ਨੇ ਦਿਖਾਇਆ ਹੈ ਕਿ CRUSH ਇੱਕ ਸੰਪੂਰਨ ਨਕਸ਼ਾ ਨਹੀਂ ਹੈ। ਜੇਕਰ ਤੁਸੀਂ ਸਾਰੇ OSD ਅਤੇ CRUSH ਨੂੰ ਰੱਖ ਕੇ ਮਾਨੀਟਰਾਂ ਨੂੰ ਨਸ਼ਟ ਅਤੇ ਮੁੜ-ਬਣਾਉਂਦੇ ਹੋ, ਤਾਂ ਇਹ ਕਲੱਸਟਰ ਨੂੰ ਬਹਾਲ ਕਰਨ ਲਈ ਕਾਫ਼ੀ ਨਹੀਂ ਹੈ। ਇਸ ਤੋਂ ਇਹ ਸਿੱਟਾ ਕੱਢਿਆ ਜਾਂਦਾ ਹੈ ਕਿ ਹਰੇਕ ਮਾਨੀਟਰ ਪੂਰੇ ਕਲੱਸਟਰ ਬਾਰੇ ਕੁਝ ਮੈਟਾਡੇਟਾ ਸਟੋਰ ਕਰਦਾ ਹੈ। ਇਸ ਮੈਟਾਡੇਟਾ ਦੀ ਛੋਟੀ ਮਾਤਰਾ ਕਲੱਸਟਰ ਦੇ ਆਕਾਰ 'ਤੇ ਪਾਬੰਦੀਆਂ ਨਹੀਂ ਲਗਾਉਂਦੀ, ਪਰ ਉਹਨਾਂ ਦੀ ਸੁਰੱਖਿਆ ਨੂੰ ਯਕੀਨੀ ਬਣਾਉਣ ਦੀ ਲੋੜ ਹੁੰਦੀ ਹੈ, ਜੋ ਫਲੈਸ਼ ਡਰਾਈਵ 'ਤੇ ਸਿਸਟਮ ਨੂੰ ਸਥਾਪਿਤ ਕਰਕੇ ਡਿਸਕ ਬਚਤ ਨੂੰ ਖਤਮ ਕਰਦਾ ਹੈ ਅਤੇ ਤਿੰਨ ਤੋਂ ਘੱਟ ਨੋਡਾਂ ਵਾਲੇ ਕਲੱਸਟਰਾਂ ਨੂੰ ਬਾਹਰ ਕੱਢਦਾ ਹੈ। ਵਿਕਲਪਿਕ ਵਿਸ਼ੇਸ਼ਤਾਵਾਂ ਦੇ ਸਬੰਧ ਵਿੱਚ ਵਿਕਾਸਕਾਰ ਦੀ ਹਮਲਾਵਰ ਨੀਤੀ। ਨਿਊਨਤਮਵਾਦ ਤੋਂ ਦੂਰ। ਦਸਤਾਵੇਜ਼ "ਸਾਡੇ ਕੋਲ ਜੋ ਕੁਝ ਹੈ ਉਸ ਲਈ ਤੁਹਾਡਾ ਧੰਨਵਾਦ, ਪਰ ਇਹ ਬਹੁਤ ਘੱਟ ਹੈ" ਦੇ ਪੱਧਰ 'ਤੇ ਹੈ। ਘੱਟ ਪੱਧਰ 'ਤੇ ਸੇਵਾਵਾਂ ਨਾਲ ਗੱਲਬਾਤ ਕਰਨ ਦੀ ਯੋਗਤਾ ਪ੍ਰਦਾਨ ਕੀਤੀ ਜਾਂਦੀ ਹੈ, ਪਰ ਦਸਤਾਵੇਜ਼ ਇਸ ਵਿਸ਼ੇ 'ਤੇ ਬਹੁਤ ਜ਼ਿਆਦਾ ਸਤਹੀ ਤੌਰ 'ਤੇ ਛੂਹਦੇ ਹਨ, ਇਸਲਈ ਇਹ ਹਾਂ ਨਾਲੋਂ ਨਾਂਹ ਦੀ ਜ਼ਿਆਦਾ ਸੰਭਾਵਨਾ ਹੈ। ਐਮਰਜੈਂਸੀ ਸਥਿਤੀ ਤੋਂ ਡੇਟਾ ਨੂੰ ਮੁੜ ਪ੍ਰਾਪਤ ਕਰਨ ਦੀ ਅਮਲੀ ਤੌਰ 'ਤੇ ਕੋਈ ਸੰਭਾਵਨਾ ਨਹੀਂ ਹੈ।

ਅਗਲੇਰੀ ਕਾਰਵਾਈ ਲਈ ਵਿਕਲਪ: CEPH ਨੂੰ ਛੱਡ ਦਿਓ ਅਤੇ ਬੈਨਲ ਮਲਟੀ-ਡਿਸਕ btrfs (ਜਾਂ xfs, zfs) ਦੀ ਵਰਤੋਂ ਕਰੋ, CEPH ਬਾਰੇ ਨਵੀਂ ਜਾਣਕਾਰੀ ਲੱਭੋ, ਜੋ ਤੁਹਾਨੂੰ ਨਿਰਧਾਰਤ ਸ਼ਰਤਾਂ ਵਿੱਚ ਇਸਨੂੰ ਚਲਾਉਣ ਦੀ ਇਜਾਜ਼ਤ ਦੇਵੇਗੀ, ਆਪਣੀ ਖੁਦ ਦੀ ਸਟੋਰੇਜ ਨੂੰ ਐਡਵਾਂਸ ਵਜੋਂ ਲਿਖਣ ਦੀ ਕੋਸ਼ਿਸ਼ ਕਰੋ। ਸਿਖਲਾਈ

ਸਰੋਤ: www.habr.com