아이들을 위한 MinIo

MinIO는 쉽고 간단하게 오브젝트 스토리지를 정리해야 할 때 탁월한 솔루션입니다. 기본 설정, 많은 플랫폼 및 좋은 성능이 대중적인 사랑 분야에서 제 역할을 다했습니다. 그래서 우리는 한 달 전에 호환성을 선언할 수밖에 없었습니다. Veeam 백업 및 복제와 MinIO. 불변성과 같은 중요한 기능을 포함합니다. 사실 MinIO는 전체적으로 섹션 통합 전용 문서에서.

따라서 오늘 우리는 다음과 같은 방법에 대해 이야기하겠습니다.

• MinIO 설정은 매우 빠릅니다.
• MinIO 설정은 속도는 약간 느리지만 훨씬 좋습니다.
• Veeam SOBR Scalable Repository의 아카이브 계층으로 사용하세요.

너 뭐야?

아직 MinIO를 만나보지 못한 분들을 위한 짧은 소개입니다. 이는 Amazon S3 API와 호환되는 오픈 소스 객체 스토리지입니다. Apache v2 라이센스에 따라 출시되었으며 스파르탄 미니멀리즘 철학을 고수합니다.

즉, 대시보드, 그래프 및 수많은 메뉴가 포함된 거대한 GUI가 없습니다. MinIO는 하나의 명령으로 서버를 시작하기만 하면 S3 API의 모든 기능을 사용하여 데이터를 저장할 수 있습니다. 그러나 이러한 단순성은 사용된 자원에 있어서는 기만적일 수 있다는 점에 유의해야 합니다. RAM과 CPU는 완벽하게 흡수되지만 그 이유는 아래에서 설명합니다. 그건 그렇고, FreeNAS 및 TrueNAS와 같은 결합은 내부적으로 MinIO를 사용합니다.

이번 소개는 여기서 마무리하겠습니다.

MinIO 설정은 매우 빠릅니다.

설정이 너무 빠르므로 Windows 및 Linux용으로 살펴보겠습니다. Docker, Kubernetis, MacOS에 대한 옵션이 있지만 의미는 어디에서나 동일합니다.

그래서 윈도우의 경우 공식 홈페이지에 들어가셔서 https://min.io/download#/windows 최신 버전을 다운로드하세요. 여기에는 시작 지침도 나와 있습니다.

 minio.exe server F:Data

그리고 좀 더 자세한 내용의 링크도 있습니다 퀵 스타트 가이드. 지시 사항을 믿지 않아도 소용이 없으므로 실행하면 다음과 같은 답변을 얻을 수 있습니다.

그게 다야! 스토리지가 작동 중이므로 작업을 시작할 수 있습니다. MinIO가 미니멀하고 제대로 작동한다고 말했을 때 농담이 아니었습니다. 시작 시 제공되는 링크를 따라가면 사용할 수 있는 최대 기능은 버킷을 생성하는 것입니다. 그리고 데이터 쓰기를 시작할 수 있습니다.

Linux 애호가에게는 모든 것이 그다지 단순하지 않습니다. 가장 간단한 지침:

wget https://dl.min.io/server/minio/release/linux-amd64/minio
chmod +x minio
./minio server /data

결과는 이전에 보았던 것과 구별할 수 없을 것입니다. 

MinIO 설정이 좀 더 의미가 깊습니다.

우리가 이해하는 바와 같이, 이전 단락은 테스트 목적으로 애지중지하고 있습니다. 그리고 솔직히 말해서 우리는 테스트를 위해 MinIO를 매우 광범위하게 사용하고 있는데, 이를 인정하는 것이 전혀 부끄럽지 않습니다. 물론 효과는 있지만 테스트벤치 이상으로 이를 견디기엔 아쉽다. 그러므로 우리는 파일을 손에 들고 그것을 염두에 두기 시작합니다.

HTTPS

생산 경로의 첫 번째 필수 단계는 암호화입니다. MiniIO에 인증서를 추가하기 위한 매뉴얼이 네트워크에 이미 백만, 천 개 있지만 일반적인 계획은 다음과 같습니다.

• 인증서 만들기
• Windows의 경우 C:Users%User%.miniocerts에 넣어주세요.
• ${HOME}/.minio/certs에 있는 Linux의 경우 
• 서버 다시 시작

진부한 Let's Encrypt는 지루하고 곳곳에 설명되어 있으므로 우리의 길은 사무라이의 길이므로 Windows의 경우 다운로드합니다. Cygwin에서, Linux의 경우 openssl이 설치되어 있는지 간단히 확인합니다. 그리고 우리는 약간의 콘솔 마법을 수행합니다.

• 키 생성: openssl ecparam -genkey -name prime256v1 | openssl ec -out private.key
• 다음 키를 사용하여 인증서를 생성합니다. openssl req -new -x509 -days 3650 -key private.key -out public.crt
• 위에서 지정한 폴더에 private.key 및 public.crt를 복사합니다.
• MinIO 다시 시작

모든 것이 정상적으로 진행되면 상태에 이와 같은 내용이 나타납니다.

MinIO 삭제 코딩 활성화

먼저, 주제에 관해 몇 마디 말씀드리겠습니다. 간단히 말해서 이는 데이터 손상 및 손실로부터 소프트웨어를 보호하는 것입니다. 습격처럼 훨씬 더 안정적입니다. 클래식 RAID6이 두 개의 디스크를 잃어도 괜찮다면 MinIO는 절반의 손실을 쉽게 처리할 수 있습니다. 해당 기술은 다음 항목에 자세히 설명되어 있습니다. 공식 가이드. 그러나 본질을 취한다면 이것은 Reed-Solomon 코드의 구현입니다. 모든 정보는 패리티 블록이 있는 데이터 블록 형태로 저장됩니다. 그리고 이 모든 것이 이미 여러 번 수행된 것처럼 보이지만 중요한 "그러나"가 있습니다. 즉, 저장된 개체에 대한 패리티 블록과 데이터 블록의 비율을 명시적으로 나타낼 수 있습니다.
1:1을 원하시나요? 제발!
5:2를 원하시나요? 괜찮아요!

한 번에 여러 노드를 사용하고 최대 데이터 보안과 소비된 리소스 간의 균형을 찾으려는 경우 매우 중요한 기능입니다. 기본적으로 MinIO는 N/2 공식(여기서 N은 총 디스크 수)을 사용합니다. N/2 데이터 디스크와 N/2 패리티 디스크 간에 데이터를 분할합니다. 인간의 용어로 번역하면 디스크의 절반을 잃어도 데이터를 복구할 수 있습니다. 이 관계는 다음을 통해 제공됩니다. 스토리지 클래스, 신뢰성과 용량 중 더 중요한 것을 스스로 선택할 수 있습니다.

가이드에서는 다음 예를 제공합니다. 16개 디스크에 설치가 있고 100MB 크기의 파일을 저장해야 한다고 가정합니다. 기본 설정을 사용하면(데이터용 디스크 8개, 패리티 블록용 디스크 8개) 결국 파일은 볼륨의 거의 두 배를 차지하게 됩니다. 200MB. 디스크 비율이 10/6이면 160MB가 필요합니다. 14/2 - 114MB.

RAID와의 또 다른 중요한 차이점은 디스크 오류가 발생하는 경우 MinIO가 개체 수준에서 작동하여 전체 시스템을 중지하지 않고 하나씩 복원한다는 것입니다. 정기 습격에서는 전체 볼륨을 강제로 복원해야 하므로 예측할 수 없는 시간이 소요됩니다. 저자는 두 개의 디스크가 떨어진 후 다시 계산하는 데 일주일 반이 걸렸던 디스크 선반을 기억합니다. 꽤 불쾌했습니다.

그리고 중요한 참고 사항: MinIO는 Erasure Coding을 위한 모든 디스크를 가능한 최대 세트 크기를 사용하여 4~16개 디스크 세트로 나눕니다. 그리고 미래에는 정보의 한 요소가 한 세트에만 저장될 것입니다.

이 모든 것이 매우 멋있게 들리지만 설정하는 것이 얼마나 어려울까요? 한번 살펴보자. 명령을 실행하여 스토리지를 생성해야 하는 디스크를 간단히 나열합니다. 모든 작업이 올바르게 완료되면 보고서에 관련된 디스크 수가 표시됩니다. 그리고 한 번에 하나의 호스트에 디스크의 절반을 추가하는 것은 좋지 않다는 조언이 있습니다. 그렇게 하면 데이터 손실이 발생할 수 있기 때문입니다.

c:minio>minio.exe server F: G: H: I: J: K:

다음으로 MinIO 서버를 관리하고 구성하려면 다운로드할 수 있는 에이전트가 필요합니다. ibid 공식 사이트에서.

주소와 액세스 키를 입력할 때마다 손가락이 마모되지 않도록(그리고 안전하지 않음) 공식 mc 별칭 세트를 처음 사용할 때 즉시 별칭을 생성하는 것이 편리합니다. [귀하의 액세스 키] [귀하의 비밀 키]

mc alias set veeamS3 https://172.17.32.52:9000 YOURS3ACCESSKEY YOURSECERTKE

또는 즉시 호스트를 추가할 수 있습니다.

mc config host add minio-veeam https://minio.jorgedelacruz.es YOURS3ACCESSKEY YOURSECERTKEY

그리고 아름다운 팀과 함께 불변의 버킷을 만들겠습니다.

mc mb --debug -l veeamS3/immutable 

mc: <DEBUG> PUT /immutable/ HTTP/1.1
Host: 172.17.32.52:9000
User-Agent: MinIO (windows; amd64) minio-go/v7.0.5 mc/2020-08-08T02:33:58Z
Content-Length: 0
Authorization: AWS4-HMAC-SHA256 Credential=minioadmin/20200819/us-east-1/s3/aws4_request, SignedHeaders=host;x-amz-bucket-object-lock-enabled;x-amz-content-sha256;x-amz-date, Signature=**REDACTED**
X-Amz-Bucket-Object-Lock-Enabled: true
X-Amz-Content-Sha256: UNSIGNED-PAYLOAD
X-Amz-Date: 20200819T092241Z
Accept-Encoding: gzip
mc: <DEBUG> HTTP/1.1 200 OK
Content-Length: 0
Accept-Ranges: bytes
Content-Security-Policy: block-all-mixed-content
Date: Wed, 19 Aug 2020 09:22:42 GMT
Location: /immutable
Server: MinIO/RELEASE.2020-08-16T18-39-38Z
Vary: Origin
X-Amz-Request-Id: 162CA0F9A3A3AEA0
X-Xss-Protection: 1; mode=block
mc: <DEBUG> Response Time:  253.0017ms

--디버그 최종 메시지뿐만 아니라 더 자세한 정보도 볼 수 있습니다. 

-l —with-lock을 의미하며 불변성을 의미합니다.

이제 웹 인터페이스로 돌아가면 새 버킷이 표시됩니다.

지금은 여기까지입니다. 우리는 안전한 스토리지를 만들었고 Veeam과의 통합으로 나아갈 준비가 되었습니다.

모든 것이 완벽하게 작동하는지 확인할 수도 있습니다.

c:minio>mc admin info veeamS3

●  172.17.32.52:9000
   Uptime: 32 minutes
   Version: 2020-08-16T18:39:38Z
   Network: 1/1 OK
   Drives: 6/6 OK
0 B Used, 1 Bucket, 0 Objects
6 drives online, 0 drives offline

MinIO와 Veeam

경고! 어떤 놀라운 이유로 HTTP를 통해 작업하려는 경우 HKEY_LOCAL_MACHINESOFTWAREVeeamVeeam 백업 및 복제에서 DWORD 키를 생성하세요. SOBRArchiveS3DisableTLS. 값을 1로 설정하고 우리는 그러한 행동을 강력히 승인하지 않으며 누구에게도 권장하지 않는다는 점을 기억하십시오.

다시 한 번 주목하세요! 오해로 인해 Windows 2008 R2를 계속 사용하는 경우 MinIO를 Veeam에 연결하려고 하면 다음과 같은 오류가 발생할 가능성이 높습니다. Amazon S3 엔드포인트에 연결을 설정하지 못했습니다. 이 문제는 공식 패치로 치료할 수 있습니다. Microsoft.

준비가 완료되었습니다. VBR 인터페이스를 열고 백업 인프라 탭으로 이동하여 새 저장소를 추가하기 위한 마법사를 호출하겠습니다.

물론 우리는 객체 스토리지, 즉 S3 Compatible에 관심이 있습니다. 열리는 마법사에서 이름을 설정하고 주소와 계정을 나타내는 단계를 수행합니다. 필요한 경우 스토리지에 대한 요청이 프록시될 게이트를 지정하는 것을 잊지 마십시오.

그런 다음 버킷, 폴더를 선택하고 최근 백업을 변경할 수 없게 만들기 상자를 선택합니다. 아니면 설치하지 않습니다. 하지만 이 기능을 지원하는 저장 시설을 만들었으니, 이를 사용하지 않는 것은 죄악이 될 것입니다.

다음 > 완료하고 결과를 즐기세요.

이제 SOBR 저장소에 용량 계층으로 추가해야 합니다. 이를 위해 새 항목을 만들거나 기존 항목을 편집합니다. 우리는 용량 계층 단계에 관심이 있습니다.

여기서는 작업할 시나리오를 선택해야 합니다. 모든 옵션은 다른 문서에 아주 잘 설명되어 있습니다. 기사, 그러니 반복하지 않겠습니다

마법사가 완료되면 백업 복사 또는 전송 작업이 자동으로 시작됩니다. 그러나 계획에 모든 시스템에 즉시 로드를 배치하는 것이 포함되지 않은 경우 창 버튼 작업에 허용되는 간격을 설정해야 합니다.

물론 별도의 백업 복사 작업도 수행할 수 있습니다. 어떤 사람들은 사격장 작동에 대한 세부 사항을 탐구하고 싶지 않은 사용자에게 다소 더 투명하고 예측 가능하기 때문에 이것이 훨씬 더 편리하다고 생각합니다. 그리고 거기에 충분한 내용이 있으니 다시 한번 위 링크의 해당 글을 추천드립니다.

마지막으로 위험한 질문에 대한 답입니다. 불변 저장소에서 백업을 삭제하려고 하면 어떻게 될까요?

여기에 대한 답변입니다 :

오늘은 그게 다야. 진정한 전통에 따라 해당 주제에 대한 유용한 주제 목록을 확인하세요.

• 수동 Veeam과 함께 MinIO 사용
• 사용예 Office 365용 Veeam Backup이 포함된 MinIO.
• 일반 설정 가이드 Veeam의 S3 XNUMX달러.
• 우리의 지점 포럼 S3 스토리지에 대해

출처 : habr.com