Khủng hoảng dữ liệu trên đường chân trời - Tại sao chúng ta cần suy nghĩ lại về lưu trữ dữ liệu

Tác Giả: Laura McKinney
Ngày Sáng TạO: 3 Tháng Tư 2021
CậP NhậT Ngày Tháng: 1 Tháng BảY 2024
Anonim
Khủng hoảng dữ liệu trên đường chân trời - Tại sao chúng ta cần suy nghĩ lại về lưu trữ dữ liệu - Công Nghệ
Khủng hoảng dữ liệu trên đường chân trời - Tại sao chúng ta cần suy nghĩ lại về lưu trữ dữ liệu - Công Nghệ

NộI Dung


Lấy đi:

Khi dữ liệu đóng vai trò nổi bật hơn bao giờ hết trong thế giới hiện đại, chúng ta cần các giải pháp lưu trữ dữ liệu tốt hơn, hiệu quả hơn và có khả năng hơn

Dữ liệu luôn đóng một vai trò quan trọng trong ngành công nghiệp hiện đại và vai trò đó ngày càng trở nên nổi bật hơn sau mỗi năm.

Gần đây, sự gia tăng của data dữ liệu lớn đã có tác động rất lớn đến ngành công nghiệp. Doanh thu cho phần mềm và dịch vụ được dự đoán sẽ tăng lên 103 tỷ đô la vào năm 2027, tốc độ tăng trưởng kép hàng năm là 11,4%. Dữ liệu liên tục được tung ra khắp mọi nơi, từ các tài khoản truyền thông xã hội của chúng tôi đến các thiết bị chúng tôi sử dụng để khoan dầu, và nó rất có giá trị.

Điều đó có nghĩa là một trong những vấn đề lớn nhất mà công nghệ phải đối mặt trong những năm tới sẽ là làm thế nào để lưu trữ tất cả dữ liệu này, theo cách mà không chỉ an toàn và giá cả phải chăng, mà còn dễ dàng truy cập. Khi số lượng dữ liệu có sẵn tăng lên, chúng tôi cần đảm bảo rằng các hệ thống lưu trữ mà chúng tôi có tại chỗ có thể xử lý được và đã giành được sự sụp đổ của Keith dưới sự căng thẳng.


Tại thời điểm đó, điều đó chứng tỏ khó khăn. Các tùy chọn lưu trữ hiện tại đang vật lộn để xử lý số lượng dữ liệu bùng nổ và khi thời gian trôi qua, điều này sẽ chỉ trở nên khó khăn hơn. Chúng ta cần suy nghĩ lại cách chúng ta xem lưu trữ và đưa ra các giải pháp mới trong một thế giới đang thay đổi.

Trước khi chúng tôi khám phá một số giải pháp cho vấn đề này, trước tiên chúng ta hãy xem xét kỹ hơn các vấn đề với các phương thức lưu trữ tập trung hiện tại.

Tại sao cách tiếp cận hiện tại bị hỏng

Các phương pháp hiện tại để lưu trữ dữ liệu chủ yếu dựa trên các trung tâm dữ liệu lớn, tập trung. Ngay cả lưu trữ đám mây cũng phụ thuộc rất nhiều vào các cơ sở dữ liệu trung tâm khổng lồ này và có tất cả các loại vấn đề với phương pháp này. Bao gồm các:


  • Họ dồn dập và quá khổ. Điều này làm cho chúng tốn kém và tốn thời gian để duy trì, chưa kể tàn phá cho môi trường.
  • Họ dễ bị tấn công và tấn công mạng bởi vì họ có một điểm trung tâm của sự thất bại có thể được nhắm mục tiêu để đưa toàn bộ sự việc xuống. Trên hết, bất kỳ hệ thống kiểm soát tập trung nào cũng có nguy cơ tham nhũng từ bên trong.
  • Họ mạnh mẽ để mở rộng quy mô. Lượng dữ liệu ngoài kia đang tăng theo cấp số nhân và các cơ sở dữ liệu tập trung này sẽ sớm gặp khó khăn khi hoạt động với rất nhiều nhu cầu.

Nó không phải là một tình huống lý tưởng. Nhưng giải pháp gì? Nhiều người tin rằng blockchain, với cách tiếp cận phi tập trung vào lưu trữ, có thể là câu trả lời.

Giải pháp Blockchain

Công nghệ chuỗi khối đã đặt tên của nó là sổ cái làm nền tảng cho Bitcoin và các loại tiền điện tử khác. Nhưng công nghệ này hoạt động với tất cả các loại dữ liệu và nó khác biệt lớn so với các phương thức hiện có do thiếu một điểm trung tâm. Điều này mang lại cho nó một loạt các lợi thế:

Không lỗi, không căng thẳng - Hướng dẫn từng bước của bạn để tạo ra phần mềm thay đổi cuộc sống mà không phá hủy cuộc sống của bạn

Bạn không thể cải thiện kỹ năng lập trình của mình khi không ai quan tâm đến chất lượng phần mềm.

  • Nó bảo mật. Dữ liệu được mã hóa và phân phối trên nhiều nút, tạo thành một mạng phi tập trung không có điểm trung tâm khiến kẻ tấn công khó gây sát thương.
  • Vì ở đó, không có đảng trung ương nào chịu trách nhiệm, nên rất khó tham nhũng một blockchain. Điều này chỉ có thể được thực hiện trong một số mạng bằng cách giành quyền kiểm soát phần lớn các nút, điều này gần như không thể. Nó thật sự dân chủ và có khả năng chống gian lận cao.
  • Nó bất di bất dịch. Điều này có nghĩa là dữ liệu có thể được xử lý hoặc xử lý, nói cách khác, người dùng có thể tin tưởng vào dữ liệu và tính toàn vẹn đằng sau dữ liệu đó.
  • Nó rất nhanh. Bằng cách vẽ trên một mạng lưới các nút lớn thay vì các máy chủ trung tâm, các blockchain có tiềm năng nhanh hơn nhiều so với các phương thức lưu trữ truyền thống, giúp truy cập liền mạch.

Blockchain có vẻ như là một người chiến thắng rõ ràng trong nhiều lĩnh vực, và nó là như vậy. Nhưng cho đến nay, công nghệ đã gặp khó khăn khi lưu trữ dữ liệu quy mô lớn.

Hãy cùng xem Hãy xem tại sao lại như vậy và làm thế nào nó có thể sớm thay đổi.

Các vấn đề về Blockchain - Và cách giải quyết chúng

Theo truyền thống, khi các blockchains đã phát triển để bao gồm ngày càng nhiều dữ liệu, họ đã đấu tranh để mở rộng quy mô. Bitcoin có lẽ là ví dụ rõ ràng nhất về điều này - trong thời gian hoạt động tăng và giá trị cao hơn, thời gian giao dịch và chi phí của nó đã tăng vọt, gây ra vấn đề nghiêm trọng cho người dùng.

Đây là một vấn đề lớn; dữ liệu đang tăng lên mọi lúc và blockchains phải có khả năng thích ứng với nhu cầu lưu trữ và tăng trưởng liên tục này. Nếu blockchains không thể đối phó với khối lượng lớn, thì chúng không phù hợp để sử dụng trong lưu trữ dữ liệu chính. Có một số cách tiếp cận hiện tại và các công ty cố gắng giải quyết vấn đề này.

Chi phí lưu trữ

Mặc dù blockchain có tiềm năng lớn về lưu trữ dữ liệu, trước tiên, công nghệ cần giải quyết các vấn đề của nó với lưu trữ. Khi blockchains bị căng thẳng, chi phí có xu hướng vượt khỏi tầm kiểm soát. Ví dụ, khi Bitcoin trải qua sự bùng nổ giá vào năm ngoái, chi phí giao dịch tăng vọt cao tới $ 50.Điều đó chỉ đủ để đối đầu với sự bùng nổ dữ liệu nằm ở phía trước.

SiaStorj cả hai đều vận hành các mạng lưu trữ lớn dựa trên blockchain nhằm cung cấp lưu trữ dữ liệu nhanh và rẻ mà không cần đến điểm trung tâm hoặc kiểm soát bên thứ ba. Cả hai mạng hoạt động bằng cách phân chia các tệp thành các đoạn, sau đó mã hóa chúng và phân phối chúng trên mạng. Sia đã được triển khai với hơn 130 TB được lưu trữ trên hơn 300 người đóng góp. Storj chuẩn bị ra mắt sớm.

Filecoin hoạt động theo cách tương tự, dựa vào các nút trong mạng IFPS mạnh mẽ để phân phối các tệp của nó. Công ty đã huy động được hơn 250 triệu đô la và hiện đang phát triển tiếp thị phi tập trung để lưu trữ dữ liệu.

Bảo mật dữ liệu và khả năng mở rộng

Đối với bất kỳ hệ thống lưu trữ dữ liệu, bảo mật phải là tối quan trọng. Các mô hình dựa trên đám mây hiện tại, giống như các mô hình do Google và Amazon cung cấp, ưu tiên bảo mật, nhưng bản chất tập trung của chúng khiến chúng gặp bất lợi vì chúng được xây dựng xung quanh điểm trung tâm của sự thất bại và để lại dữ liệu cho người dùng trong tay công ty.

Công nghệ chuỗi khối, thường được ca ngợi vì cấu trúc kín và bảo mật vốn có, là người chiến thắng rõ ràng ở đây.

Nhưng một vấn đề gây khó chịu cho không gian blockchain là vấn đề về khả năng mở rộng. Ethereum và Blockchain, các chuỗi khối lớn nhất, đấu tranh để có được thành hai con số khi nói đến giao dịch mỗi giây. Visa, mặt khác, có thể xử lý 44.000, và một con số khổng lồ 175.000.

Arweave, startup mới đang nổi lên trong hệ sinh thái này, đã đi tiên phong trong cách xử lý dữ liệu mới lạ. Công ty đã tìm ra cách lưu trữ dữ liệu trực tiếp trên chính blockchain, không giống như một số cách tiếp cận khác đối với việc lưu trữ dữ liệu blockchain, dựa trên các giao thức của bên thứ ba được xây dựng dựa trên các blockchain hiện có.

Về cơ bản, khi lượng dữ liệu được lưu trữ trong blockchain tăng lên, việc băm cần thiết cho sự đồng thuận giảm xuống, làm cho nó có khả năng mở rộng cao.

Ngoài ra, nền tảng này sử dụng một cơ chế đồng thuận mới gọi là Proof of Access, nơi các công ty khai thác cạnh tranh để có thể sao chép nhiều dữ liệu nhất. Điều này ít tốn năng lượng hơn nhiều so với các mô hình hiện có như Proof of Work, về cơ bản là phần thưởng cho người khai thác có thể tập trung sức mạnh tính toán nhất.

"Những gì chúng tôi đã thực sự giải quyết được việc lưu trữ dữ liệu trên chuỗi, không giống như các giải pháp khác với mạng phân phối tệp P2P trong nền và sau đó giải quyết thanh toán trực tuyến, chúng tôi đã tạo ra một hệ thống khuyến khích kinh tế tiền điện tử cho phép bạn tăng quy mô blockchain đến kích thước khổng lồ và sau đó phân phối dữ liệu trên tất cả các máy tính ", Sam Williams, CEO của Arweave nói. Cách tiếp cận này cung cấp một cách tốt hơn để lưu trữ dữ liệu của chúng tôi và nó hoạt động trên quy mô lớn.

Hơn thế nữa, nền tảng lưu trữ dữ liệu vĩnh viễn và chỉ yêu cầu một khoản phí một lần từ người dùng. Ở đó, không cần phải bị ràng buộc trong các hợp đồng hàng tháng đắt tiền, một tác dụng phụ không vui của nhiều mô hình lưu trữ đám mây.

Arweave gần đây cũng đã công bố ra mắt Permaweb - một web mới bất biến và phi tập trung cung cấp lưu trữ chi phí thấp, không cần bảo trì, mãi mãi. Nó cung cấp sự tiện lợi, hiệu quả và bảo mật thông tin miễn phí từ các bên thứ ba. Nó cũng đi kèm với chính nó lớp riêng tư, cung cấp thông tin liên lạc an toàn từ bất kỳ lực lượng bên ngoài.

Khi dữ liệu đóng vai trò quan trọng hơn bao giờ hết trong thế giới của chúng ta, chúng ta sẽ cần hướng tới những đổi mới và với những người tiên phong như Arweave, Filecoin, Sia và Storj, 2019 có thể là năm chúng ta tránh xa các phương pháp lưu trữ lỗi thời.