목차
안녕하세요. 오션라이트에이아이 백승기연구원입니다.
머리글
이번 글에서는 빅데이터에 대해서 알아보고 빅데이터와 인공지능과의 관계 그리고 빅데이터의 특성들에 대해서 이야기하도록 하겠습니다.
빅데이터(Big Data)란?
인공지능을 얘기하면서 빠질 수 없는 주제가 하나 있는데 바로 빅데이터입니다.
빅데이터(Big Data)는 정제되지 않은 방대하고 복잡한 자료의 모음이며 인공지능이 발전함에 따라 그 중요성이 더욱 부각되고 있습니다.
지금 이 순간에도 새로운 데이터들이 생겨나고 사라지고 있기 때문에 기존의 전통적인 데이터 처리방식으로는 방대한 양의 데이터를 처리하기 힘들거나 불가능에 가까웠지만, 빅데이터의 등장으로 새로운 데이터 처리방식들이 생겨나서 불가능해 보였던 데이터처리를 효과적으로 수행할 수 있게 되었습니다.
그리고 많은 양의 데이터들 중에서 자신이 필요한 데이터를 찾아내는 능력이 필요하고, 데이터들을 가치 있게 사용하는 것 또한 중요한 과제가 되었습니다.
빅데이터의 등장으로 인한 이점
빅데이터의 등장이 가지는 이점에 대해서 알아보겠습니다.
먼저 시간을 절약할 수 있습니다.
빅데이터의 개념과 새로운 데이터처리방식이 생기기 전에는 의사결정, 결과도출에 필요한 데이터의 수집 및 처리가 쉽지 않았습니다.
하지만 데이터 처리방식의 등장으로 이전보다 훨씬 효율적이고 신속하게 의사결정과 결과도출을 해낼 수 있게 되었습니다.
다음은 비용을 절약할 수 있습니다.
빅데이터의 등장으로 인해 데이터를 처리하는 기술이 더욱 발전하게 되었고, 이러한 기술들을 활용하여 데이터 저장, 처리, 분석을 좀 더 효과적으로 할 수 있게 되었습니다.
마지막으로 서비스 제공자와 소비자들의 관계를 이전보다 효과적으로 맺을 수 있게 되었습니다.
빅데이터 이전 서비스 제공자들은 소비자들의 요구에 대해서 자료의 부족으로 인해 쉽게 대응할 수 없었고 소비자들 또한 자신들의 요구사항을 서비스 제공자들에게 전달하기 쉽지 않았습니다.
하지만 빅데이터의 등장으로 서비스 제공자들은 효과적으로 데이터를 수집하고 처리할 수 있게 되어 더 나은 서비스를 제공할 수 있게 되었고, 소비자들 또한 양질의 서비스를 제공받을 수 있게 되었습니다.
인공지능과 빅데이터의 관계
위에서 살펴본 빅데이터와 우리가 지난 글에서 보았던 인공지능은 서로 없어서는 안되는 관계라고 할 수 있는데 이에 대해 좀 더 자세히 알아보겠습니다.
인공지능을 활용하기 위해서는 컴퓨터나 기계장치에 들어가야하는 정보, 즉 데이터의 유무가 중요합니다. 이러한 데이터를 충분히 제공해 줄 수 있는 것이 빅데이터라고 할 수 있습니다.
빅데이터 또한 데이터 자체만으로는 아무런 가치가 없고 데이터를 활용할 수 있는 방안을 찾아야 하는데 인공지능이 이러한 활용에 대한 문제점을 해결해 줄 수 있었습니다.
따라서 인공지능과 빅데이터는 서로의 필요한 부분을 채워주는 관계라고 할 수 있습니다.
빅데이터의 특성(5V)
빅데이터가 가지고 있는 특성은 크게 5가지가 있으며 이를 5V라고 합니다. 이러한 특성은 현재 6V, 7V로 늘어날 만큼 변화하고 있으나 지금은 5가지 특성만을 알아보려고 합니다.
1) 속도(Velocity)
새로운 데이터가 생겨나고 처리되는 속도에 관한 것입니다. 지금 글을 쓰고 있는 이 순간에도 데이터가 빠르게 생겨나고 처리되고 있습니다.
2) 크기(Volume)
데이터의 양에 관한 것을 나타냅니다. 전세계의 많은 사람들이 만들어내고 있는 데이터들은 새로운 처리기술을 요구할 만큼 커지고 있습니다.
3) 다양성(Variety)
생겨나는 데이터들의 다양성에 관한 것입니다. 새롭고 많은 데이터들이 생겨나고 처리되고 있지만 그 데이터들은 각기 다른 종류의 것들이라고 할 수 있습니다.
4) 가치(Value)
앞서 설명했다시피 데이터는 그 자체로 가치를 지니지는 않습니다. 이러한 데이터들을 수집하고 처리하는 과정에서 가치를 부여하는 것을 뜻합니다.
5) 진실성(Veracity)
무수히 많은 데이터들이 모두 참 혹은 거짓이라고 할 수는 없습니다. 이러한 데이터들을 수집하고 분석하여 데이터에 대한 신뢰성, 타당성 등을 고려하여야 합니다.
마치며
다음 글에서는 빅데이터의 종류와 데이터 수집위치에 따른 분류에 대해서 알아보도록 하겠습니다.
'바삭한 인공지능' 카테고리의 다른 글
| 바삭한 인공지능(분류알고리즘 종류) (0) | 2023.01.11 |
|---|---|
| 바삭한 인공지능(ML 이란? / 회귀와 분류) (0) | 2023.01.11 |
| 바삭한 인공지능(분산처리기술) (0) | 2023.01.11 |
| 바삭한 인공지능(빅데이터의 종류) (0) | 2023.01.11 |
| 바삭한 인공지능(AI, ML, DL에 대하여...) (0) | 2023.01.11 |
댓글