
II. Mis on suurandmed?
III. Suurandmete tähtsus
IV. Suurandmete nõudlikud olukorrad
V. Kuidas sa saad suurandmeid praegusel hetkel kasutatakse
VI. Suurandmete edasine tee
VII. Suurandmete käigud ja rakendusteadused
VIII. Suurandmete privaatsus ja ohutus
IX. Suurandmete eetika
Tihti esitatavad probleemid
| Teema materjal | Ülesanne |
|---|---|
| Suured teadmised | – Helitugevus |
| Leidlik humanitaarteadused | – Andmete visualiseerimine |
| Analüütilised vastused | – masinõpe |
| Teerajajad | – Andmeteadlased |
| Mavericks | – Mõttejuhid |

II. Mis on suurandmed?
Suurandmed kaasa arvatud termin, mida kasutatakse ettevõtete, organisatsioonide ja üksikisikute genereeritud tõsise andmemahu kirjeldamiseks. See teave võivad pärineda mitmesugustest allikatest, näiteks sotsiaalmeediast, mobiilseadmetest ja anduritest. Suurandmeid iseloomustab peatuvalt nende kogus, määr ja arv.
Suurandmete kogus kasvab plahvatuslikult. 2012. igal aastal genereeris areen 2,5 eksabaiti andmeid päevavalgus. 2024. aastaks peab see valik kätte jõudma 44 eksabaidini päevavalgus. Suureneb võib isegi suurandmete edastamise määr. Enne praegust genereeriti ja töödeldi andmeid arvukalt aeglasemas tempos. Praegusel hetkel genereeritakse ja töödeldakse andmeid reaalajas. See muudab juhtimise ja analüüsimise keerulisemaks.
Suureneb võib isegi suurandmete arv. Enne praegust oli olnud teadmised regulaarselt struktureeritud ja korraldatud. Praegusel hetkel võivad teadmised olla struktureerimata, poolstruktureeritud või isegi voogesitatud. See muudab töötlemise ja analüüsimise keerulisemaks.
Suurandmed esitavad korporatsioonidele ja organisatsioonidele mitmeid väljakutseid. Need nõudlikud olukorrad hõlmavad järgmist:
- Suurandmete salvestamise ja töötlemise hinnad
- Erioskuste soov suurandmete haldamiseks ja analüüsimiseks
- Andmerikkumiste ja privaatsusrikkumiste kummituse oht
- Ettekujutatav erapoolik ja diskrimineerimine suurandmete analüüsis
Olenemata nendele väljakutsetele võivad suurandmed pakkuda korporatsioonidele ja organisatsioonidele võib isegi mitmesuguseid eeliseid. Nende eeliste hulka kuuluvad:
- Kirjeldus klientide käitumisest
- Suurem otsustusvõime
- Uute toodete ja teenuste arendamine
- Kõrgem efektiivsus
Suurandmed kaasa arvatud vapustav seade, mida saab ära kasutada ettevõtete ja organisatsioonide toimivuse parandamiseks. Alternatiivselt sa pead tajuda suurandmete väljakutseid ja eeliseid enne nende kasutamist.
III. Suurandmete tähtsus
Suurandmed kaasa arvatud olulised mitmel põhjusel. Alustama võib-olla lihtsalt see aitama ettevõtetel teha paremaid otsuseid. Suurte andmemahtude analüüsimisel saavad firmad tuvastada suundumusi ja mustreid, mis aitavad neil tooteid ja teenuseid täiustada, turundustegevust tõhusamalt suunata ja oma tegevuse kohta teadlikumaid otsuseid teha.
Teiseks võivad suurandmed aitama valitsustel oma teenuseid täiustada. Uurides andmeid kuritegevuse, liikluse ja muude avalike probleemide kohta, saavad valitsused ilma töötada tõhusamaid poliitikaid ja programme.
Kolmandaks võivad suurandmed aitama parandada meie arusaamist globaalsest. Uurides andmeid kõike ulatudes kliimamuutustest nii palju kui inimeste terviseni, saavad õpilased meid ümbritsevast globaalsest uusi teadmisi.
Lühidalt öeldes kaasa arvatud suurandmed vapustav seade, mida saab ära kasutada meie elustiilid parandamiseks paljul viisil. Kunagi tõttu kogume üha lisa andmeid, tegelikkuses suurandmete kasutusvõimalused lihtsalt kasvavad.

IV. Suurandmete nõudlikud olukorrad
Suurandmetega viidates nõudlikud olukorrad võib-olla lihtsalt jagada kolme põhikategooriasse: tehnilised, organisatsioonilised ja eetilised.
Tehnilised nõudlikud olukorrad hõlmavad vajadust skaleeritava andmete salvestamise ja töötlemise järele, uute andmeanalüüsi tehnikate väljatöötamist ja vajadust kaitsta andmeid volitamata juurdepääsu eest.
Organisatsioonilised nõudlikud olukorrad hõlmavad vajadust arendada andmepõhist kultuuri, soov käidelda andmete haldamist ja privaatsust ning soov integreerida suurandmed olemasolevate ärisüsteemidega.
Eetiliste väljakutsete hulka kuuluvad soov kaitsta isiku privaatsust, soov hoida eemale diskrimineerimist ja soov tagada suurandmete kasutus sotsiaalselt kasulikel eesmärkidel.
Olenemata nendele väljakutsetele kaasa arvatud suurandmetel võimalus millegi jaoks ümber kujundada paljusid tööstusharusid ning luua uusi võimalusi korporatsioonidele ja inimestele.

V. Kuidas sa saad suurandmeid praegusel hetkel kasutatakse
Suurandmeid kasutatakse praegusel hetkel mitmel erineval viisil, koos:
- Ennustav uurimistöö
- Pettuste leidmine
- Klientide segmenteerimine
- Isikupärastamine
- Tarneahela roolimine
- Tervishoid
- Tootmine
- Jaemüük
- Saatmine
Need kaasa arvatud vaid üks kõige näited sellest, õige viis suurandmeid kasutatakse ettevõtete ja organisatsioonide parendamiseks. Kunagi tõttu suurandmete skaala ja tähtsus kasvab jätkuvalt, võimalus oodata veelgi uuenduslikumaid ja murrangulisemaid viise nende kasutatavaks.

6. Big Data Mavericks: Loovkunsti ja analüütiliste lahenduste planeedil liider
Big Data Mavericks: Trailblazing in the World of Creative Arts and Analytical Solutions kaasa arvatud e-raamat, mis uurib suurandmete kasutamist loomekunstis ja analüütilistes lahendustes. Raamatu kaasa arvatud kirjutanud 2 suurandmete valdkonna eksperti, dr Michael Berthold ja dr Bernhard Pfahringer.
E-raamat algab ülevaate andmisega suurandmetest, koos nende määratlusest, omadustest ja väljakutsetest. Seejärel arutlevad autorid suurandmete kasutamise ümber loomingulistes kunstides, nagu laul, film ja pildid. Lisaks uurivad nad suurandmete kasutamist analüütilistes lahendustes, nagu pettuste välja selgitamine ja kliendianalüüs.
Raamatu lõpetab dialoog suurandmete tuleviku ümber loomekunstis ja analüütilistes lahendustes. Autorid väidavad, et suurandmetel kaasa arvatud potentsiaali mõlemas valdkonnas revolutsiooniliselt ümber kujundada ning nad pakuvad mitmeid nõuandeid, õige viis suurandmeid saab ära kasutada uute ja uuenduslike kunstiteoste loomiseks ning keerukate äriprobleemide lahendamiseks.
Big Data Mavericks kaasa arvatud radikaalne ja korralikult kirjutatud e-raamat, mis pakub väärtusliku ülevaate suurandmete kasutamisest loomekunstis ja analüütilistes lahendustes. E-raamat kaasa arvatud nõutav õppimine kõigile, kes vajavad selle areneva valdkonna kohta lisa avastada.
VII. Suurandmete käigud ja rakendusteadused
Olemas olema kaasa arvatud lai valik suurandmete tööriistu ja tehnoloogiaid, millest igaühel kaasa arvatud oma tugevad ja nõrgad servad. Tõenäoliselt kõige tõenäoliselt kõige populaarsemad suurandmete käigud kaasa arvatud järgmised:
- Hadoop
- Kuma
- Taru
- Siga
- Mahout
Neid tööriistu saab ära kasutada mitmesuguste suurandmetega viidates ülesannete täitmiseks, näiteks:
- Andmete kokkukogumine
- Andmete salvestamine
- Andmete töötlemine
- Andmete analüüsimine
- Andmete visualiseerimine
Kogum, milliseid suurandmete tööriistu kasutada, on sõltuv projekti konkreetsetest nõuetest. Näiteks kui missioon nõuaks peen töötlemisraamistikku, võiks olla Hadoop või Spark mõistlik valik. Kui missioon nõuaks andmete päringute tegemiseks SQL-i sarnast liidest, võiks olla Hive või Pig mõistlik valik. Kui missioon nõuaks masinõppe algoritme, võiks olla Mahout mõistlik valik.
Koos nendele üldotstarbelistele suurandmete tööriistadele kaasa arvatud konkreetsete ülesannete jaoks olemas olema võib isegi mitmeid spetsiaalseid suurandmete tööriistu. Näiteks kaasa arvatud olemas käigud andmete visualiseerimiseks, andmete kaevandamiseks ja masinõppeks.
Suurandmete tööriistade ja tehnoloogiate kasutus areneb äkki. Kunagi tõttu uusi suurandmerakendusi arendatakse, luuakse uusi tööriistu ja tehnoloogiaid, mis vastavad nende rakenduste vajadustele.
Suurandmete privaatsus ja ohutus
Suurandmed seavad privaatsusele ja turvalisusele mitmeid väljakutseid, koos:
- Andmemaht muudab jälgimise ja kaitsmise stiilseks
- Andmete edastamise määr muudab ohtudele õigeaegse reageerimise stiilseks
- Andmete arv muudab järjekindlate turvameetmete rakendamise stiilseks
- Andmete õigsus muudab valepositiivsete tulemuste tuvastamise ja leevendamise stiilseks
Suurandmeid koguvad ja kasutavad organisatsioonid on mõeldud alistuma samme, et kaitsta oma andmete privaatsust ja turvalisust, koos:
- Tugevate turvameetmete jõustamine, nagu krüptimine, juurdepääsukontroll ja tulemüürid
- Töötajate koolitamine privaatsus- ja turvapoliitikate osas
- Pakkudes kasutajatele võimaluse oma andmeid käidelda
- Andmekasutuse monitooring kahtlase tegevuse tuvastamiseks
Neid samme astudes saavad organisatsioonid aitama kaitsta oma suurandmete privaatsust ja turvalisust ning maandada nendega viidates riske.
IX. Suurandmete eetika
Suurandmete eetika kaasa arvatud üsna täiesti uus piirkond, mis tegeleb suurandmete tehnoloogiate eetiliste mõjudega. Kunagi tõttu suurandmed muutuvad üha levinumaks, sa pead arvestada võimalike eetiliste probleemidega, mis nende kasutamisest tekkida võivad.
Tõenäoliselt kõige suurandmetega millegagi seoses tõstatatud eetilised küsimused kaasa arvatud järgmised:
- Ettekujutatav diskrimineerimine ja ebaõiglus
- Ettekujutatav privaatsuse rikkumine
- Ettekujutatav turvarikkumine
- Töökohtade kaotamise potentsiaal
- Sotsiaalsete rahutuste võimalus millegi jaoks
Nende eetiliste küsimuste käsitlemine sa pead, et tagada suurandmete aruandekohustuslik ja moraalne kasutus.
Tõenäoliselt kõige taktikad nende eetiliste probleemide lahendamiseks kaasa arvatud järgmised:
- Suurandmete läbipaistva ja vastutustundliku kasutamise tagamine
- Isikute privaatsuse hoidmine
- Suurandmete süsteemide turvalisuse tagamine
- Uute poliitikate ja eeskirjade väljatöötamine suurandmete kasutamise reguleerimiseks
- Avalikkuse juhendamine suurandmete eetiliste mõjude kohta
Nende eetiliste probleemide lahendamisega saame aitama selleks, et suurandmeid kasutatakse viisil, mis toob eelis ühiskonnale ja kaitseb üksikisikute õigusi.
Okei: Mis on suurandmed?
V: Suurandmed kaasa arvatud termin, mida kasutatakse tohutute andmemahtude kirjeldamiseks, mida iga päev luuakse ja salvestatakse. See teave pärinevad mitmesugustest allikatest, koos sotsiaalmeediast, veebikaubandusest ja anduritest. Suurandmeid iseloomustab peatuvalt nende kogus, määr ja arv.
Okei: Mis on suurandmete tähtsus?
V: Suurandmed kaasa arvatud olulised, kunagi tõttu neid saab ära kasutada mitmesugustest äriprobleemidest ülevaate ostmiseks. Näiteks saab Big Data teed kasutades ennustada klientide käitumist, optimeerida turunduskampaaniaid ja parandada tootearendust.
Okei: Milline neist kaasa arvatud suurandmete nõudlikud olukorrad?
V: Suurandmetega viidates nõudlikud olukorrad hõlmavad andmete säilitamise ja töötlemise kulusid, andmete analüüsimiseks vajalikke erioskusi ning privaatsuse ja turvalisuse rikkumisi.
0 Kommentaar