సరిగ్గా 'బిగ్ డేటా' అంటే ఏమిటి?

మరియు ఎందుకు ఇది ఒక పెద్ద ఒప్పందం?

'బిగ్ డేటా' అవగాహన కొత్త శాస్త్రం మరియు నిర్మాణాత్మక డేటా పెద్ద వాల్యూమ్లను అధ్యయనం ద్వారా మానవ ప్రవర్తన అంచనా. బిగ్ డేటాను 'ఊహాత్మక విశ్లేషణలు' అని కూడా పిలుస్తారు.

ట్విట్టర్ పోస్ట్లు విశ్లేషించడం, Facebook ఫీడ్లు, eBay శోధనలు, GPS ట్రాకర్స్, మరియు ATM మెషీన్లు కొన్ని పెద్ద డేటా ఉదాహరణలు. భద్రతా వీడియోలను అధ్యయనం చేయడం, ట్రాఫిక్ డేటా, వాతావరణ నమూనాలు, విమాన రాకపోకలు, సెల్ ఫోన్ టవర్ లాగ్లు మరియు హృదయ స్పందన వాహకాలు ఇతర రూపాలు. బిగ్ డేటా వీక్లీ మారుస్తుంది ఒక దారుణంగా కొత్త సైన్స్, మరియు కేవలం కొన్ని నిపుణులు ఇది అన్ని అర్థం.

రెగ్యులర్ లైఫ్లో బిగ్ డేటా యొక్క కొన్ని ఉదాహరణలు ఏమిటి?

స్క్రీన్షాట్ http://project.wnyc.org/transit-time

చాలా పెద్ద డేటా ప్రాజెక్టులు చాలా అస్పష్టంగా ఉన్నప్పుడు, వ్యక్తిగత డేటా, కంపెనీలు మరియు ప్రభుత్వాల రోజువారీ జీవితాన్ని ప్రభావితం చేసే పెద్ద డేటా విజయవంతమైన ఉదాహరణలు ఉన్నాయి:

సోషల్-పొలిటికల్ డేటా, వాతావరణ మరియు వాతావరణ పరిస్థితులు మరియు ఆసుపత్రి / క్లినికల్ డేటా అధ్యయనం ద్వారా, ఈ శాస్త్రవేత్తలు ఇప్పుడు డెంగ్యూ జ్వరము వ్యాప్తికి 4 వారాల ముందస్తు నోటీసుతో అంచనా వేస్తున్నారు.

హోమిసైడ్ వాచ్: ఈ పెద్ద డేటా ప్రాజెక్ట్ ప్రొఫైల్స్ హత్య బాధితులు, అనుమానితులు, మరియు వాషింగ్టన్, DC లో నేరస్థులు. మరణించినవారిని మరియు ప్రజలకు అవగాహన వనరుగా గౌరవించే విధంగా, ఈ పెద్ద డేటా ప్రాజెక్ట్ ఆకర్షణీయంగా ఉంటుంది.

ట్రాన్సిట్ ట్రావెల్ ప్లానింగ్, NYC: WNYC రేడియో ప్రోగ్రామర్ స్టీవ్ మెలెండేజ్ ప్రయాణ మార్గదర్శిని సాఫ్టువేరుతో ఆన్లైన్ సబ్వే షెడ్యూల్ను మిళితం చేసింది. అతని సృష్టి న్యూయార్క్ వాసులు మ్యాప్లో వారి స్థానాన్ని క్లిక్ చేయటానికి వీలు కల్పిస్తుంది మరియు ట్రైన్స్ మరియు సబ్వేల కోసం ప్రయాణ సమయాన్ని ఊహించవచ్చు.

జిరాక్స్ వారి శ్రామిక నష్టం క్షీణించింది: కాల్ సెంటర్ పని మానసికంగా అలసిపోతుంది. జిరాక్స్ నిపుణుల విశ్లేషకుల సహాయంతో డేటా యొక్క రేమాలను అధ్యయనం చేసాడు, మరియు ఇప్పుడు కాల్ సెంటర్ ఉద్యోగార్ధులు సంస్థతో సుదీర్ఘకాలం ఉండే అవకాశం ఉన్నట్లు వారు అంచనా వేయవచ్చు.

తీవ్రవాద వ్యతిరేక మద్దతు: సోషల్ మీడియా, ఆర్థిక రికార్డులు, ఫ్లైట్ రిజర్వేషన్లు మరియు భద్రతా సమాచారాన్ని అధ్యయనం చేయడం ద్వారా, చట్టవిచారణలు వారి చెడ్డ పనులను చేయడానికి ముందు తీవ్రవాద అనుమానితులను అంచనా వేస్తాయి మరియు గుర్తించవచ్చు.

సోషల్ మీడియా సమీక్షల ఆధారంగా బ్రాండ్ మార్కెటింగ్ సర్దుబాటు : ప్రజలు పబ్, రెస్టారెంట్ లేదా ఫిట్నెస్ క్లబ్లో వారి ఆన్లైన్ ఆలోచనలను అమాయకంగా మరియు త్వరగా భాగస్వామ్యం చేసుకోండి. లక్షలాది సోషల్ మీడియా పోస్టులను అధ్యయనం చేయడం మరియు వారి సేవలను ప్రజలు ఏమనుకుంటున్నారో దానిపై అభిప్రాయాన్ని అందించడం సాధ్యమవుతుంది.

బిగ్ డేటాను ఎవరు ఉపయోగిస్తున్నారు? వారు ఏమి చేస్తారు?

వినియోగదారుల సంతృప్తిని పెంచుకోవడానికి అనేక మోనోలిథిక్ సంస్థలు తమ సమర్పణలు మరియు ధరలను సర్దుబాటు చేయడానికి పెద్ద డేటాను ఉపయోగిస్తాయి.

ఎందుకు బిగ్ డేటా అటువంటి పెద్ద డీల్?

4 విషయాలు పెద్ద డేటా గణనీయంగా తయారు:

1. డేటా భారీ ఉంది. ఇది ఒక హార్డు డ్రైవులో సరిపోదు, చాలా తక్కువ USB స్టిక్ . డేటా యొక్క పరిమాణము మనుషుల మనస్సు ఏది గ్రహించగలదో (బిలియన్ బిలియన్ మెగాబైట్ల గురించి ఆలోచించి, ఆ తరువాత బిలియన్ల సంఖ్యను పెంచండి).

2. డేటా దారుణంగా మరియు నిర్మాణాత్మకంగా ఉంటుంది. పెద్ద డేటా పనిలో 50% నుండి 80% వరకు సమాచారం మార్చడం మరియు శుభ్రపరచడం తద్వారా వెతకడానికి మరియు sortable ఉంది. మా గ్రహం మీద కొన్ని వేలమంది నిపుణులు మాత్రమే ఈ డేటాను ఎలా శుభ్రపరుస్తారో తెలుసుకుంటారు. ఈ నిపుణులకు HPE మరియు హడూప్ లాంటి ప్రత్యేకమైన ఉపకరణాలు కూడా అవసరం. బహుశా 10 సంవత్సరాలలో, పెద్ద డేటా నిపుణులు ఒక డజను ఒక డజను అవుతుంది, కానీ ఇప్పుడు కోసం, వారు విశ్లేషకుడు చాలా అరుదైన జాతులు మరియు వారి పని ఇప్పటికీ చాలా అస్పష్టంగా మరియు దుర్భరమైన ఉంది.

3. అమ్మకం మరియు కొనుగోలు చేయగల ఒక వస్తువు ** సమాచారంగా మారింది. సంస్థలు మరియు వ్యక్తులు సోషల్ మీడియా మరియు ఇతర డేటా యొక్క టెరాబైట్లను కొనుగోలు చేయగల డేటా మార్కెట్లలో ఉన్నాయి. డేటా చాలా క్లౌడ్ ఆధారిత, ఇది ఏ హార్డ్ డిస్క్ లోకి సరిపోయే చాలా పెద్దదిగా ఉంది. డేటాను కొనుగోలు సాధారణంగా ఒక క్లౌడ్ సర్వర్ వ్యవసాయంగా ప్లగ్ చేస్తున్న చందా రుసుముతో ఉంటుంది.

** పెద్ద డేటా టూల్స్ మరియు ఆలోచనలు నాయకులు అమెజాన్, గూగుల్, ఫేస్బుక్, మరియు యాహూ. ఎందుకంటే ఈ సంస్థలు వారి ఆన్లైన్ సేవలతో చాలామంది లక్షలాది వ్యక్తులను అందిస్తాయి, ఎందుకంటే వారు సేకరణ పాయింట్ మరియు పెద్ద డేటా విశ్లేషణల వెనుక ఉన్న ప్రేక్షకులు అని అర్ధమే.

4. పెద్ద డేటా అవకాశాలను అంతులేని ఉన్నాయి. వారు జరగడానికి ముందు వైద్యులు ఒకరోజు వారాల పాటు గుండెపోటులు మరియు స్ట్రోకులు అంచనా వేస్తారు. విమానం మరియు ఆటోమొబైల్ క్రాష్లు వారి యాంత్రిక డేటా మరియు ట్రాఫిక్ మరియు వాతావరణ నమూనాల అంచనా విశ్లేషణ ద్వారా తగ్గించవచ్చు. ఆన్లైన్ డేటింగ్ మీరు కోసం అనుకూల వ్యక్తిత్వాలు ఎవరు పెద్ద డేటా predictors కలిగి ద్వారా అభివృద్ధి చేయవచ్చు. లక్ష్య ప్రేక్షకుల మారుతున్న అభిరుచులకు ఎంత మ్యూజిక్ కూర్పు అనేది చాలా మనోహరమైనది అని సంగీతకారులు గ్రహించవచ్చు. పోషకాహార నిపుణులు స్టోర్-కొన్న ఆహారాల సమ్మేళనం ఒక వ్యక్తి యొక్క వైద్య పరిస్థితులను తీవ్రతరం చేస్తుంది లేదా సహాయం చేస్తుంది అని అంచనా వేయవచ్చు. ఉపరితలం మాత్రమే గీయబడినది, మరియు పెద్ద డేటాలో ఆవిష్కరణలు ప్రతి వారం జరిగేవి.

బిగ్ డేటా మస్సీ

మోంటీ రాకుసేన్ / గెట్టి

బిగ్ డేటా ఊహాత్మక విశ్లేషణలు: భారీ నిర్మాణాత్మక డేటాను శోధించదగిన మరియు sortable ఏదో లోకి మార్పిడి. ఇది ఒక దారుణమైన మరియు అస్తవ్యస్తమైన స్థలం, ఇది ఒక ప్రత్యేక రకమైన జ్ఞానం మరియు సహనం అవసరం.

ఉదాహరణకు ఏకశిలా యుపిఎస్ డెలివరీ సేవ కోసం తీసుకోండి. ట్రాఫిక్ రద్దీకి అనుగుణంగా అత్యంత సమర్థవంతమైన మార్గాలను విశ్లేషించడానికి వారి డ్రైవర్ల GPS మరియు స్మార్ట్ఫోన్ల నుండి UPS అధ్యయన డేటాలో ప్రోగ్రామర్లు. ఈ GPS మరియు స్మార్ట్ఫోన్ డేటా విపరీతమైనది, మరియు విశ్లేషణ కోసం స్వయంచాలకంగా సిద్ధంగా లేదు. ఈ డేటా వివిధ GPS మరియు మ్యాప్ డేటాబేస్ల నుండి వేర్వేరు స్మార్ట్ఫోన్ హార్డ్వేర్ పరికరాల ద్వారా ప్రవాహం చేస్తుంది. UPS విశ్లేషకులు ఆ డేటా మొత్తాన్ని సులభంగా శోధించి, క్రమబద్ధీకరించగల ఫార్మాట్లో మార్చడానికి కొన్ని నెలలు గడిపారు. ప్రయత్నం అయితే, అది విలువ ఉంది. ఈ భారీ డేటా విశ్లేషణలను ఉపయోగించడం ప్రారంభించినప్పటి నుండి, నేడు UPS 8 మిలియన్ల గాలన్ల ఇంధనాన్ని ఆదా చేసింది.

ఎందుకంటే పెద్ద డేటా దారుణంగా ఉంది మరియు శుభ్రపరిచే మరియు వినియోగం కోసం సిద్ధం చేయడానికి చాలా కృషి అవసరం ఎందుకంటే, డేటా శాస్త్రవేత్తలు మారుపేరుతో 'డేటా ద్వారపాలకుడి' వారు చేసిన దుర్భరమైన పని కోసం.

పెద్ద డేటా మరియు ముందస్తు విశ్లేషణల శాస్త్రం ప్రతి వారం అభివృద్ధి చెందుతున్నాయి. 2025 నాటికి ప్రతి ఒక్కరికీ తక్షణమే అందుబాటులో ఉండే పెద్ద డేటాను ఊహించండి.

బిగ్ డేటా గోప్యతకు ఒక అంతర్గత బెదిరింపు కాదు?

ఫీనింగ్ / గెట్టి

అవును, మా చట్టాలు మరియు వ్యక్తిగత గోప్యతా రక్షణలు జాగ్రత్తగా నిర్వహించబడకపోతే, అప్పుడు పెద్ద డేటా వ్యక్తిగత గోప్యతలోకి ప్రవేశిస్తుంది. ఇది ఉన్నట్లుగా, గూగుల్ మరియు యూట్యూబ్ మరియు ఫేస్బుక్ ఇప్పటికే మీ రోజువారీ ఆన్లైన్ అలవాట్లను ట్రాక్ చేస్తాయి . మీ స్మార్ట్ఫోన్ మరియు కంప్యూటింగ్ జీవితం ప్రతి రోజు డిజిటల్ పాదముద్రలు వదిలి, మరియు అధునాతన సంస్థలు ఆ పాదముద్రలను అధ్యయనం చేస్తున్నాయి.

పెద్ద డేటా చుట్టూ ఉన్న చట్టాలు అభివృద్ధి చెందుతాయి. గోప్యత అనేది మీరు ఇప్పుడు వ్యక్తిగత బాధ్యత తీసుకోవలసిన బాధ్యత, మీరు ఇకపై ఇది డిఫాల్ట్ హక్కుగా ఆశిస్తారని.

మీ గోప్యతను రక్షించడానికి మీరు ఏమి చేయవచ్చు?

VPN నెట్వర్క్ కనెక్షన్ను ఉపయోగించి మీ రోజువారీ అలవాట్లను మీ చేతికి తీసుకువెళ్ళడానికి అతిపెద్ద దశ . ఒక VPN సేవ మీ సిగ్నల్ను పోగొట్టుకుంటుంది, తద్వారా మీ గుర్తింపు మరియు స్థానం కనీసం పాక్షికంగా ట్రాకర్ల నుండి మూసివేయబడతాయి. ఇది మీకు 100% అనామకంగా ఉండదు, కానీ మీ ఆన్లైన్ అలవాట్లను ప్రపంచవ్యాప్తంగా ఎలా గుర్తించగలరో VPN గణనీయంగా తగ్గిస్తుంది.

బిగ్ డేటా గురించి మరింత తెలుసుకోవచ్చా?

మోంటీ రస్కస్సెన్ / గెట్టి

పెద్ద డేటా విశ్లేషణాత్మక మనస్సులతో మరియు టెక్ కోసం ఒక ప్రేమ కోసం ఒక ఆకర్షించే విషయం. అది మీరే అయితే, అప్పుడు ఆసక్తికరమైన పేజీలోని పెద్ద డేటా ప్రాజెక్టులని ఖచ్చితంగా సందర్శించండి.