ఫైర్‌హోస్‌ను ఉపయోగించడం: స్ట్రీమింగ్ అనలిటిక్స్ నుండి వ్యాపార విలువను పొందడం: వెబ్‌నార్ ట్రాన్స్క్రిప్ట్

రచయిత: Louise Ward
సృష్టి తేదీ: 5 ఫిబ్రవరి 2021
నవీకరణ తేదీ: 17 మే 2024
Anonim
స్ట్రీమ్ వర్క్ కలల పని చేస్తుంది: Google క్లౌడ్‌లో స్ట్రీమింగ్ అనలిటిక్స్
వీడియో: స్ట్రీమ్ వర్క్ కలల పని చేస్తుంది: Google క్లౌడ్‌లో స్ట్రీమింగ్ అనలిటిక్స్

Takeaway: హోస్ట్ రెబెకా జోజ్వియాక్ అగ్ర పరిశ్రమ నిపుణులతో స్ట్రీమింగ్ విశ్లేషణలను చర్చిస్తారు.




మీరు ప్రస్తుతం లాగిన్ కాలేదు. దయచేసి వీడియోను చూడటానికి లాగిన్ అవ్వండి లేదా సైన్ అప్ చేయండి.

రెబెకా జోజ్వియాక్: లేడీస్ అండ్ జెంటిల్మెన్, హలో మరియు 2016 హాట్ టెక్నాలజీస్ కు స్వాగతం! నేటి శీర్షిక “హార్స్‌సింగ్ ది ఫైర్‌హోస్: స్ట్రీమింగ్ అనలిటిక్స్ నుండి వ్యాపార విలువను పొందడం.” ఇది రెబెకా జోజ్వియాక్. మా ప్రియమైన ఎరిక్ కవనాగ్ ఇక్కడ లేనప్పుడు వెబ్‌కాస్ట్ హోస్ట్ కోసం నేను రెండవ స్థానంలో ఉన్నాను, కాబట్టి ఈ రోజు మీలో చాలా మందిని చూడటం ఆనందంగా ఉంది.

ఈ ఎపిసోడ్ మన ఇతరులకు కొద్దిగా భిన్నంగా ఉంటుంది. మేము రకమైన వేడి గురించి మాట్లాడాము మరియు ఈ సంవత్సరం వేడిగా ఉంటుంది. గత కొన్నేళ్లుగా వేడిగా ఉంది. ఎల్లప్పుడూ క్రొత్త విషయాలు బయటకు వస్తాయి. ఈ రోజు, మేము స్ట్రీమింగ్ విశ్లేషణల గురించి మాట్లాడుతున్నాము. స్ట్రీమింగ్ అనలిటిక్స్ కొత్తది. వాస్తవానికి స్ట్రీమింగ్, సెంటర్ డేటా, RFID డేటా, అవి కొత్తవి కావు. కానీ డేటా ఆర్కిటెక్చర్ల విషయంలో, మేము దశాబ్దాలుగా విశ్రాంతి వద్ద ఉన్న డేటాపై దృష్టి సారించాము. డేటాబేస్లు, ఫైల్ సిస్టమ్స్, డేటా రిపోజిటరీలు - అన్నీ ఎక్కువగా బ్యాచ్ ప్రాసెసింగ్ యొక్క ప్రయోజనం కోసం. కానీ ఇప్పుడు స్ట్రీమింగ్ డేటా, డేటా ఎమోషన్స్ నుండి విలువను సృష్టించే షిఫ్ట్‌తో, కొందరు దీనిని లివింగ్ స్ట్రీమ్స్ అని పిలుస్తారు, వారికి నిజంగా స్ట్రీమ్-బేస్డ్ ఆర్కిటెక్చర్ అవసరం, మనం ఉపయోగించిన మిగిలిన ఆర్కిటెక్చర్లలోని డేటా కాదు మరియు అది సామర్థ్యం కలిగి ఉండాలి వేగంగా తీసుకోవడం, రియల్ టైమ్ లేదా రియల్ టైమ్ ప్రాసెసింగ్ సమీపంలో. ఇది ఇంటర్నెట్ ఆఫ్ థింగ్స్ కోసం మాత్రమే కాకుండా ప్రతిదీ యొక్క ఇంటర్నెట్ను తీర్చగలగాలి.


వాస్తవానికి, ఆదర్శంగా, రెండు నిర్మాణాలు పక్కపక్కనే ఉండటం మంచిది, ఒక చేతిని మరొకటి కడగడం, మాట్లాడటం. రోజుల-పాత డేటా, వారాల-పాత డేటా, సంవత్సరాల-పాత డేటాకు ఇప్పటికీ విలువ, చారిత్రక విశ్లేషణలు, ధోరణి విశ్లేషణలు ఉన్నప్పటికీ, ఇది ఈ రోజుల్లో ప్రత్యక్ష మేధస్సును నడిపించే ప్రత్యక్ష డేటా మరియు అందువల్ల స్ట్రీమింగ్ విశ్లేషణలు చాలా ముఖ్యమైనవి.

నేను ఈ రోజు దాని గురించి ఎక్కువగా మాట్లాడుతున్నాను. మా డేటా సైంటిస్ట్ డెజ్ బ్లాంచ్ఫీల్డ్ ఆస్ట్రేలియా నుండి పిలుస్తున్నారు. ఇప్పుడే అతనికి ఉదయాన్నే. మా చీఫ్ అనలిస్ట్ డాక్టర్ రాబిన్ బ్లూర్ ఉన్నారు. ఇంపెటస్ టెక్నాలజీస్ వద్ద స్ట్రీమ్అనాలిటిక్స్ యొక్క ఉత్పత్తి అధిపతి ఆనంద్ వేణుగోపాల్ చేరారు. వారు నిజంగా ఈ స్థలం యొక్క స్ట్రీమింగ్ అనలిటిక్స్ అంశంపై దృష్టి పెట్టారు.

దానితో, నేను ముందుకు వెళ్లి డెజ్‌కు పంపించబోతున్నాను.

డెజ్ బ్లాంచ్ఫీల్డ్: ధన్యవాదాలు. నేను ఇక్కడ స్క్రీన్ నియంత్రణను పట్టుకుని ముందుకు పాప్ చేయాలి.

రెబెకా జోజ్వియాక్: ఇక్కడ మీరు వెళ్ళండి.

డెజ్ బ్లాంచ్ఫీల్డ్: మేము స్లైడ్‌లను పట్టుకుంటున్నప్పుడు, నేను ప్రధాన అంశాన్ని కవర్ చేద్దాం.


నేను దీన్ని చాలా ఎక్కువ స్థాయిలో ఉంచబోతున్నాను మరియు నేను దానిని సుమారు 10 నిమిషాలు ఉంచుతాను. ఇది చాలా పెద్ద విషయం. స్ట్రీమ్ ప్రాసెసింగ్ అంటే ఏమిటి మరియు మేము అభివృద్ధి చేస్తున్న ప్రస్తుత ఫ్రేమ్‌వర్క్‌లు మరియు అధిక-వాల్యూమ్ స్ట్రీమ్‌లలో విశ్లేషణలు ఏమి చేయాలో అర్థం చేసుకోవడానికి మేము రెండు మూడు రోజులు డైవింగ్ చేసిన ఒక కార్యక్రమంలో పాల్గొన్నాను.

స్ట్రీమింగ్ అనలిటిక్స్ ద్వారా మేము అర్థం ఏమిటో స్పష్టం చేయబోతున్నాము మరియు వ్యాపార విలువలు పొందవచ్చో లేదో పరిశీలిస్తాము ఎందుకంటే ఇది నిజంగా వ్యాపారాలు వెతుకుతున్నది. వారు చాలా త్వరగా మరియు క్లుప్తంగా వారికి వివరించాలని వారు చూస్తున్నారు, మా స్ట్రీమ్ డేటాకు కొన్ని రకాల విశ్లేషణలను వర్తింపజేయడం ద్వారా నేను ఎక్కడ విలువను పొందగలను?

స్ట్రీమింగ్ అనలిటిక్స్ అంటే ఏమిటి?

స్ట్రీమింగ్ అనలిటిక్స్ సంస్థలకు అధిక-వాల్యూమ్ మరియు అధిక-వేగం డేటా నుండి విలువను సంగ్రహించడానికి ఒక మార్గాన్ని ఇస్తుంది. ఇక్కడ ఉన్న ముఖ్యమైన వ్యత్యాసం ఏమిటంటే, మెయిన్‌ఫ్రేమ్ కనుగొనబడినప్పటి నుండి దశాబ్దాలుగా మేము విశ్రాంతితో ప్రాసెస్ చేస్తున్న విశ్లేషణలు మరియు లెన్స్ మరియు డేటా యొక్క వీక్షణలను అభివృద్ధి చేయడంలో మాకు సుదీర్ఘ చరిత్ర ఉంది. గత మూడు నుండి ఐదు సంవత్సరాలలో మనం “వెబ్ స్కేల్” అని పిలిచే భారీ నమూనా మార్పు, నిజ సమయంలో లేదా నిజ సమయంలో మనలోకి వచ్చే డేటా ప్రవాహాలను నొక్కడం మరియు ప్రాసెస్ చేయడం మరియు ఈవెంట్ సహసంబంధం కోసం చూడటం లేదా ఈవెంట్ ప్రేరేపిస్తుంది కాని ఆ స్ట్రీమ్‌లపై నిజంగా వివరణాత్మక, లోతైన విశ్లేషణలను ప్రదర్శిస్తుంది. డేటాను సేకరించడం, ఒకరకమైన రిపోజిటరీ, ఇప్పుడు సాంప్రదాయకంగా పెద్ద డేటాబేస్లు, హడూప్ ప్లాట్‌ఫాం వంటి పెద్ద పెద్ద డేటా ఫ్రేమ్‌వర్క్‌లు మరియు దానిపై బ్యాచ్-మోడ్ ప్రాసెసింగ్ చేయడం మరియు పొందడం వంటి వాటికి ముందు మేము చేస్తున్న పనికి ఇది ఒక ముఖ్యమైన మార్పు. ఒక విధమైన అంతర్దృష్టి.

మేము చాలా త్వరగా చేయటం మరియు చాలా భారీ ఇనుముతో ప్రయత్నించడం చాలా బాగుంది, కాని మేము ఇంకా నిజంగా డేటాను సంగ్రహిస్తున్నాము, నిల్వ చేసి, ఆపై చూస్తూ దానిపై ఒక విధమైన అంతర్దృష్టులను లేదా విశ్లేషణలను పొందుతున్నాము. డేటా స్ట్రీమింగ్ అవుతున్నప్పుడు ఆ విశ్లేషణలను ప్రదర్శించే మార్పు పెద్ద డేటా చుట్టూ జరిగే విషయాల రకానికి చాలా కొత్త మరియు ఉత్తేజకరమైన వృద్ధి ప్రాంతం. సంగ్రహించడానికి, నిల్వ చేయడానికి మరియు ప్రాసెస్ చేయడానికి మరియు విశ్లేషణలను నిర్వహించడానికి దీనికి పూర్తిగా భిన్నమైన విధానం అవసరం.

స్ట్రీమ్‌లో విశ్లేషణలు చేయటానికి షిఫ్ట్ మరియు ఫోకస్ కోసం ఒక ముఖ్య డ్రైవర్ ఏమిటంటే, డేటా మీకు వస్తున్నందున, వ్యాపారానికి సమాచారం అందుబాటులోకి వస్తున్నందున, ఆ అంతర్దృష్టులను వేగంగా మరియు మరింత సులభంగా పొందడం నుండి మీరు గణనీయమైన వ్యాపార విలువను పొందవచ్చు. ఎండ్-ఆఫ్-డే ప్రాసెసింగ్ చేయాలనే ఆలోచన ఇప్పుడు కొన్ని పరిశ్రమలలో సంబంధితంగా లేదు. మేము ఎగిరి విశ్లేషణలను చేయగలగాలి. రోజు చివరినాటికి, రోజు చివరికి చేరుకోవడం మరియు 24 గంటల బ్యాచ్ ఉద్యోగం చేయడం మరియు ఆ అంతర్దృష్టులను పొందడం కంటే ఏమి జరిగిందో మనకు ఇప్పటికే తెలుసు.

స్ట్రీమింగ్ అనలిటిక్స్ అనేది ఆ స్ట్రీమ్‌లోకి కుడివైపు నొక్కడం, అయితే డేటా స్ట్రీమ్‌లు సాధారణంగా చాలా ఎక్కువ డేటా మరియు డేటా యొక్క చాలా స్ట్రీమ్‌లు మా వద్దకు వస్తాయి, చాలా త్వరగా మరియు ఆ స్ట్రీమ్‌లపై అంతర్దృష్టులు లేదా విశ్లేషణలను పొందడం అవి మనకు వ్యతిరేకంగా వచ్చినప్పుడు విశ్రాంతి తీసుకోవడానికి మరియు వాటిపై విశ్లేషణలను అనుమతించడానికి.

నేను చెప్పినట్లుగా, నేను బ్యాచ్ అనలిటిక్స్ అని పిలవబడే దశాబ్దాలు మరియు దశాబ్దాలు ఉన్నాయి. నేను నిజంగా మంచి చిత్రాన్ని ఇక్కడ ఉంచాను. ఇది జీవితకాలం క్రితం RAND కార్పొరేషన్ చేత సృష్టించబడిన ఎగతాళి చేయబడిన కంప్యూటర్ ముందు నిలబడి ఉన్న ఒక పెద్దమనిషి యొక్క చిత్రం మరియు వారు ఇంట్లో ఒక కంప్యూటర్‌ను చూసేలా చూశారు. ఆసక్తికరమైన విషయం ఏమిటంటే, అప్పుడు కూడా, ఈ చిన్న డయల్స్ యొక్క ఈ భావన వారికి ఉంది మరియు ఈ డయల్స్ ఇంటి నుండి వచ్చే సమాచారాన్ని మరియు నిజ సమయంలో ప్రాసెస్ చేయబడుతున్నాయి మరియు ఏమి జరుగుతుందో మీకు తెలియజేస్తాయి. ఒక సాధారణ ఉదాహరణ బారోమెట్రిక్ పీడనం మరియు ఉష్ణోగ్రత యొక్క సమితి, నిజ సమయంలో ఏమి జరుగుతుందో మనం ఎక్కడ చూస్తున్నామో చూడవచ్చు. RAND కార్పొరేషన్ ఆ చిన్న మోకాప్‌ను కలిపి ఉంచినప్పుడు, వారు డేటాను ప్రాసెస్ చేయడం మరియు స్ట్రీమ్ ఫార్మాట్‌లో వస్తున్నందున దానిపై విశ్లేషణలను చేయడం గురించి ఇప్పటికే ఆలోచిస్తున్నారని నేను imagine హించాను. వారు కంప్యూటర్‌లో స్టీరింగ్ వీల్ ఎందుకు పెట్టారో నాకు ఖచ్చితంగా తెలియదు, కానీ అది చాలా బాగుంది.

ఎర్ యొక్క ఆవిష్కరణ నుండి, డేటాను సంగ్రహించడం మరియు దానిపై బ్యాచ్ విశ్లేషణలను నిర్వహించడం మాకు ఉంది. నేను ఇప్పుడు పెద్ద మార్పుతో చెప్పాను మరియు మనందరికీ తెలిసిన వెబ్ స్కేల్ ప్లేయర్స్ ఇష్టాల నుండి మేము చూశాము, అవన్నీ గృహ బ్రాండ్లు మరియు లింక్డ్ఇన్ వంటివి, ఆ సామాజిక వేదికలతో మనకు ఉన్న ఇంటరాక్టివ్ ప్రవర్తన అవసరం బ్యాచ్ మోడ్‌లో సంగ్రహించడం, నిల్వ చేయడం మరియు ప్రాసెస్ చేయడం మాత్రమే కాదు, అవి వాస్తవానికి వచ్చే డేటా ప్రవాహాల నుండి ఫ్లైలో విశ్లేషణలను సంగ్రహించి డ్రైవ్ చేస్తాయి. నేను ఏదో ట్వీట్ చేసినప్పుడు, వారు పట్టుకుని నిల్వ చేసి, తరువాత ఏదో ఒకటి చేయవలసి ఉంటుంది, కానీ వారు దానిని వెంటనే నా స్ట్రీమ్‌లో తిరిగి ఉంచగలుగుతారు మరియు నన్ను అనుసరించే ఇతర వ్యక్తులతో భాగస్వామ్యం చేయవచ్చు. అది బ్యాచ్ ప్రాసెసింగ్ మోడల్.

మేము ఈ మార్గంలో ఎందుకు వెళ్తాము? స్ట్రీమ్ అనలిటిక్స్ యొక్క మార్గాన్ని తగ్గించే సవాలును పరిగణనలోకి తీసుకోవడానికి సంస్థలు సమయం, కృషి మరియు డబ్బును ఎందుకు పెట్టుబడి పెడతాయి? సంస్థలు తమ పరిశ్రమలలో తమ పోటీదారులపై పనితీరును పొందాలనే ఈ భారీ కోరికను కలిగి ఉన్నాయి మరియు సాధారణ స్ట్రీమ్ అనలిటిక్స్ ద్వారా పనితీరు లాభం వేగంగా అమలు చేయవచ్చు మరియు ఇది మేము ఇప్పటికే ఉన్న నిజ-సమయ డేటాను ట్రాక్ చేయడం ద్వారా ప్రారంభించవచ్చు. తెలిసున్నట్లు. గూగుల్ అనలిటిక్స్ యొక్క చిన్న స్క్రీన్ షాట్ నాకు వచ్చింది. వినియోగదారు-గ్రేడ్ విశ్లేషణలను మనకు నిజంగా లభించిన మొదటిసారి ఇది. ప్రజలు మీ వెబ్‌సైట్‌ను సందర్శిస్తున్నప్పుడు మరియు మీ వెబ్‌సైట్‌లో పొందుపరిచిన HTML లో మీ వెబ్‌పేజీ దిగువన ఉన్న జావాస్క్రిప్ట్ యొక్క చిన్న ముక్కతో, మీరు ఈ హిట్ గణనలను పొందుతున్నారు, ఈ చిన్న సంకేతాలు నిజ సమయంలో Google కి తిరిగి తయారు చేయబడ్డాయి మరియు అవి మీ వెబ్‌సైట్‌లోని ప్రతి పేజీ నుండి, మీ వెబ్‌సైట్‌లోని ప్రతి వస్తువు నుండి నిజ సమయంలో వచ్చే డేటా ప్రవాహాలపై విశ్లేషణలను ప్రదర్శిస్తుంది మరియు అవి రియల్ టైమ్ గ్రాఫ్, అందమైన చిన్న హిస్టోగ్రామ్‌లు మరియు లైన్ యొక్క డాష్‌బోర్డ్‌లోని ఈ అందమైన అందమైన వెబ్‌పేజీలో మీకు తిరిగి వస్తాయి. చారిత్రాత్మకంగా మీ పేజీని తాకిన వ్యక్తుల సంఖ్యను మీకు చూపించే గ్రాఫ్, కానీ ప్రస్తుతం ఎంత మంది ఉన్నారో ఇక్కడ ఉంది.

మీరు ఆ స్క్రీన్ షాట్ లో చూడగలిగినట్లుగా, ఇది ప్రస్తుతం 25 అని చెప్పింది. ఆ స్క్రీన్ షాట్ సమయంలో ప్రస్తుతం 25 మంది ఆ పేజీలో ఉన్నారు. వినియోగదారు-గ్రేడ్ అనలిటిక్స్ సాధనంలో మేము ఆడిన మొదటి నిజమైన అవకాశం ఇదే. నేను చాలా మందికి నిజంగా వచ్చింది అనుకుంటున్నాను. ఏమి జరుగుతుందో తెలుసుకునే శక్తిని వారు అర్థం చేసుకున్నారు మరియు దానికి వారు ఎలా స్పందించగలరు. ఏవియానిక్స్, విమానం చుట్టూ ఎగురుతున్నట్లు మనం ఆలోచించినప్పుడు, USA లో మాత్రమే రోజుకు 18,700 దేశీయ విమానాలు ఉన్నాయి. నేను కొంతకాలం క్రితం ఒక కాగితం చదివాను - ఇది సుమారు ఆరు లేదా ఏడు సంవత్సరాల క్రితం - ఆ విమానాల ద్వారా ఉత్పత్తి చేయబడుతున్న డేటా పాత ఇంజనీరింగ్ మోడల్‌లో 200 నుండి 300 మెగాబైట్ల వరకు ఉంటుంది. నేటి విమానాల రూపకల్పనలో, ఈ విమానాలు సుమారు 500 గిగాబైట్ల డేటాను లేదా ప్రతి విమానానికి అర టెరాబైట్ డేటాను ఉత్పత్తి చేస్తున్నాయి.

మీరు మీ తలపై నుండి చాలా త్వరగా గణితాన్ని చేసినప్పుడు, యుఎస్ గగనతలంలో ప్రతి 24 గంటలకు 18,700 దేశీయ విమానాలు, అన్ని ఆధునిక విమానాలు సగం టెరాబైట్‌ను ఉత్పత్తి చేస్తుంటే, అది 43 నుండి 44 పెటాబైట్ల డేటా ద్వారా వస్తుంది విమానాలు గాలిలో ఉన్నప్పుడు ఇది జరుగుతోంది. వారు దిగినప్పుడు ఇది జరుగుతుంది మరియు వారు డేటా డంప్ చేస్తారు. వారు దుకాణంలోకి వెళ్లి, బేరింగ్లు, చక్రాలు మరియు ఇంజిన్‌ల లోపల ఏమి జరుగుతుందో చూడటానికి ఇంజనీరింగ్ బృందాల నుండి పూర్తి డేటా డంప్ చేసినప్పుడు. ఆ డేటాలో కొన్ని నిజ సమయంలో ప్రాసెస్ చేయబడాలి, అందువల్ల విమానం గాలిలో ఉన్నప్పుడు లేదా భూమిలో ఉన్నప్పుడు నిజమైన సమస్య ఉందా అనే దానిపై వారు నిర్ణయాలు తీసుకోవచ్చు. మీరు బ్యాచ్ మోడ్‌లో దీన్ని చేయలేరు. ఫైనాన్స్, హెల్త్, మాన్యుఫ్యాక్చరింగ్ మరియు ఇంజనీరింగ్ చుట్టూ మనం చూసే ఇతర పరిశ్రమలలో, డేటాబేస్లలో నిల్వ చేయబడిన వాటికి విరుద్ధంగా నిజ సమయంలో ఏమి జరుగుతుందో ఈ కొత్త అంతర్దృష్టితో వారు ఎలా పొందవచ్చో కూడా చూస్తున్నారు. పదం.

డేటాతో వ్యవహరించే ఈ భావన కూడా నేను పాడైపోయే మంచి లేదా పాడైపోయే వస్తువు అని పిలుస్తాను - చాలా డేటా కాలక్రమేణా విలువను కోల్పోతుంది. మొబిలిటీ అనువర్తనాలు మరియు సోషల్ మీడియా సాధనాల విషయంలో ఇది మరింత ఎక్కువగా ఉంటుంది, ఎందుకంటే ప్రజలు ఏమి చెబుతున్నారు మరియు ఇప్పుడు ట్రెండింగ్‌లో ఉన్నది మీరు ప్రతిస్పందించాలనుకుంటున్నారు. లాజిస్టిక్స్ మరియు షిప్పింగ్ ఆహారంతో మీరు మా జీవితంలోని ఇతర భాగాల గురించి ఆలోచించినప్పుడు, ఆ కోణంలో పాడైపోయే వస్తువు యొక్క భావనను మేము అర్థం చేసుకున్నాము. కానీ మీ సంస్థ ద్వారా వెళ్ళే డేటా మరియు దాని విలువ గురించి ఆలోచించండి. ఎవరైనా మీతో ప్రస్తుతం కొంత వ్యాపారం చేస్తుంటే మరియు మీరు వారితో నిజ సమయంలో సంభాషించగలిగితే, మీరు ఒక గంట పాటు వేచి ఉండకూడదనుకుంటే, డేటాను సంగ్రహించి హడూప్ వంటి వ్యవస్థలో ఉంచి, ఆపై ఈ బటన్‌ను నొక్కండి, మీరు ఇప్పుడే దీన్ని పరిష్కరించలేరు మరియు మీరు క్లయింట్ యొక్క డిమాండ్ మేరకు వెంటనే దీన్ని చేయగలరు. మీకు వ్యక్తిగతీకరణ ఇవ్వగల ఈ నిజ-సమయ డేటా స్ట్రీమ్ గురించి ప్రజలు మాట్లాడే చోట మీరు ఇప్పుడు చాలా పాప్ అప్ చూస్తారు మరియు మీ వ్యక్తిగత అనుభవానికి మీరు ఉపయోగిస్తున్న సిస్టమ్‌లో వ్యక్తిగతీకరణ ట్యూన్ ఉంది. కాబట్టి మీరు గూగుల్ సెర్చ్ టూల్ వంటి సాధనాన్ని కొట్టినప్పుడు, నేను ఒక ప్రశ్న చేసి, మీరు అదే ప్రశ్న చేస్తే, మేము ఒకే డేటాను పొందలేము. సెలబ్రిటీ అనుభవంగా నేను సూచించేదాన్ని మేము తప్పనిసరిగా పొందుతాము. నేను ఒక్కసారిగా చికిత్స పొందుతున్నాను. వారు నాపై సేకరించిన ప్రొఫైల్స్ మరియు డేటా ఆధారంగా ఈ సిస్టమ్స్‌లో ఏమి జరుగుతుందో నా స్వంత వ్యక్తిగత సంస్కరణను నేను పొందాను మరియు నేను స్ట్రీమ్‌లో నిజ సమయంలో విశ్లేషణలు చేయగలిగాను.

డేటా పాడైపోయే వస్తువుగా ఉండాలనే ఈ ఆలోచన ప్రస్తుతానికి నిజమైన విషయం మరియు కాలక్రమేణా డేటా విలువ తగ్గిపోతున్నది ఈ రోజు మనం వ్యవహరించాల్సిన విషయం. ఇది నిన్నటి విషయం కాదు. నది నుండి బయటకు దూకుతున్న సాల్మొన్‌ను పట్టుకున్న ఎలుగుబంటి యొక్క ఈ చిత్రాన్ని నేను ప్రేమిస్తున్నాను ఎందుకంటే ఇది స్ట్రీమింగ్ విశ్లేషణలను నేను చూసేదాన్ని నిజంగా పెయింట్ చేస్తుంది. ఇది మా వద్దకు వస్తున్న డేటా యొక్క భారీ నది, మీరు కోరుకుంటే ఫైర్‌హోస్, మరియు ఎలుగుబంటి క్రీక్ మధ్యలో కూర్చుని ఉంది. దాని చుట్టూ ఏమి జరుగుతుందనే దానిపై ఇది నిజ-సమయ విశ్లేషణలను చేయబోతోంది, ఆ చేపలను గాలిలో బంధించే సామర్థ్యాన్ని వాస్తవానికి ఇంజనీరింగ్ చేస్తుంది. ఇది స్ట్రీమ్‌లో ముంచడం మరియు ఒకదాన్ని పట్టుకోవడం లాంటిది కాదు. ఈ విషయం గాలిలో దూకుతోంది మరియు ఆ చేపలను పట్టుకోవడానికి సరైన సమయంలో సరైన స్థలంలో ఉండాలి. లేకపోతే, అతను అల్పాహారం లేదా భోజనం పొందడు.

ఒక సంస్థ వారి డేటాతో అదే పని చేయాలనుకుంటుంది. వారు ఇప్పుడు చలనంలో భారీ వాల్యూమ్ల నుండి విలువను సేకరించాలని కోరుకుంటారు. వారు ఆ డేటా మరియు అధిక వేగం డేటాపై విశ్లేషణలు చేయాలనుకుంటున్నారు, కనుక ఇది మా వద్దకు వచ్చే డేటా మొత్తం మాత్రమే కాదు, కానీ దీని నుండి వచ్చే వేగం ఇది. ఉదాహరణకు భద్రతలో, ఇది మీ రౌటర్లు, స్విచ్‌లు, సర్వర్‌లు, ఫైర్‌వాల్‌లు మరియు వాటి నుండి మరియు పదుల నుండి వచ్చే అన్ని సంఘటనలు మరియు వందల వేల పరికరాలు కాకపోయినా, కొన్ని సందర్భాల్లో పాడైపోయే డేటా. మేము ఇంటర్నెట్ ఆఫ్ థింగ్స్ మరియు ఇండస్ట్రియల్ ఇంటర్నెట్‌లో దాని గురించి ఆలోచించినప్పుడు, మేము చివరికి మిలియన్ల గురించి కాకపోయినా బిలియన్ల సెన్సార్ల గురించి మాట్లాడుతున్నాము మరియు విశ్లేషణలు చేస్తున్న డేటా ద్వారా వస్తున్నందున, మేము ఇప్పుడు సంక్లిష్ట సంఘటనల ప్రాసెసింగ్ చేయడం కోసం చూస్తున్నాము మేము ఇంతకు ముందెన్నడూ చూడని పరిమాణం మరియు వేగం యొక్క ఆదేశాల వద్ద మరియు మేము ఈ రోజుతో వ్యవహరించాల్సి ఉంది. మేము దాని చుట్టూ సాధనాలు మరియు వ్యవస్థలను నిర్మించాల్సి ఉంది. ఇది సంస్థలకు నిజమైన సవాలు, ఎందుకంటే ఒక వైపు, DIY చేయడం, మీరే కాల్చడం, వారికి సామర్థ్యం మరియు నైపుణ్యం సమితి మరియు ఇంజనీరింగ్ ఉన్నప్పుడు చాలా పెద్ద బ్రాండ్లు వచ్చాయి. కానీ సగటు సంస్థ కోసం, అది అలా కాదు. వారికి నైపుణ్య సమితులు లేవు. దాన్ని గుర్తించడానికి పెట్టుబడి పెట్టే సామర్థ్యం లేదా సమయం లేదా డబ్బు వారికి లేదు. వీరంతా సమీప-సమయ-నిర్ణయాత్మక భావనను లక్ష్యంగా పెట్టుకున్నారు.

నేను ఎదుర్కొన్న కేసులను వాడండి మరియు అవి మీరు can హించే ప్రతి రంగానికి చెందిన ప్రతి విస్తృత వర్ణపటంలో ఉన్నాయి, ప్రజలు కూర్చుని శ్రద్ధ చూపుతున్నారు మరియు మా స్ట్రీమ్ డేటాకు కొన్ని విశ్లేషణలను ఎలా వర్తింపజేస్తాము? మేము వెబ్-స్థాయి ఆన్‌లైన్ సేవల గురించి మాట్లాడుతాము. సాంప్రదాయ సోషల్ మీడియా ప్లాట్‌ఫారమ్‌లు మరియు ఆన్‌లైన్ ఇ-టైలింగ్ మరియు రిటైలింగ్ - అనువర్తనాలు ఉన్నాయి. వారందరూ ఈ నిజ-సమయ ప్రముఖ అనుభవాన్ని మాకు ఇవ్వడానికి ప్రయత్నిస్తున్నారు. మేము ఎక్కువ టెక్నాలజీ స్టాక్ సేవలు, టెలిఫోన్ సేవలు, వాయిస్ మరియు వీడియోలలోకి ప్రవేశించినప్పుడు, ప్రజలు ఫోన్‌లలో ఫేస్‌టైమ్ చేయడం చుట్టూ తిరుగుతున్నట్లు నేను చూస్తున్నాను. ఇది పేలిపోతోంది. ప్రజలు ఫోన్‌ను తమ ముందు ఉంచుకుంటారని మరియు స్నేహితుడి వీడియో స్ట్రీమ్‌తో మాట్లాడటం ఇకపై వారి చెవికి పట్టుకోకుండా ఉండటానికి ఇది నా మనసును కదిలించింది. కానీ వారు దీన్ని చేయగలరని వారికి తెలుసు మరియు వారు స్వీకరించారు మరియు వారు ఆ అనుభవాన్ని ఇష్టపడ్డారు. ఈ అనువర్తనాల అభివృద్ధి మరియు వీటిని పంపిణీ చేస్తున్న ప్లాట్‌ఫారమ్‌లు ఆ ట్రాఫిక్‌పై మరియు ట్రాఫిక్ యొక్క ప్రొఫైల్‌లపై నిజ-సమయ విశ్లేషణలను చేయవలసి ఉంటుంది, తద్వారా వారు ఆ వీడియోను ఖచ్చితంగా రౌటింగ్ చేయడం వంటి సాధారణ పనులను చేయగలరు, తద్వారా వాయిస్ యొక్క నాణ్యత మీకు లభించే వీడియో మంచి అనుభవాన్ని పొందడానికి సరిపోతుంది. మీరు ఆ విధమైన డేటాను బ్యాచ్ చేయలేరు. ఇది నిజ-సమయ వీడియో స్ట్రీమ్‌ను క్రియాత్మక సేవగా చేయదు.

ఆర్థిక లావాదేవీలలో పాలన సవాలు ఉంది. రోజు చివరికి చేరుకోవడం మరియు స్థలం చుట్టూ ప్రైవేట్ డేటాను తరలించే చట్టాన్ని మీరు ఉల్లంఘించినట్లు తెలుసుకోవడం సరైంది కాదు. ఆస్ట్రేలియాలో, గోప్యతకు సంబంధించిన డేటాను ఆఫ్‌షోర్‌కు తరలించడం అనేది చాలా ఆసక్తికరమైన సవాలు. మీరు నా PID, నా ప్రైవేట్ వ్యక్తిగత గుర్తింపు డేటా, ఆఫ్‌షోర్ తీసుకోలేరు. అలా జరగకుండా ఆపడానికి ఆస్ట్రేలియాలో చట్టాలు ఉన్నాయి. ఆర్థిక సేవలను అందించేవారు, ప్రభుత్వ సేవలు మరియు ఏజెన్సీలు, వారు నా డేటా ప్రవాహాలు మరియు నాతో ఉన్న సూచనలపై నిజ-సమయ విశ్లేషణలు చేయవలసి ఉంటుంది, వారు నాకు అందిస్తున్నది తీరాన్ని విడిచిపెట్టదని నిర్ధారించుకోండి. అన్ని అంశాలు స్థానికంగా ఉండాలి. వారు దీన్ని నిజ సమయంలో చేయాల్సి వచ్చింది. వారు చట్టాన్ని ఉల్లంఘించలేరు మరియు తరువాత క్షమాపణ అడగలేరు. మోసపూరిత గుర్తింపు - ఇది క్రెడిట్ కార్డ్ లావాదేవీలతో మనం విన్న చాలా స్పష్టంగా ఉంది. మేము ఆర్థిక సేవల్లో చేస్తున్న లావాదేవీల రకాలు చాలా వేగంగా మారుతున్నందున, నిజ సమయంలో మోసాలను గుర్తించడంలో పేపాల్ మొదట చేస్తున్న అనేక రకాల పనులు ఉన్నాయి, ఇక్కడ డబ్బు ఒక విషయం నుండి మరొకదానికి మారదు. వ్యవస్థల మధ్య ఆర్థిక లావాదేవీ. ఈబే బిడ్డింగ్ ప్లాట్‌ఫారమ్‌లు, మోసాలను గుర్తించడం స్ట్రీమింగ్ కార్యాలయంలో నిజ సమయంలో చేయాలి.

స్ట్రీమ్‌లలో వెలికితీత మరియు లోడ్ కార్యాచరణను మార్చడానికి ఇప్పుడు ధోరణి ఉంది, కాబట్టి మేము స్ట్రీమ్‌కు వెళ్లే దేనినీ సంగ్రహించాలనుకోవడం లేదు. మేము నిజంగా అలా చేయలేము. మేము ప్రతిదీ సంగ్రహించినట్లయితే డేటా త్వరగా విచ్ఛిన్నం కావాలని ప్రజలు తెలుసుకున్నారు. ఇప్పుడే చేసే ఉపాయం ఏమిటంటే, ఆ ప్రవాహాలపై విశ్లేషణలు చేయడం మరియు దానిపై ETL చేయడం మరియు మీకు కావాల్సినవి, మెటాడేటాను సంగ్రహించడం, ఆపై ప్రిడిక్టివ్ అనలిటిక్స్ను నడపడం, అక్కడ మనం ఏమి చేయబోతున్నామో చెప్పగలిగే చోట మనం ఏమి చేయబోతున్నాం మేము దానిపై చేసిన విశ్లేషణల ఆధారంగా స్ట్రీమ్‌లో చూశాము.

డిమాండ్ ధర నిర్ణయించాలన్న వినియోగదారుల నుండి ఈ భారీ కోరికను ఇంధన మరియు యుటిలిటీ ప్రొవైడర్లు ఎదుర్కొంటున్నారు. నేను ఇంట్లో ఒంటరిగా ఉన్నాను మరియు నేను చాలా పరికరాలను ఉపయోగించడం లేదు కాబట్టి నేను రోజులో ఒక నిర్దిష్ట సమయంలో గ్రీన్ పవర్ కొనాలని నిర్ణయించుకుంటాను. నేను విందు కలిగి ఉంటే, నా పరికరాలన్నింటినీ కలిగి ఉండాలని నేను కోరుకుంటాను మరియు చౌక శక్తిని కొనుగోలు చేసి, అది పంపిణీ చేయబడుతుందని నేను కోరుకుంటున్నాను, కాని ఆ శక్తిని పొందడానికి ఎక్కువ ఖర్చు చెల్లించడానికి సిద్ధంగా ఉన్నాను. ఈ డిమాండ్ ధర ముఖ్యంగా యుటిలిటీస్ మరియు ఎనర్జీ స్పేస్ లో ఇప్పటికే జరిగింది. ఉదాహరణకు ఉబెర్ మీరు ప్రతిరోజూ చేయగలిగే పనులకు ఒక క్లాసిక్ ఉదాహరణ మరియు ఇవన్నీ డిమాండ్ ధరల ద్వారా నడపబడతాయి. నూతన సంవత్సర వేడుకల్లో భారీ డిమాండ్ ఉన్నందున ఆస్ట్రేలియాలో ప్రజలు $ 10,000 ఛార్జీలు పొందటానికి కొన్ని క్లాసిక్ ఉదాహరణలు ఉన్నాయి. వారు ఆ సమస్యను పరిష్కరించారని నేను ఖచ్చితంగా అనుకుంటున్నాను, కాని నేను ఎంత చెల్లించాలో కారులో ఉన్నప్పుడు స్ట్రీమ్ అనలిటిక్స్ నిజ సమయంలో ప్రదర్శించబడతాయి.

ఇంటర్నెట్ ఆఫ్ థింగ్స్ మరియు సెన్సార్ స్ట్రీమ్స్ - మేము దీనిపై ఉపరితలం మాత్రమే గీసుకున్నాము మరియు దీనిపై మేము ప్రాథమిక సంభాషణను కలిగి ఉన్నాము, కాని టెక్నాలజీ దానితో ఎలా వ్యవహరిస్తుందనే దానిపై ఆసక్తికరమైన మార్పును చూస్తాము ఎందుకంటే మీరు మాట్లాడనప్పుడు కేవలం వేల లేదా పదివేల కానీ వందల వేల మరియు బిలియన్ల పరికరాలు మీకు ప్రసారం అవుతున్నాయి, ఇప్పుడు మనకు లభించిన సాంకేతిక స్టాక్లలో ఏదీ దానిని ఎదుర్కోవటానికి ఇంజనీరింగ్ చేయబడలేదు.

భద్రత మరియు సైబర్ రిస్క్ వంటి కొన్ని హాట్ టాపిక్స్ ఉన్నాయి. అవి మాకు చాలా నిజమైన సవాళ్లు. వెబ్‌లో నార్త్ అని పిలువబడే నిజంగా చక్కని సాధనం ఉంది, ఇక్కడ మీరు వెబ్‌పేజీలో కూర్చుని చూడవచ్చు, నిజ సమయంలో జరుగుతున్న వివిధ సైబర్‌టాక్‌లు. మీరు దీన్ని చూసినప్పుడు, “ఓహ్ ఇది మంచి అందమైన చిన్న వెబ్‌పేజీ” అని మీరు అనుకుంటారు, కాని అక్కడ ఐదు నిమిషాల తర్వాత, ప్రపంచంలోని అన్ని విభిన్న పరికరాల యొక్క అన్ని విభిన్న ప్రవాహాలపై సిస్టమ్ విశ్లేషణలు చేస్తున్న డేటా పరిమాణాన్ని మీరు గ్రహిస్తారు. అవి వాటిలో తినిపించబడుతున్నాయి. ఆ రికార్డ్ అంచున వారు ఎలా పని చేస్తున్నారనే దాని గురించి మనస్సును కదిలించడం మొదలవుతుంది మరియు వాస్తవమైన సమయంలో మరియు ఏ రకమైన దాడులపై దాడి చేయాలో మీకు లేదా ఇంకేదైనా చెప్పే సరళమైన చిన్న స్క్రీన్‌ను మీకు అందిస్తుంది. ఈ పేజీని చూడటం ద్వారా మరియు స్ట్రీమ్ అనలిటిక్స్ మీ కోసం నిజ సమయంలో ఏమి చేయగలవనే దాని గురించి మంచి రుచిని పొందడానికి ఇది చాలా చక్కని మార్గం, కేవలం వాల్యూమ్ మరియు స్ట్రీమ్‌లను తీసుకోవడంలో సవాలు, విశ్లేషణలను ప్రశ్నించడం వాటిని మరియు నిజ సమయంలో ప్రాతినిధ్యం వహిస్తుంది.

మిగిలిన సెషన్‌లో నేను కలిగి ఉన్న సంభాషణ నా దృష్టికోణం నుండి ఆ రకమైన విషయాలన్నింటినీ ఒక ఆసక్తికరమైన దృక్పథంతో పరిష్కరించబోతోందని నేను భావిస్తున్నాను, మరియు అది DIY యొక్క సవాలు, దానిని మీరే కాల్చండి, కొన్నింటికి సరిపోతుంది క్లాసిక్ యునికార్న్స్ ఆ రకమైన వస్తువులను నిర్మించగలవు. ఈ ఇంజనీరింగ్ బృందాలను నిర్మించడానికి మరియు వారి డేటా సెంటర్లను నిర్మించడానికి వారికి బిలియన్ డాలర్లు వచ్చాయి. స్ట్రీమ్ అనలిటిక్స్ వ్యాపారంలో విలువను పెంచుకోవాలనుకునే 99.9% సంస్థలకు, వారు ఆఫ్-ది-షెల్ఫ్ సేవను పొందాలి. వారు పెట్టె నుండి ఒక ఉత్పత్తిని కొనవలసి ఉంటుంది మరియు దానిని అమలు చేయడంలో వారికి సహాయపడటానికి వారికి సాధారణంగా కొన్ని కన్సల్టింగ్ సేవ మరియు వృత్తిపరమైన సేవ అవసరం మరియు వారు ఆ విలువను తిరిగి వ్యాపారంలో పొందుతారు మరియు దానిని వ్యాపార పరిష్కారంగా తిరిగి వ్యాపారానికి అమ్ముతారు.

దానితో, రెబెక్కా, నేను మీకు తిరిగి అప్పగించబోతున్నాను, ఎందుకంటే మేము ఇప్పుడు వివరంగా కవర్ చేయబోతున్నామని నేను నమ్ముతున్నాను.

రెబెకా జోజ్వియాక్: అద్భుతమైన. చాలా ధన్యవాదాలు, డెజ్. ఇది గొప్ప ప్రదర్శన.

ఇప్పుడు, నేను బంతిని రాబిన్కు పాస్ చేస్తాను. దాన్ని తీసివేయండి.

రాబిన్ బ్లూర్: సరే. డెజ్ స్ట్రీమ్స్ ప్రాసెసింగ్ యొక్క ఇబ్బందికరమైన స్థితికి వెళ్ళినందున, దాన్ని మళ్ళీ కవర్ చేయడానికి నాకు అర్ధమే లేదు. కాబట్టి నేను పూర్తిగా వ్యూహాత్మక దృక్పథాన్ని తీసుకోబోతున్నాను.నరకం ఏమి జరుగుతుందో దానిపై చాలా ఉన్నత స్థాయి నుండి చూడటం మరియు దానిని ఉంచడం వలన ఇది ప్రజలకు సహాయపడగలదని నేను భావిస్తున్నాను, ముఖ్యంగా మనకు ముందు చాలా లోతులో ప్రాసెసింగ్ ప్రాసెసింగ్‌లో శిబిరం లేని వ్యక్తులు.

స్ట్రీమ్స్ ప్రాసెసింగ్ చాలా కాలంగా ఉంది. మేము దీనిని CEP అని పిలుస్తాము. దీనికి ముందు రియల్ టైమ్ సిస్టమ్స్ ఉన్నాయి. అసలు ప్రాసెస్ కంట్రోల్ సిస్టమ్స్ వాస్తవానికి సమాచార ప్రవాహాలను ప్రాసెస్ చేస్తున్నాయి - ఈ రోజుల్లో ఉన్నంతవరకు ఏమీ జరగలేదు. ఇక్కడ స్లైడ్‌లో మీరు చూసే ఈ గ్రాఫిక్; ఇది వాస్తవానికి చాలా విషయాలను ఎత్తి చూపుతోంది, కానీ అది మరేదైనా పైన మరియు దాటి ఎత్తి చూపుతోంది - ఇక్కడ వివిధ రంగులలో కనిపించే జాప్యం యొక్క స్పెక్ట్రం ఉంది. 1960 లో వచ్చిన కంప్యూటింగ్ లేదా కమర్షియల్ కంప్యూటింగ్ యొక్క ఆవిష్కరణ నుండి వాస్తవానికి ఏమి జరిగిందంటే, ప్రతిదీ ఇప్పుడే వేగంగా మరియు వేగంగా వచ్చింది. మీరు తరంగాలలో ఇష్టపడితే ఇది నిజంగా బయటకు వచ్చే విధానాన్ని బట్టి మేము ఆధారపడగలుగుతాము, ఎందుకంటే ఇది ఇలా ఉంటుంది. ఇది వాస్తవానికి దానిపై ఆధారపడి ఉంటుంది. ఎందుకంటే ఇవన్నీ మూర్స్ చట్టం చేత నడపబడుతున్నాయి మరియు మూర్స్ చట్టం సుమారు ఆరు సంవత్సరాల కాలంలో పది రెట్లు వేగంతో ఉంటుంది. ఒకసారి మేము నిజంగా 2013 కి చేరుకున్నప్పుడు, ఇవన్నీ విరిగిపోయాయి మరియు అకస్మాత్తుగా మేము ఎన్నడూ లేని విధంగా వేగవంతం చేయడం ప్రారంభించాము, ఇది అపూర్వమైనది. వేగం పెరుగుదల పరంగా మేము పది కారకాలను పొందుతున్నాము మరియు అందువల్ల ప్రతి ఆరు సంవత్సరాలకు జాప్యం తగ్గుతుంది. సుమారు 2010 నుండి ఆరు సంవత్సరాలలో, మాకు కనీసం వెయ్యి గుణకాలు వచ్చాయి. ఒకటి కంటే మూడు ఆర్డర్లు.

అదే జరుగుతోంది మరియు అందుకే పరిశ్రమ ఒక విధంగా లేదా మరొక విధంగా అద్భుతమైన వేగంతో కదులుతున్నట్లు కనిపిస్తుంది - ఎందుకంటే. ఈ ప్రత్యేకమైన గ్రాఫిక్ యొక్క అర్ధం ద్వారా వెళుతున్నప్పుడు, ప్రతిస్పందన సమయాలు వాస్తవానికి నిలువు అక్షం క్రింద అల్గోరిథమిక్ స్కేల్‌లో ఉంటాయి. రియల్ టైమ్ కంప్యూటర్ వేగం, మానవులకన్నా వేగంగా ఉంటుంది. ఇంటరాక్టివ్ టైమ్స్ నారింజ. మీరు కంప్యూటర్‌తో సంభాషించేటప్పుడు ఇది నిజంగా పదోవంతు నుండి ఒక సెకను జాప్యం కావాలి. పైన, మీరు కంప్యూటర్‌లో ఏమి చేస్తున్నారనే దాని గురించి మేము నిజంగా ఆలోచించే లావాదేవీలు ఉన్నాయి, కానీ అది పదిహేను సెకన్లలో బయటకు వెళితే అది భరించలేనిదిగా మారుతుంది. ప్రజలు కంప్యూటర్ కోసం వేచి ఉండరు. అంతా బ్యాచ్‌లో జరిగింది. బ్యాచ్‌లో చేసిన చాలా విషయాలు ఇప్పుడు లావాదేవీల స్థలంలోకి, ఇంటరాక్టివ్ ప్రదేశంలోకి లేదా నిజ-సమయ స్థలంలోకి వస్తున్నాయి. ఇంతకుముందు, చాలా తక్కువ మొత్తంలో డేటాతో ఉంగరాలైన మేము వీటిలో కొన్నింటిని చేయగలిగాము, ఇప్పుడు మనం భారీగా స్కేల్ చేయబడిన వాతావరణాన్ని ఉపయోగించి చాలా పెద్ద మొత్తంలో డేటాతో చేయవచ్చు.

కాబట్టి ప్రాథమికంగా, ఇవన్నీ నిజంగా లావాదేవీ మరియు ఇంటరాక్టివ్ మానవ ప్రతిస్పందన సమయాలు అని చెబుతున్నాయి. ప్రస్తుతం స్ట్రీమ్‌లతో ఏమి జరుగుతుందో చాలా భయంకరమైన విషయం ఏమిటంటే, విషయాల గురించి మానవులకు తెలియజేయడం. దానిలో కొన్ని దాని కంటే వేగంగా జరుగుతున్నాయి మరియు ఇది విషయాలను బాగా తెలియజేస్తోంది కాబట్టి ఇది నిజ సమయం. అప్పుడు మేము ఒక రాయి లాగా పడటానికి లైసెన్స్ తీసుకుంటాము, తక్షణ విశ్లేషణలను సాధ్యమయ్యేలా మరియు యాదృచ్ఛికంగా చాలా సరసమైనదిగా చేస్తాము. ఇది వేగం తగ్గడం మాత్రమే కాదు మరియు పైభాగం కూలిపోయింది. వివిధ అనువర్తనాలన్నిటిలో బహుశా వీటన్నిటిలో అతిపెద్ద ప్రభావం, మీరు ఈ అన్ని ic హాజనిత విశ్లేషణలను చేయవచ్చు. నేను ఎందుకు ఒక నిమిషం లో మీకు చెప్తాను.

ఇది హార్డ్‌వేర్ స్టోర్ మాత్రమే. మీకు సమాంతర సాఫ్ట్‌వేర్ వచ్చింది. మేము 2004 లో మాట్లాడుతున్నాము. స్కేల్-అవుట్ ఆర్కిటెక్చర్, మల్టీకోర్ చిప్స్, మెమరీ పెరుగుదల, కాన్ఫిగర్ చేయదగిన CPU. SSD లు ఇప్పుడు స్పిన్నింగ్ డిస్క్ కంటే చాలా వేగంగా వెళ్తాయి. మీరు చాలా చక్కని వేవ్ స్పిన్నింగ్ డిస్క్ వీడ్కోలు చేయవచ్చు. SSD లు బహుళ కోర్లలో ఉన్నాయి, కాబట్టి మళ్ళీ వేగంగా మరియు వేగంగా ఉంటాయి. త్వరలో కనిపించడానికి, మాకు HP నుండి జ్ఞాపకం వచ్చింది. మాకు ఇంటెల్ మరియు మైక్రాన్ నుండి 3D ఎక్స్‌పాయింట్ వచ్చింది. ఆ వాగ్దానం ఏమిటంటే, ఇవన్నీ ఏమైనప్పటికీ వేగంగా మరియు వేగంగా వెళ్తాయి. మీరు నిజంగా రెండు కొత్త మెమరీ టెక్నాలజీల గురించి ఆలోచిస్తున్నప్పుడు, ఈ రెండూ మొత్తం చిన్న చిన్న భాగాన్ని చేస్తాయి, వ్యక్తిగత సర్క్యూట్ బోర్డ్ వేగంగా వెళ్తుంది, మేము దాని ముగింపును కూడా చూడలేదు.

స్ట్రీమ్స్ టెక్నాలజీ, ఇది నిజంగా తదుపరిది, ఇక్కడే ఉంది. కొత్త ఆర్కిటెక్చర్ ఉండాలి. నా ఉద్దేశ్యం ఏమిటంటే డెజ్ తన ప్రదర్శనలో అనేక అంశాలలో ఈ విషయాన్ని ప్రస్తావించాడు. దశాబ్దాలుగా మేము ఆర్కిటెక్చర్‌ను డేటా కుప్పలు మరియు డేటా పైపుల కలయికగా చూశాము. మేము కుప్పలను ప్రాసెస్ చేయడానికి మొగ్గుచూపాము మరియు మేము కుప్పల మధ్య డేటాను పైప్ చేస్తాము. డేటా ప్రవాహాల ప్రాసెసింగ్‌ను డేటా కుప్పలతో కలిపే లాంబ్డా డేటా ఆర్కిటెక్చర్ అని మేము ఇప్పుడు ప్రాథమికంగా కదులుతున్నాము. మీరు చారిత్రక డేటాకు వ్యతిరేకంగా వచ్చే సంఘటనల ప్రవాహాన్ని డేటా ప్రవాహం లేదా డేటా కుప్పగా ప్రాసెస్ చేస్తున్నప్పుడు, లాంబ్డా ఆర్కిటెక్చర్ అంటే నా ఉద్దేశ్యం. ఇది ప్రారంభ దశలో ఉంది. ఇది చిత్రంలోని ఒక భాగం మాత్రమే. డెజ్ కూడా ప్రస్తావించిన ఇంటర్నెట్ ఆఫ్ ఎవ్రీథింగ్ వలె మీరు సంక్లిష్టంగా భావిస్తే, అన్ని రకాల డేటా స్థాన సమస్యలు ఉన్నాయని మీరు గ్రహిస్తారు - మీరు స్ట్రీమ్‌లో ఏమి ప్రాసెస్ చేయాలి అనే నిర్ణయాలు.

నేను ఇక్కడ నిజంగా చెప్పే విషయం ఏమిటంటే, మేము బ్యాచ్‌లో ప్రాసెస్ చేస్తున్నప్పుడు, మేము నిజంగా స్ట్రీమ్‌లను ప్రాసెస్ చేస్తున్నాము. మేము దీన్ని ఒకేసారి చేయలేము. ఒక పెద్ద కుప్ప ఉన్నంత వరకు మేము వేచి ఉండి, ఆపై మేము ఒకేసారి ప్రాసెస్ చేస్తాము. మేము స్ట్రీమ్‌లోని అంశాలను ప్రాసెస్ చేయగల పరిస్థితికి వెళ్తున్నాము. మేము స్ట్రీమ్‌లోని అంశాలను ప్రాసెస్ చేయగలిగితే, అప్పుడు మేము కలిగి ఉన్న డేటా కుప్పలు స్ట్రీమ్‌లోని డేటాను ప్రాసెస్ చేయడానికి మనం సూచించాల్సిన స్టాటిక్ డేటా అవుతుంది.

ఇది మమ్మల్ని ఈ ప్రత్యేకమైన విషయానికి తీసుకువెళుతుంది. బయోలాజికల్ సారూప్యతతో కొంత ప్రదర్శనలో నేను ఇంతకు ముందు ప్రస్తావించాను. ఈ సమయంలో మీరు మనుషులు అని మీరు ఆలోచించాలనుకుంటున్నాను. రియల్ టైమ్ ప్రిడిక్టివ్ ప్రాసెసింగ్ కోసం మాకు మూడు విభిన్న నెట్‌వర్క్‌లు ఉన్నాయి. వాటిని సోమాటిక్, అటానమిక్ మరియు ఎంటర్టిక్ అంటారు. ఎంటర్టిక్ మీ కడుపు. స్వయంప్రతిపత్త నాడీ వ్యవస్థ పోరాటం మరియు విమానాలను చూసుకుంటుంది. ఇది వాస్తవానికి పర్యావరణానికి వేగంగా ప్రతిచర్యలను చూసుకుంటుంది. శరీరం యొక్క కదలికను చూసుకునే సోమాటిక్. అవి రియల్ టైమ్ సిస్టమ్స్. దాని గురించి ఆసక్తికరమైన విషయం - లేదా ఒక రకమైన ఆసక్తికరంగా ఉంటుందని నేను భావిస్తున్నాను - ఇది మీరు .హించిన దానికంటే చాలా ఎక్కువ. మీరు నిజంగా మీ ముఖం నుండి 18 అంగుళాల చుట్టూ ఉన్న స్క్రీన్‌ను చూస్తున్నట్లుగా ఉంది. మీరు స్పష్టంగా చూడగలిగేది, మీ శరీరం స్పష్టంగా చూడగలిగేది 8 × 10 దీర్ఘచతురస్రం గురించి వాస్తవంగా ఉంది. దాని వెలుపల ఉన్న ప్రతిదీ మీ శరీరానికి సంబంధించినంతవరకు అస్పష్టంగా ఉంటుంది, కానీ మీ మనస్సు వాస్తవానికి అంతరాలను నింపుతుంది మరియు అస్పష్టంగా ఉండదు. మీకు అస్పష్టత కనిపించదు. మీరు స్పష్టంగా చూస్తారు. మీరు ఆ స్పష్టతను చూడటానికి మీ మనస్సు వాస్తవానికి డేటా స్ట్రీమ్ యొక్క అంచనా పద్ధతిని చేస్తోంది. ఇది ఒక రకమైన ఆసక్తికరమైన విషయం, అయితే మీరు నిజంగా నాడీ వ్యవస్థ పనిచేసే విధానాన్ని మరియు మనం చుట్టుముట్టడానికి మరియు సహేతుకంగా ప్రవర్తించే విధానాన్ని చూడవచ్చు - మనలో కొంతమంది అయినా - సహేతుకంగా తెలివిగా మరియు అన్ని సమయాలలో విషయాలను మాట్లాడటం లేదు.

ఇవన్నీ ఇక్కడ ఉన్న న్యూరల్ అనలిటిక్స్ స్కేల్ ద్వారా చేయబడతాయి. జరగబోయేది ఏమిటంటే, సంస్థలు ఒకే రకమైన వస్తువులను కలిగి ఉండబోతున్నాయి మరియు అదే రకమైన వస్తువులను నిర్మించబోతున్నాయి మరియు ఇది సంస్థ యొక్క అంతర్గత ప్రవాహాలతో సహా ప్రవాహాల ప్రాసెసింగ్ అవుతుంది - లోపల జరుగుతున్న విషయాలు అది, దాని వెలుపల జరిగే విషయాలు, వాస్తవానికి చేయవలసిన తక్షణ ప్రతిస్పందనలు నిర్ణయాలు తీసుకోవటానికి, ఇవన్నీ జరిగేలా చేయడానికి మానవునికి ఆహారం ఇస్తాయి. నేను చూడగలిగినంతవరకు మేము వెళ్తున్నాం.

దాని పర్యవసానంగా ఉన్న ఒక విషయం ఏమిటంటే, స్ట్రీమింగ్ అనువర్తనం యొక్క స్థాయి బాగా జరుగుతోంది. ఇప్పుడు మనం చూస్తున్న దానికంటే చాలా భయంకరంగా ఉంటుంది. ప్రస్తుతం, మేము స్పష్టంగా చేసే పనులను తక్కువ-వేలాడే పండ్లను ఎంచుకుంటున్నాము.

కాబట్టి ఏమైనప్పటికీ ఇక్కడ ముగింపు. స్ట్రీమింగ్ అనలిటిక్స్ ఒకప్పుడు సముచితమైనది కాని ఇది ప్రధాన స్రవంతిగా మారుతోంది మరియు ఇది త్వరలో సాధారణంగా స్వీకరించబడుతుంది.

దానితో, నేను దానిని రెబెక్కాకు తిరిగి పంపుతాను.

రెబెకా జోజ్వియాక్: చాలా ధన్యవాదాలు, రాబిన్. ఎప్పటిలాగే గొప్ప ప్రదర్శన.

ఆనంద్, మీరు తదుపరి స్థానంలో ఉన్నారు. నేల మీదే.

ఆనంద్ వేణుగోపాల్: ఫన్టాస్టిక్. ధన్యవాదాలు.

నా పేరు ఆనంద్ వేణుగోపాల్ మరియు నేను స్ట్రీమ్అనాలిటిక్స్ కోసం ఉత్పత్తి అధిపతి. ఇది కాలిఫోర్నియాలోని లాస్ గాటోస్ నుండి ఇంపెటస్ టెక్నాలజీస్ అందించే ఉత్పత్తి.

పెద్ద సంస్థలకు పెద్ద డేటా సొల్యూషన్స్ ప్రొవైడర్‌గా ఉండటానికి ప్రేరణ నిజంగా గొప్ప చరిత్రను కలిగి ఉంది. కాబట్టి మేము నిజంగా సేవల సంస్థగా అనేక స్ట్రీమింగ్ అనలిటిక్స్ అమలులను చేసాము మరియు మేము చాలా పాఠాలు నేర్చుకున్నాము. మేము గత రెండు సంవత్సరాల్లో ఒక ఉత్పత్తి సంస్థ మరియు పరిష్కారాల-ఆధారిత సంస్థగా మారడానికి ఒక మార్పు తీసుకున్నాము మరియు స్ట్రీమ్ అనలిటిక్స్ ఇంపెటస్‌ను ఎక్కువగా ఉత్పత్తి-ఆధారిత సంస్థగా మార్చడంలో బాధ్యత వహిస్తుంది. కొన్ని క్లిష్టమైన, చాలా కీలకమైన ఆస్తులు ఉన్నాయి, మా సంస్థలకు మా ఎక్స్పోజర్‌కు కృతజ్ఞతలు ఇంపెటస్ క్లియర్ చేసింది మరియు స్ట్రీమ్అనాలిటిక్స్ వాటిలో ఒకటి.

మేము వ్యాపారంలో 20 సంవత్సరాలు ఉన్నాము మరియు ఉత్పత్తి మరియు సేవల యొక్క గొప్ప మిశ్రమం మాకు భారీ ప్రయోజనాన్ని ఇస్తుంది. స్ట్రీమింగ్ అనాలిటిక్స్ మా మొదటి ఐదు లేదా ఆరు స్ట్రీమింగ్ అమలుల నుండి నేర్చుకున్న అన్ని పాఠాల నుండి పుట్టింది.

నేను కొన్ని విషయాలను తాకుతాను, కాని విశ్లేషకులు, డెజ్ మరియు రాబిన్, స్థలాన్ని మొత్తంగా కవర్ చేయడంలో అద్భుతమైన పని చేసారు, అందువల్ల నేను అతివ్యాప్తి చెందుతున్న చాలా విషయాలను దాటవేయబోతున్నాను. నేను వేగంగా వెళ్తాను. ఎంటర్ప్రైజెస్లో అక్షరాలా చాలా, చాలా ముఖ్యమైన బ్యాచ్ ప్రక్రియలు ఉన్న చాలా బ్యాచ్ త్వరణాన్ని ఉపయోగించి నిజమైన స్ట్రీమింగ్ కేసులతో పాటు మనం చూస్తాము. మీరు చూడగలిగినట్లుగా, ఒక సంఘటనను గ్రహించి, దానిపై విశ్లేషించి, వ్యవహరించే ఈ మొత్తం చక్రం వాస్తవానికి పెద్ద సంస్థలలో వారాలు పట్టవచ్చు మరియు అవన్నీ దీన్ని నిమిషాలు మరియు కొన్నిసార్లు సెకన్లు మరియు మిల్లీసెకన్లకు కుదించడానికి ప్రయత్నిస్తున్నాయి. కాబట్టి ఈ బ్యాచ్ ప్రక్రియల కంటే వేగంగా ఏదైనా వ్యాపార సముపార్జన కోసం అభ్యర్థులు మరియు డేటా విలువ దాని వయస్సుతో గణనీయంగా తగ్గిపోతుందని ఇది చాలా చక్కగా చెప్పవచ్చు, కాబట్టి సెకన్లలో ప్రారంభ భాగంలో ఎక్కువ విలువ ఇప్పుడే జరిగింది. ఆదర్శవంతంగా, ఏమి జరుగుతుందో మీరు could హించగలిగితే, అది అత్యధిక విలువ. అయితే ఇది ఖచ్చితత్వంపై ఆధారపడి ఉంటుంది. తదుపరి అత్యధిక విలువ అది జరుగుతున్నప్పుడు అక్కడే ఉన్నప్పుడు మీరు దాన్ని విశ్లేషించి ప్రతిస్పందించవచ్చు. వాస్తవానికి, ఆ విలువ గణనీయంగా తగ్గుతుంది, ఇది మేము ఉన్న ప్రధాన నిర్బంధ BI.

అది ఆసక్తికరంగా ఉంది. స్ట్రీమింగ్ విశ్లేషణలకు ఎందుకు మీరు నాటకీయంగా శాస్త్రీయ సమాధానం ఆశించవచ్చు. చాలా సందర్భాల్లో, మనం చూస్తున్నది అది ఇప్పుడు సాధ్యమే మరియు బ్యాచ్ పాతదని అందరికీ తెలుసు కాబట్టి, బ్యాచ్ బోరింగ్ మరియు బ్యాచ్ చల్లగా లేదు. స్ట్రీమింగ్ సాధ్యమే మరియు ప్రతిఒక్కరికీ ఇప్పుడు హడూప్ ఉంది అనే వాస్తవం మీద ప్రతి ఒక్కరికి తగినంత విద్య ఉంది. ఇప్పుడు హడూప్ పంపిణీలో స్ట్రీమింగ్ టెక్నాలజీ ఉంది, అది తుఫాను లేదా స్పార్క్ స్ట్రీమింగ్ మరియు కాఫ్కా వంటి క్యూలు.

మేము చూసే సంస్థలు దానిలోకి దూకి ఈ కేసులతో ప్రయోగాలు చేయడం ప్రారంభించాయి మరియు మేము రెండు విస్తృత వర్గాలను చూస్తున్నాము. కస్టమర్ అనలిటిక్స్ మరియు కస్టమర్ అనుభవం మరియు రెండవ కార్యాచరణ తెలివితేటలతో ఒకరికి సంబంధం ఉంది. నేను కొంచెం తరువాత దాని గురించి కొన్ని వివరాలను పొందుతాను. మొత్తం కస్టమర్ సేవ మరియు కస్టమర్ అనుభవ కోణం మరియు మేము ఇంపెటస్ స్ట్రీమ్అనాలిటిక్స్ వద్ద దీన్ని చాలా రకాలుగా చేసాము, ఇది నిజంగా నిజంగానే ఉంది, వినియోగదారుల యొక్క బహుళ-ఛానల్ నిశ్చితార్థాన్ని నిజ సమయంలో సంగ్రహించడం మరియు వారికి చాలా, సున్నితమైన అనుభూతులను ఇస్తుంది ఈ రోజు సాధారణం కాదు. మీరు వెబ్‌లో, బ్యాంక్ ఆఫ్ అమెరికా వెబ్‌సైట్‌లో బ్రౌజ్ చేస్తుంటే, మరియు మీరు కొన్ని ఉత్పత్తులపై పరిశోధనలు చేస్తున్నారు మరియు మీరు కాల్ సెంటర్‌కు కాల్ చేస్తారు. “హే జో, మీరు కొన్ని బ్యాంకింగ్ ఉత్పత్తులపై పరిశోధన చేస్తున్నారని నాకు తెలుసు, నేను నింపాలని మీరు కోరుకుంటున్నారా?” అని వారు చెబుతారా? ఈ రోజు మీరు expect హించరు, కానీ స్ట్రీమింగ్ అనలిటిక్స్ తో ఇది నిజంగా సాధ్యమయ్యే అనుభవం. అనేక సందర్భాల్లో, ఇది చాలా పెద్ద వ్యత్యాసాన్ని కలిగిస్తుంది, ప్రత్యేకించి కస్టమర్ మీ వెబ్‌సైట్‌లో ప్రారంభ ముగింపు నిబంధనలు లేదా ముందస్తు ముగింపు నిబంధనలు మరియు షరతులను చూడటం ద్వారా మీతో వారి ఒప్పందం నుండి బయటపడటానికి మార్గాలను పరిశోధించడం ప్రారంభించి, ఆపై కాల్ చేసి మీరు చేయలేరు దాని గురించి నేరుగా వారిని ఎదుర్కోండి కాని పరోక్షంగా కొన్ని రకాల మొదటి ప్రమోషన్ గురించి ఆఫర్ చేయండి ఎందుకంటే ఈ వ్యక్తి ముందస్తు రద్దును చూస్తున్నాడని వ్యవస్థకు తెలుసు మరియు మీరు ఆ సమయంలో ఆ ఆఫర్ చేస్తే, మీరు ఆ మసకబారిన కస్టమర్‌ను బాగా రక్షించుకోవచ్చు మరియు ఆ ఆస్తిని రక్షించవచ్చు .

ఇది ఒక ఉదాహరణ, ప్లస్ చాలా కస్టమర్ సేవలు అన్నీ చాలా మంచి ఉదాహరణలు. మేము ఈ రోజు అమలు చేస్తున్నాము కాల్ సెంటర్‌లో ఖర్చును తగ్గిస్తుంది అలాగే నాటకీయమైన సంతోషకరమైన కస్టమర్ అనుభవాలను అందిస్తుంది. కొన్ని వినియోగ కేసులను సంగ్రహించడంలో డెజ్ గొప్ప పని చేశాడు. మీరు ఈ చార్టులో కొన్ని నిమిషాలు చూడవచ్చు. నేను దానిని నిలువు వరుసలు, క్షితిజ సమాంతర మరియు కాంబో ప్రాంతాలు, IoT, మొబైల్ అనువర్తనం మరియు కాల్ సెంటర్ అని వర్గీకరించాను. అవన్నీ నిలువు వరుసలు మరియు క్షితిజ సమాంతరాలు. ఇది మీరు ఎలా చూస్తారనే దానిపై ఆధారపడి ఉంటుంది. బాటమ్ లైన్, పరిశ్రమ నిలువు వరుసలలో చాలా సాధారణమైన క్షితిజ సమాంతర ఉపయోగాలను మేము చూస్తాము మరియు ఆర్థిక సేవలు, ఆరోగ్య సంరక్షణ, టెలికాం, తయారీ మొదలైన వాటితో సహా నిలువుగా నిర్దిష్ట ఉపయోగ సందర్భాలు ఉన్నాయి. మీరు నిజంగా మీరే ప్రశ్న అడుగుతుంటే లేదా మీరే చెబితే అది, “ఓహ్, అక్కడ ఏ ఉపయోగ కేసులు ఉన్నాయో నాకు తెలియదు. నా కంపెనీ కోసం లేదా మా సంస్థ కోసం స్ట్రీమింగ్ అనలిటిక్స్లో నిజంగా ఏదైనా వ్యాపార విలువ ఉందో లేదో నాకు తెలియదు, ”గట్టిగా ఆలోచించండి, రెండుసార్లు ఆలోచించండి. ఈ రోజు మీ కంపెనీలో ఉపయోగకరమైన సందర్భాలు ఉన్నందున ఎక్కువ మందితో మాట్లాడండి. వ్యాపార విలువ ఎంత ఖచ్చితంగా ఉద్భవించిందో నేను వ్యాపార విలువలోకి ప్రవేశిస్తాను.

ఇక్కడ పిరమిడ్ దిగువన, మీకు maintenance హాజనిత నిర్వహణ, భద్రత, చర్న్ రక్షణ మొదలైనవి ఉన్నాయి. ఆ రకమైన ఉపయోగ సందర్భాలు ఆదాయాలు మరియు ఆస్తుల రక్షణను కలిగి ఉంటాయి. గంటలు మరియు వారాలలో జరిగిన వారి భద్రతా ఉల్లంఘనను టార్గెట్ రక్షించినట్లయితే, CIO తన ఉద్యోగాన్ని కాపాడుకోవచ్చు. ఇది పదుల లేదా వందల మిలియన్ డాలర్లను ఆదా చేయగలదు. రియల్ టైమ్ స్ట్రీమింగ్ అనలిటిక్స్ నిజంగా ఆ ఆస్తులను రక్షించడంలో మరియు నష్టాలను రక్షించడంలో సహాయపడుతుంది. అక్కడే ప్రత్యక్ష వ్యాపార విలువ జోడించబడింది.

తదుపరి వర్గం మరింత లాభదాయకంగా మారుతోంది, మీ ఖర్చును తగ్గిస్తుంది మరియు ప్రస్తుత ఆపరేషన్ నుండి ఎక్కువ ఆదాయాన్ని పొందుతుంది. ఇది ప్రస్తుత సంస్థ యొక్క సామర్థ్యం. నెట్‌వర్క్ ఎలా ప్రవర్తిస్తుందో, మీ కస్టమర్ కార్యకలాపాలు ఎలా ప్రవర్తిస్తున్నాయో, మీ వ్యాపార ప్రక్రియ ఎలా ప్రవర్తిస్తుందో మరియు మీరు సర్దుబాటు చేయగలుగుతున్నారనే దానిపై మీరు లోతైన అంతర్దృష్టిని పొందుతున్న రియల్ టైమ్ ఆపరేషనల్ ఇంటెలిజెన్స్ అని మేము పిలిచే ఉపయోగ కేసులన్నీ ఇవి. నిజ సమయంలో ఇవన్నీ మీకు అభిప్రాయాన్ని పొందుతాయి, మీకు హెచ్చరికలు వస్తాయి. మీరు నిజ సమయంలో వ్యత్యాసాలు, వైవిధ్యాలను పొందుతారు మరియు మీరు త్వరగా పని చేయవచ్చు మరియు హద్దులు దాటిన ప్రక్రియను వేరు చేయవచ్చు.

మీరు నెట్‌వర్క్ సేవను ఆప్టిమైజ్ చేస్తే అవసరం లేని ఖరీదైన మూలధన నవీకరణలు మరియు అవసరమని మీరు అనుకునే విషయాలలో కూడా మీరు చాలా డబ్బు ఆదా చేయవచ్చు. ఒక పెద్ద టెల్కో వారి నెట్‌వర్క్ మౌలిక సదుపాయాలలో 40 మిలియన్ డాలర్ల అప్‌గ్రేడ్‌ను వాయిదా వేసిన సందర్భం గురించి మేము విన్నాము, ఎందుకంటే వారి ప్రస్తుత ట్రాఫిక్‌ను నిర్వహించడానికి వారికి తగినంత సామర్థ్యం ఉందని వారు కనుగొన్నారు, ఇది వారి ట్రాఫిక్ మరియు అలాంటి వాటి యొక్క తెలివైన రౌటింగ్‌ను ఆప్టిమైజ్ చేయడం మరియు మెరుగ్గా చేయడం ద్వారా. అవన్నీ నిజ సమయంలో ఆ అంతర్దృష్టులపై పనిచేసే కొన్ని నిజ-సమయ విశ్లేషణలు మరియు చర్య విధానంతో మాత్రమే సాధ్యమవుతాయి.

విలువ సమర్పణ యొక్క తదుపరి స్థాయి అప్-సేల్, క్రాస్-సేల్, ఇక్కడ ఎక్కువ సమర్పణలు మరియు ప్రస్తుత సమర్పణల నుండి లాభాలు పొందే అవకాశాలు ఉన్నాయి. ఇది ఒక క్లాసిక్ ఉదాహరణ, వారు ఎక్కడ అనుభవించారనే దాని గురించి మనలో చాలా మందికి తెలుసు, మీ జీవితంలో మీరు ఆలోచించని చోట మీకు ఈ రోజు మీకు అందించని ఉత్పత్తిని నిజంగా కొనడానికి సిద్ధంగా ఉన్నారు. చాలా, చాలా సందర్భాలలో, వాస్తవానికి ఇది జరుగుతుంది. మీరు కొనాలనుకుంటున్నది మీకు తెలుసు, మీరు చేయవలసిన జాబితా లేదా ఏదైనా కలిగి ఉన్నారని, మీ భార్య మీకు చెప్పినట్లు లేదా మీకు భార్య లేకపోతే మీరు నిజంగా కొనాలనుకుంటున్నారని మీ మనస్సులో ఉన్నాయి. మరియు మీరు వెబ్‌సైట్‌లో షాపింగ్‌కు వెళ్లండి లేదా మీరు రిటైల్ దుకాణంలో ఇంటరాక్ట్ అవుతున్నారు, స్టోర్ ఫ్రంట్‌లో కాన్ లేదు, మీకు కావాల్సిన దాన్ని లెక్కించడానికి తెలివితేటలు లేవు. అందువల్ల, వారు తమ వ్యాపారాన్ని సురక్షితంగా పొందలేరు. ఖచ్చితమైన అంచనాలను రూపొందించడానికి స్ట్రీమింగ్ అనలిటిక్స్ నియోగించగలిగితే మరియు ఈ ప్రత్యేకమైన కాన్, ఈ కస్టమర్ ఈ ప్రదేశంలో ఈ సమయంలో చాలా అనుకూలంగా ఉంటుంది, ఇది చాలా ఎక్కువ-అమ్మకం మరియు క్రాస్-సేల్ ఉంది మరియు అది మళ్ళీ వస్తుంది స్ట్రీమింగ్ అనలిటిక్స్ - అవకాశం ఉన్నపుడు ఈ కస్టమర్ సత్యం యొక్క ఆ క్షణంలో కొనుగోలు చేయడానికి లేదా ప్రతిస్పందించడానికి అవకాశం ఉన్నదాని గురించి ప్రవృత్తి నిర్ణయం తీసుకోగలడు. అందుకే ఆ చేప తినడానికి డెజ్ ఎలుగుబంటితో చూపించిన ఆ చిత్రాన్ని నేను ప్రేమిస్తున్నాను. అది చాలా చక్కనిది.

కస్టమర్ ప్రవర్తనను పరిశీలించడం ఆధారంగా పూర్తిగా క్రొత్త ఉత్పత్తులు మరియు సేవలను అందించే సంస్థలో నాటకీయమైన, పరివర్తన కలిగించే మార్పుల యొక్క పెద్ద వర్గం ఉందని మేము భావిస్తున్నాము, ఇవన్నీ మరొక సంస్థ యొక్క ప్రవర్తన యొక్క పరిశీలన ఆధారంగా. ఒకవేళ, ఒక టెల్కో లేదా కేబుల్ కంపెనీ అతను మార్కెట్ యొక్క ఏ విభాగంలో, ఏ సమయంలో ఏ ప్రోగ్రామ్ మొదలైన వాటిలో వినియోగదారుల వినియోగ విధానాలను నిజంగా గమనిస్తుంటే, అవి వాస్తవానికి యాచించబడుతున్న ఉత్పత్తులు మరియు సేవలను సృష్టించడం ముగుస్తాయి. ఏదో ఒక విధంగా. కాబట్టి మల్టీ-స్క్రీన్ ప్రవర్తన యొక్క మొత్తం భావన ప్రస్తుతం మన మొబైల్ అనువర్తనాల్లో టీవీ లేదా కేబుల్ కంటెంట్‌ను చూడగలమని మేము ఇప్పుడు దాదాపుగా తీసుకుంటున్నాము. ఆ ఉదాహరణలు కొన్ని మాకు అందిస్తున్న కొత్త ఉత్పత్తులు మరియు సేవల నుండి వస్తున్నాయి.

నేను, “స్ట్రీమింగ్ అనలిటిక్స్ యొక్క ఆర్కిటెక్చర్ పరిగణనలు ఏమిటి?” లోకి ప్రవేశిస్తాము, చివరికి ఇది మేము చేయడానికి ప్రయత్నిస్తున్నాము. ఇది లాంబ్డా నిర్మాణం, ఇక్కడ మీరు చారిత్రక డేటా మరియు నిజ-సమయ అంతర్దృష్టులను మిళితం చేసి, అదే సమయంలో చూస్తున్నారు. సిగ్మా ఎనేబుల్ చేస్తుంది. మనందరికీ ఈ రోజు బ్యాచ్ ఆర్కిటెక్చర్ మరియు ఎంటర్ప్రైజ్ పిక్చర్ ఉన్నాయి. మేము ఒక రకమైన BI స్టాక్ మరియు వినియోగ స్టాక్‌లోకి తీసుకుంటున్నాము మరియు లాంబ్డా ఆర్కిటెక్చర్ జోడించబడింది. స్పీడ్ లేయర్ లేదా అవసరం మరియు లాంబ్డా అన్నీ ఆ రెండు అంతర్దృష్టులను విలీనం చేయడం మరియు సమిష్టిగా చూడటం, రెండు అంతర్దృష్టులను కలిపే గొప్ప మార్గంలో చూడటం.

కప్పా ఆర్కిటెక్చర్ అని పిలువబడే మరొక ఉదాహరణ ఉంది, ఇక్కడ స్పీడ్ లేయర్ మాత్రమే దీర్ఘకాలికంగా కొనసాగబోయే ఇన్పుట్ విధానం. అంతా ఈ స్పీడ్ లేయర్ ద్వారా రాబోతోంది. ఆఫ్‌లైన్ ఇటిఎల్ విధానం కూడా ఉండడం లేదు. అన్ని ETL జరుగుతుంది. శుభ్రపరచడం, డేటా ప్రక్షాళన, నాణ్యమైన ETL - ఇవన్నీ వైర్‌పై జరుగుతాయి, ఎందుకంటే అన్ని డేటా నిజ సమయంలోనే పుట్టిందని గుర్తుంచుకోండి. ఏదో ఒక సమయంలో, ఇది నిజ సమయం. సరస్సులు, నదులు మరియు మహాసముద్రాలపై ఉంచడానికి మేము దీన్ని బాగా అలవాటు చేసుకున్నాము, ఆపై దాన్ని స్టాటిక్ అనాలిసిస్‌లో చేయడం ద్వారా డేటా నిజ సమయంలో ఏదో ఒక సమయంలో పుట్టిందని మేము మర్చిపోయాము.అన్ని డేటా వాస్తవానికి రియల్ టైమ్ సంఘటనగా జన్మించింది మరియు ఈ రోజు సరస్సులోని చాలా డేటా తరువాత విశ్లేషణ కోసం డేటాబేస్లో ఉంచబడింది మరియు లాంబ్డా మరియు కప్పా నిర్మాణంలో మనకు ఇప్పుడు ప్రయోజనం ఉంది దాన్ని చూడటం, విశ్లేషించడం, ముందస్తుగా ప్రాసెస్ చేయడం మరియు అది వచ్చినప్పుడు ప్రతిస్పందించడం. ఈ సాంకేతిక పరిజ్ఞానాల ద్వారా ఇది ప్రారంభించబడుతుంది. మీరు దీన్ని మొత్తం చిత్రంగా చూసినప్పుడు, హడూప్ లోపల, ఎంపిపిలు మరియు మీరు ఇప్పటికే కలిగి ఉన్న డేటా గిడ్డంగులు ఉన్నట్లుగా కనిపిస్తోంది.

మేము దీనిని ఉంచాము ఎందుకంటే ద్వీపంలో క్రొత్త సాంకేతిక పరిజ్ఞానం గురించి మాట్లాడటం ముఖ్యం. వారు ఏకీకృతం చేయాలి. ప్రస్తుత ఎంటర్ప్రైజ్ కాన్ లో వారు అర్ధవంతం కావాలి మరియు సంస్థలకు సేవలు అందిస్తున్న సొల్యూషన్ ప్రొవైడర్లుగా, మేము దీనికి చాలా సున్నితంగా ఉన్నాము. మేము మొత్తం విషయాలను ఏకీకృతం చేయడానికి సంస్థలకు సహాయం చేస్తాము. ఎడమ వైపున డేటా మూలాలు హడూప్ మరియు డేటా గిడ్డంగి పొరలతో పాటు పైన ఉన్న రియల్ టైమ్ లేయర్‌కు ఆహారం ఇస్తున్నాయి మరియు ఆ ఎంటిటీలు ప్రతి ఒక్కటి మీరు చూడగలిగినట్లుగా స్టాక్ కంప్యూటర్లు మరియు డేటా వినియోగ పొర కుడి వైపున ఉంటుంది వైపు. ఈ రోజు అందుబాటులో ఉన్న మెజారిటీ సమ్మతి, పాలన, భద్రత, జీవిత చక్ర నిర్వహణ మొదలైనవాటిని తరలించడానికి నిరంతర ప్రయత్నం జరుగుతోంది, ఇవన్నీ ఈ కొత్త సాంకేతిక పరిజ్ఞానంలో పొందుపరచబడ్డాయి.

స్ట్రీమ్ అనలిటిక్స్ చేయడానికి ప్రయత్నిస్తున్న ఒక విషయం, మీరు ఈ రోజు ప్రకృతి దృశ్యాన్ని పరిశీలిస్తే, స్ట్రీమింగ్ టెక్నాలజీ ల్యాండ్‌స్కేప్‌లో చాలా విషయాలు జరుగుతున్నాయి మరియు ఎంటర్ప్రైజ్ కస్టమర్ దృక్కోణం నుండి, అర్థం చేసుకోవడానికి చాలా ఉన్నాయి. కొనసాగించడానికి చాలా ఉంది. ఎడమ వైపున డేటా సేకరించే విధానాలు ఉన్నాయి - NiFi, Logstash, Flume, Sqoop. సహజంగానే, ఇది సమగ్రమైనది కాదని నేను నిరాకరణను ఉంచాను. క్యూలలోకి వచ్చి, ఆపై ఓపెన్ సోర్స్ స్ట్రీమింగ్ ఇంజిన్లలోకి వస్తాయి - స్టార్మ్, స్పార్క్ స్ట్రీమింగ్, సామ్జా, ఫ్లింక్, అపెక్స్, హెరాన్. హెరాన్ బహుశా ఇంకా ఓపెన్ సోర్స్ కాలేదు. ఇది ఉందో లేదో నాకు తెలియదు. ఆ స్ట్రీమింగ్ ఇంజన్లు సంక్లిష్ట ఈవెంట్ ప్రాసెసింగ్, మెషీన్ లెర్నింగ్, ప్రిడిక్టివ్ ఎనలిటిక్స్, హెచ్చరిక మాడ్యూల్, స్ట్రీమింగ్ ఇటిఎల్, సుసంపన్న గణాంక కార్యకలాపాల ఫిల్టర్‌లు వంటి సెటప్ ఎనలిటికల్ అప్లికేషన్ భాగంలోకి దారి తీస్తాయి లేదా మద్దతు ఇస్తాయి. అవన్నీ మనం ఇప్పుడు ఆపరేటర్లు అని పిలుస్తాము. అవసరమైతే ఆ ఆపరేటర్ల సమితి అవసరమైతే స్ట్రీమింగ్ ఇంజిన్‌లో పనిచేసే స్ట్రీమింగ్ అప్లికేషన్‌గా మారుతుంది.

ఆ భాగాల గొలుసులో భాగంగా, మీరు మీ ఇష్టమైన డేటాబేస్, మీకు ఇష్టమైన సూచికలో డేటాను నిల్వ చేసి సూచిక చేయాలి. మీరు కాష్‌ను పంపిణీ చేయవలసి ఉంటుంది మరియు అది ఎగువ భాగంలో కుడి వైపున ఉన్న డేటా విజువలైజేషన్ లేయర్‌లోకి వాణిజ్య ఉత్పత్తులు లేదా ఓపెన్ సోర్స్ ఉత్పత్తులకు దారితీస్తుంది, కాని చివరికి ఆ డేటాను నిజ సమయంలో దృశ్యమానం చేయడానికి మీకు కొంత ఉత్పత్తి అవసరం. అలాగే, మీరు కొన్నిసార్లు ఇతర అనువర్తనాలను గుర్తించాలి. మీరు అంతర్దృష్టిపై తీసుకునే చర్య ద్వారా మాత్రమే పొందిన విలువలు, ఆ చర్య ఒక విశ్లేషణాత్మక స్టాక్ నుండి మరొక అప్లికేషన్ స్టాక్‌లోకి ట్రిగ్గర్ అవుతుందని మేము అందరం చూశాము, అది IVR వైపు ఏదో మార్చబడి ఉండవచ్చు లేదా కాల్ సెంటర్‌ను ప్రేరేపిస్తుంది అవుట్‌బౌండ్ కాల్ లేదా అలాంటిదే. దిగువ డేటా యొక్క ఇతర అనువర్తనాలను ప్రేరేపించడానికి మీ సిస్టమింగ్ ఇంటిగ్రేటెడ్ మరియు మీ స్ట్రీమింగ్ క్లస్టర్ కోసం కొంత యంత్రాంగాన్ని కలిగి ఉండాలి.

ఇది ఎడమ నుండి కుడికి వెళ్ళే మొత్తం స్టాక్. అప్పుడు మీకు సేవా పొరలు, మిడిల్ మానిటరింగ్, సెక్యూరిటీ జనరల్ సర్వీస్ లేయర్ మొదలైనవి ఉన్నాయి. హడూప్ డిస్ట్రిబ్యూషన్స్ లాగా కస్టమర్లు చూస్తున్న ఎంటర్ప్రైజ్ స్థలంలో ఏ ఉత్పత్తులు ఉన్నాయో నేను చెప్పే విధంగా స్ట్రీమింగ్ ఉంది మరియు వాణిజ్య లేదా సింగిల్ ఉంది -వెండర్ పరిష్కారాలు మా పోటీదారులలో స్పష్టంగా ఉన్నాయి. ప్రకృతి దృశ్యంలో ఇంకా చాలా ఉన్నాయి, మనం ఇక్కడ పేర్కొనకపోవచ్చు.

మీరు అక్కడ చూస్తున్నది విస్తృతంగా వ్యాపార వినియోగదారు చూస్తున్నారు. మీరు చూడగలిగినట్లుగా, స్ట్రీమ్ ప్రాసెసింగ్ కోసం సంక్లిష్టమైన మరియు వేగంగా అభివృద్ధి చెందుతున్న సాంకేతిక ప్రకృతి దృశ్యం. మేము ఎంపికను మరియు వారి వినియోగదారు అనుభవాన్ని సరళీకృతం చేయాల్సి వచ్చింది. ఎంటర్ప్రైజెస్‌కి నిజంగా అవసరమని మేము అనుకుంటున్నది, ఒక-స్టాప్-షాప్, ఉపయోగించడానికి సులభమైన ఇంటర్‌ఫేస్‌లో అన్నింటినీ క్రియాత్మకంగా సంగ్రహించడం, ఆ సాంకేతిక పరిజ్ఞానాలన్నింటినీ ఒకచోట చేర్చి, వాటిని ఉపయోగించడం చాలా సులభం మరియు కదిలే అన్ని భాగాలను బహిర్గతం చేయదు మరియు అధోకరణ సమస్యలు మరియు పనితీరు సమస్యలు మరియు సంస్థకు జీవిత చక్ర నిర్వహణ సమస్యలు.

కార్యాచరణ సంగ్రహణ ఒకటి. రెండవ భాగం స్ట్రీమింగ్ ఇంజిన్ సంగ్రహణ. స్ట్రీమింగ్ ఇంజన్లు మరియు ఓపెన్ సోర్స్ డొమైన్లు ఇప్పుడు ప్రతి మూడు, నాలుగు లేదా ఆరు నెలలకు ఒకసారి వస్తున్నాయి. ఇది చాలాకాలం తుఫాను. సామ్జా వచ్చింది మరియు ఇప్పుడు అది స్పార్క్ స్ట్రీమింగ్. ఫ్లింక్ తన తల పైకెత్తి, దృష్టిని ఆకర్షించడం ప్రారంభించింది. స్పార్క్ స్ట్రీమింగ్ రోడ్‌మ్యాప్ కూడా, వారు స్వచ్ఛమైన ఈవెంట్ ప్రాసెసింగ్ కోసం వేరే ఇంజిన్‌ను ఉపయోగించుకునే మార్గాన్ని తయారు చేస్తున్నారు ఎందుకంటే స్పార్క్ బ్యాచ్ కోసం రూపొందించబడిందని వారు గ్రహించారు మరియు వారు వారి ఆర్కిటెక్చర్ దృష్టిలో మరియు వేరే మార్గాన్ని కలిగి ఉండటానికి వారి రోడ్‌మ్యాప్‌లో ఒక మార్గాన్ని తయారు చేస్తున్నారు. స్పార్క్ స్ట్రీమింగ్‌లోని ప్రస్తుత మైక్రోబ్యాచ్ నమూనాతో పాటు స్ట్రీమ్ ప్రాసెసింగ్ కోసం ఇంజిన్.

ఇది చాలా పరిణామం జరగబోతోందని మీరు వాదించాలి. మీరు నిజంగా ఆ టెక్నాలజీ ఫ్లక్స్ నుండి మిమ్మల్ని మీరు రక్షించుకోవాలి. అప్రమేయంగా, మీరు ఒకదాన్ని ఎంచుకొని దానితో జీవించాల్సి ఉంటుంది, ఇది సరైనది కాదు. మీరు దీన్ని మరొక విధంగా చూస్తున్నట్లయితే, మీరు మధ్య పోరాడుతున్నారు, “సరే, నేను లాక్-ఇన్ లేని యాజమాన్య ప్లాట్‌ఫారమ్‌ను కొనుగోలు చేయాల్సి వచ్చింది, ఓపెన్ సోర్స్ యొక్క పరపతి లేదు, చాలా ఎక్కువ ఖర్చు మరియు పరిమితం కావచ్చు ఈ ఓపెన్ సోర్స్ స్టాక్‌కి వ్యతిరేకంగా వశ్యత మీరు మీరే చేసుకోవాలి. ”మళ్ళీ, నేను చెప్పినట్లుగా, ఇది చాలా ఖర్చులు మరియు మార్కెట్‌లోకి రావడానికి ఆలస్యం. మేము చెప్పేది స్ట్రీమ్అనలిటిక్స్ అనేది ఒక గొప్ప ప్లాట్‌ఫామ్‌కు ఒక ఉదాహరణ, ఇది ఎంటర్ప్రైజ్ క్లాస్, నమ్మకమైన, సింగిల్ విక్రేత, ప్రొఫెషనల్ సర్వీస్ మద్దతు - ఇవన్నీ మీకు నిజంగా ఒక సంస్థగా అవసరం మరియు ఓపెన్ సోర్స్ పర్యావరణ వ్యవస్థ యొక్క వశ్యత యొక్క శక్తి ఒకే వేదిక వాటిని కలిసి తెస్తుంది - ఇంగెస్ట్, సిఇపి, అనలిటిక్స్, విజువలైజేషన్ మరియు అన్నీ.

ఇది చాలా ప్రత్యేకమైన పనిని కూడా చేస్తుంది, ఇది ఒకే యూజర్ అనుభవం క్రింద అనేక విభిన్న టెక్నాలజీ ఇంజిన్‌లను కలిపిస్తుంది. భవిష్యత్ బహుళ స్ట్రీమింగ్ ఇంజిన్‌లను ఉపయోగించగలగడం గురించి మేము నిజంగా అనుకుంటున్నాము ఎందుకంటే వేర్వేరు వినియోగ సందర్భాలు నిజంగా వేర్వేరు స్ట్రీమింగ్ నిర్మాణాలను డిమాండ్ చేస్తాయి. రాబిన్ చెప్పినట్లుగా, లాటెన్సీల మొత్తం స్పెక్ట్రం ఉంది. మీరు నిజంగా మిల్లీసెకండ్ జాప్యం స్థాయి, పదుల లేదా వందల మిల్లీసెకన్ల గురించి మాట్లాడుతుంటే, తక్కువ సానుకూలత లేదా తేలికపాటి కాలపరిమితి మరియు కొన్ని సెకన్లలో, మూడు, లాటెన్సీల కోసం సమానంగా పరిపక్వమైన ఉత్పత్తి వచ్చేవరకు మీకు నిజంగా తుఫాను అవసరం. నాలుగు, ఐదు సెకన్లు, ఆ పరిధి, అప్పుడు మీరు స్పార్క్ స్ట్రీమింగ్‌ను ఉపయోగించవచ్చు. సంభావ్యంగా, రెండింటినీ చేయగల ఇతర ఇంజన్లు ఉన్నాయి. బాటమ్ లైన్, ఒక పెద్ద సంస్థలో, అన్ని రకాల ఉపయోగ సందర్భాలు ఉండబోతున్నాయి. ఒక వినియోగదారు అనుభవంతో ప్రాప్యత మరియు సాధారణత బహుళ ఇంజిన్‌లను కలిగి ఉండాలని మీరు నిజంగా కోరుకుంటారు మరియు ఇది మేము స్ట్రీమ్అనాలిటిక్స్లో నిర్మించడానికి ప్రయత్నిస్తున్నాము.

వాస్తుశిల్పంపై శీఘ్ర వీక్షణ. మేము దీన్ని కొద్దిగా పునర్నిర్మించబోతున్నాము, కాని ముఖ్యంగా, ఎడమ వైపున బహుళ డేటా వనరులు వస్తున్నాయి - కాఫ్కా, రాబిట్ఎమ్‌క్యూ, కైనెసిస్, యాక్టివ్ఎమ్‌క్యూ, ఆ డేటా వనరులు మరియు క్యూలు అన్నీ మీరు ఉన్న స్ట్రీమ్ ప్రాసెసింగ్ ప్లాట్‌ఫామ్‌లోకి వస్తున్నాయి ఒక అనువర్తనాన్ని సమీకరించండి, ఇక్కడ మీరు ETL లు వంటి ఆపరేటర్ల నుండి లాగడం మరియు వదలడం, మేము మాట్లాడిన అన్ని అంశాలు. కింద, బహుళ ఇంజన్లు ఉన్నాయి. ప్రస్తుతం, మాకు పరిశ్రమల యొక్క ఏకైక మరియు బహుళ ఇంజిన్ మద్దతు ఉన్న మొదటి ఎంటర్ప్రైజ్-క్లాస్ స్ట్రీమింగ్ ప్లాట్‌ఫారమ్‌గా స్టార్మ్ మరియు స్పార్క్ స్ట్రీమింగ్ ఉన్నాయి. ఇది రియల్ టైమ్ డాష్‌బోర్డులను కలిగి ఉన్న అన్ని ఇతర వశ్యతలతో పాటు మేము అందిస్తున్న చాలా ప్రత్యేకమైన, వశ్యత. CET ఇంజిన్ పొందుపరచబడింది. హడూప్ మరియు నోఎస్క్యూల్ సూచికలు, సోల్ర్ మరియు అపాచీ సూచికలతో మాకు అతుకులు సమన్వయం ఉంది. మీకు ఇష్టమైన డేటాబేస్కు మీరు ల్యాండ్ అవ్వవచ్చు మరియు అనువర్తనాలను నిజంగా త్వరగా నిర్మించవచ్చు మరియు త్వరగా మార్కెట్లోకి రావచ్చు మరియు భవిష్యత్తులో రుజువుగా ఉండవచ్చు. ఇది స్ట్రీమ్అనాలిటిక్స్లో మా మొత్తం మంత్రం.

దానితో, నేను నా వ్యాఖ్యలను ముగించాను. మరిన్ని ప్రశ్నల కోసం మా వద్దకు రావడానికి సంకోచించకండి. Q & A మరియు ప్యానెల్ చర్చ కోసం అంతస్తును తెరిచి ఉంచాలనుకుంటున్నాను.

రెబెక్కా, మీకు పైగా.

రెబెకా జోజ్వియాక్: గొప్ప, సరే. చాలా ధన్యవాదాలు. డెజ్ మరియు రాబిన్, మేము దానిని ప్రేక్షకుల ప్రశ్నోత్తరాలకి మార్చడానికి ముందు మీకు కొన్ని ప్రశ్నలు ఉన్నాయా?

రాబిన్ బ్లూర్: నాకు ఒక ప్రశ్న వచ్చింది. నేను నా హెడ్‌ఫోన్‌లను తిరిగి ఉంచుతాను, కాబట్టి మీరు నన్ను వినగలరు. ఆసక్తికరమైన విషయాలలో ఒకటి, మీరు ఈ విషయాన్ని దయతో నాకు చెప్పగలిగితే, ఓపెన్ సోర్స్ స్థలంలో నేను చూస్తున్న చాలా విషయాలు నాకు అపరిపక్వంగా చెప్పేవి కనిపిస్తాయి. ఒక రకంగా చెప్పాలంటే, అవును మీరు వివిధ పనులు చేయవచ్చు. వాస్తవానికి సాఫ్ట్‌వేర్‌ను దాని మొదటి లేదా రెండవ విడుదలలో మేము చూస్తున్నట్లు కనిపిస్తోంది మరియు ఒక సంస్థగా మీ అనుభవంతో నేను ఆశ్చర్యపోతున్నాను, హడూప్ పర్యావరణం యొక్క అపరిపక్వతను మీరు ఎంత సమస్యాత్మకంగా చూస్తున్నారు లేదా అది చేయని విషయం ' చాలా సమస్యలను సృష్టించలేదా?

ఆనంద్ వేణుగోపాల్: ఇది రియాలిటీ, రాబిన్. మీరు ఖచ్చితంగా చెప్పవచ్చు. అపరిపక్వత కేవలం క్రియాత్మక స్థిరత్వం మరియు విషయాల ప్రాంతంలో తప్పనిసరిగా ఉండదు, కానీ కొన్ని సందర్భాల్లో కూడా ఉండవచ్చు. కానీ అపరిపక్వత వాడుక యొక్క సంసిద్ధతలో ఎక్కువ. ఓపెన్-సోర్స్ ఉత్పత్తులు బయటకు వచ్చినప్పుడు మరియు అవి హడూప్ పంపిణీ ద్వారా అందించబడుతున్నప్పటికీ, అవన్నీ చాలా విభిన్నమైన సమర్థవంతమైన ఉత్పత్తులు, భాగాలు ఇప్పుడే కలిసి ఉంటాయి. అవి సజావుగా కలిసి పనిచేయవు మరియు వారాల వ్యవధిలో స్ట్రీమింగ్ అనలిటిక్స్ అనువర్తనాన్ని అమలు చేయడానికి బ్యాంక్ ఆఫ్ అమెరికా లేదా వెరిజోన్ లేదా AT&T వంటి సున్నితమైన అతుకులు లేని వినియోగదారు అనుభవం కోసం రూపొందించబడలేదు. అవి ఖచ్చితంగా రూపొందించబడలేదు. మేము లోపలికి రావడానికి కారణం అదే. మేము దానిని ఒకచోట చేర్చి, అర్థం చేసుకోవడం, అమలు చేయడం మొదలైనవాటిని నిజంగా సులభం చేస్తాము.

దాని యొక్క క్రియాత్మక పరిపక్వత, నేను చాలా వరకు అనుకుంటున్నాను, ఉంది. అనేక పెద్ద సంస్థలు ఈ రోజు తుఫానును ఉపయోగిస్తాయి. ఈ రోజు చాలా పెద్ద సంస్థలు స్పార్క్ స్ట్రీమింగ్‌తో ఆడుతున్నాయి. ఈ ఇంజిన్లలో ప్రతి ఒక్కటి వారు ఏమి చేయగలరో వాటి పరిమితులను కలిగి ఉంటాయి, అందువల్ల మీరు ఏమి చేయగలరో మరియు ప్రతి ఇంజిన్‌తో మీరు ఏమి చేయలేరో తెలుసుకోవడం చాలా ముఖ్యం మరియు గోడకు వ్యతిరేకంగా మీ తలను పగలగొట్టి, “నేను చూడండి స్పార్క్ స్ట్రీమింగ్‌ను ఎంచుకున్నారు మరియు ఈ ప్రత్యేక పరిశ్రమలో ఇది నాకు పని చేయదు. ”ఇది పని చేయదు. స్పార్క్ స్ట్రీమింగ్ ఉత్తమ ఎంపికగా ఉపయోగపడే సందర్భాలు ఉన్నాయి మరియు స్పార్క్ స్ట్రీమింగ్ మీ కోసం ఏమాత్రం పని చేయని సందర్భాలు ఉన్నాయి. అందుకే మీకు నిజంగా బహుళ ఎంపికలు అవసరం.

రాబిన్ బ్లూర్: బాగా మీరు వీటిలో చాలా వరకు నిపుణుల బృందాలను కలిగి ఉండాలి. నా ఉద్దేశ్యం ఏమిటంటే దీన్ని ఎక్కడ ప్రారంభించాలో కూడా నాకు తెలియదు. నైపుణ్యం కలిగిన వ్యక్తుల యొక్క సహ-చర్య. మీరు నిశ్చితార్థం ఎలా చేయాలో మరియు అది ఎలా జరుగుతుందో నాకు ఆసక్తి ఉంది. ఒక నిర్దిష్ట సంస్థ ఒక నిర్దిష్ట అనువర్తనం తర్వాత ఉన్నందున లేదా నేను వ్యూహాత్మక స్వీకరణ అని పిలవబడే రకాన్ని మీరు చూస్తున్నారా, అక్కడ వారు చాలా ప్లాట్‌ఫారమ్ చాలా పనులు చేయాలనుకుంటున్నారు.

ఆనంద్ వేణుగోపాల్: రాబిన్ అనే రెండింటి ఉదాహరణలను మనం చూస్తున్నాం. ప్రతి ఒక్కరికి తెలిసిన మొదటి పది బ్రాండ్లలో కొన్ని దాని గురించి చాలా వ్యూహాత్మక రీతిలో జరుగుతున్నాయి. వారు రకరకాల ఉపయోగ కేసులను కలిగి ఉండబోతున్నారని వారికి తెలుసు, అందువల్ల వారు ఆ అవసరానికి తగినట్లుగా ప్లాట్‌ఫారమ్‌లను అంచనా వేస్తున్నారు, ఇది ఒక సంస్థలో మోహరించడానికి బహుళ-అద్దె పద్ధతిలో వివిధ రకాలైన ఉపయోగ కేసులు. సింగిల్ యూజ్ కేస్ స్టోరీస్ కూడా ప్రారంభమవుతున్నాయి. తనఖా సంస్థలో ఒక నిర్దిష్ట వ్యాపార కార్యకలాపాల పర్యవేక్షణ-రకం వినియోగ కేసు ఉంది, దానిపై మీరు మొదటి ఉపయోగం కేసుగా imagine హించలేరు కాని అది వ్యాపార పరిష్కారం లేదా వారు ఉపయోగించిన కేసు, ఆపై మేము చుక్కలను స్ట్రీమింగ్‌కు కనెక్ట్ చేసాము . మేము, “మీకు తెలుసా? స్ట్రీమింగ్ అనలిటిక్స్ కోసం ఇది ఒక గొప్ప సందర్భం మరియు మేము దీన్ని ఎలా అమలు చేయగలం. ”ఇది ప్రారంభమైంది. అప్పుడు, ఆ ప్రక్రియలో, వారు విద్యావంతులు అవుతారు, “ఓహ్ వావ్, మేము దీన్ని చేయగలిగితే మరియు ఇది ఒక సాధారణ ప్లాట్‌ఫారమ్ అయితే, అప్పుడు మేము అప్లికేషన్‌ను వేరు చేయవచ్చు, వాటిని ప్లాట్‌ఫారమ్‌లోకి పొర చేయవచ్చు మరియు దీనిపై చాలా విభిన్న అనువర్తనాలను నిర్మించవచ్చు. వేదిక. "

రాబిన్ బ్లూర్: డెజ్, మీకు ఏమైనా ప్రశ్నలు వచ్చాయా?

ఆనంద్ వేణుగోపాల్: డెజ్ బహుశా మ్యూట్‌లో ఉండవచ్చు.

డెజ్ బ్లాంచ్ఫీల్డ్: క్షమాపణలు, మ్యూట్. నేను మంచి సంభాషణను కలిగి ఉన్నాను. రాబిన్ యొక్క అసలు పరిశీలనను అనుసరిస్తే, మీరు ఖచ్చితంగా సరైనవారు. సంస్థలకు పర్యావరణ వ్యవస్థ మరియు సాంస్కృతిక మరియు ప్రవర్తనా వాతావరణం ఉన్నాయని నేను భావిస్తున్నాను, ఇక్కడ ఉచిత మరియు ఓపెన్-సోర్స్ సాఫ్ట్‌వేర్ వారికి తెలిసినది మరియు వారు ఫైర్‌ఫాక్స్ వంటి సాధనాలను బ్రౌజర్‌గా ఉపయోగించగలుగుతారు మరియు దీనికి మంచి ఉంది ఇది స్థిరంగా మరియు సురక్షితంగా మారే వరకు జీవితకాలం. కానీ వారు ఉపయోగించే చాలా పెద్ద ప్లాట్‌ఫారమ్‌లలో కొన్ని ఎంటర్ప్రైజ్-గ్రేడ్ యాజమాన్య ప్లాట్‌ఫారమ్‌లు. కాబట్టి ఓపెన్-సోర్స్ ప్లాట్‌ఫారమ్‌లను నేను స్వీకరించడం ఎల్లప్పుడూ సాంస్కృతికంగా లేదా మానసికంగా దాటవేయడం సులభం కాదు. పెద్ద డేటా మరియు విశ్లేషణలతో ప్రాథమిక భావనగా ఆడటానికి స్థానిక ప్రాజెక్టులు అయిన చిన్న ప్రోగ్రామ్‌లను స్వీకరించడం ద్వారా నేను దీనిని చూశాను. కీలకమైన సవాళ్ళలో ఒకటి అని నేను అనుకుంటున్నాను, మీరు ఇప్పుడు వాటిని సంస్థలలో చూశారని నేను అనుకుంటున్నాను, ఫలితాన్ని పొందాలనే వారి కోరిక కానీ అదే సమయంలో వారి ఒక అడుగు పాత డబ్బాలో ఇరుక్కోవడం వల్ల వారు దీనిని కొనుగోలు చేయవచ్చు ఒరాకిల్, ఐబిఎం మరియు మైక్రోసాఫ్ట్ “పెద్ద బ్రాండ్‌ను చొప్పించండి”. ఈ కొత్త మరియు తెలిసిన బ్రాండ్లు హడూప్ ప్లాట్‌ఫారమ్‌లతో మరియు మరెన్నో వస్తున్నాయి. స్ట్రీమ్ వంటి ప్రముఖ-ఎడ్జ్ టెక్నాలజీని కలిగి ఉన్న మరింత ఉత్తేజకరమైన బ్రాండ్లు వస్తున్నాయి.

మీరు ఆ రకమైన సంభాషణలు ఏమిటి? ఈ ఉదయం మనకు భారీగా హాజరు ఉందని నాకు తెలుసు, అందరి మనస్సులో నేను ఖచ్చితంగా ఉన్నాను “నేను బోర్డు నుండి నిర్వహణ స్థాయికి మొత్తం సవాలు పొరను ఎలా తగ్గించగలను, ఓహ్ చాలా ఓపెన్ సోర్స్ మరియు చాలా రక్తస్రావం అంచు? "మీరు ఖాతాదారులతో సంభాషణలు ఎలా సాగుతాయి మరియు స్ట్రీమ్అనాలిటిక్స్ యొక్క ఇష్టాలను స్వీకరించడాన్ని పరిగణనలోకి తీసుకోవడానికి మీరు ఆ రకమైన భయాలను తగ్గించే స్థితికి ఎలా వెళ్తారు?

ఆనంద్ వేణుగోపాల్: కస్టమర్లు సహజంగానే ఓపెన్ సోర్స్ వైపు ఇష్టపడే ఎంపికగా కదులుతున్నందున మా విలువ ప్రతిపాదనను అమ్మడం చాలా సులభం అని మేము భావిస్తున్నాము. వారు సులభంగా వదిలిపెట్టడం లేదు, "సరే, నేను ఇప్పుడు ఓపెన్ సోర్స్కు వెళ్ళబోతున్నాను." వారు వాస్తవానికి ఒక ప్రధాన ఉత్పత్తి యొక్క చాలా నిబద్ధత గల మూల్యాంకనం ద్వారా వెళతారు, ఇది ఒక ఐబిఎమ్ లేదా ఒక సాధారణ ఉత్పత్తి అని చెప్పండి, ఎందుకంటే అవి ఉన్నాయి ఈ విక్రేత సంబంధాలు. వారు మాకు లేదా ఓపెన్ సోర్స్ ఇంజిన్‌కు ఆ ఉత్పత్తికి వ్యతిరేకంగా వ్యవహరించరు. వారు ఆరు నుండి ఎనిమిది నుండి పన్నెండు వారాల మూల్యాంకనం ద్వారా వెళతారు. నేను కోరుకున్న పనితీరు మరియు స్థిరత్వం ఇక్కడ ఉందని వారు తమను తాము ఒప్పించుకుంటారు, ఆపై వారు "వావ్, మీకు తెలుసా, నేను దీన్ని నిజంగా చేయగలను" అని చెప్పి వారి మనస్సును ఏర్పరచుకుంటారు.

ఉదాహరణకు, ఈ రోజు మనకు ఒక పెద్ద టైర్ వన్ టెల్కో ఉంది, ఇది స్ట్రీమ్ ఎనలిటిక్స్ చాలా స్టాక్ పైన ఉత్పత్తిలో ఉంది మరియు వారు మరొక చాలా, చాలా పెద్ద ప్రసిద్ధ విక్రేతకు వ్యతిరేకంగా అంచనా వేస్తున్నారు మరియు మేము అన్నీ రుజువు చేసిన తర్వాత మాత్రమే వారు ఒప్పించారు పనితీరు, స్థిరత్వం మరియు ఆ విషయాలన్నీ. వారు దానిని పెద్దగా పట్టించుకోరు. ఓపెన్ సోర్స్ వారి మూల్యాంకనాల ద్వారా సమర్థవంతమైనదని వారు కనుగొన్నారు మరియు చెత్త సందర్భం, “నేను చేయలేని రెండు ఉపయోగ సందర్భాలు ఉండవచ్చు, కాని నా వ్యాపారాల త్వరణం వినియోగ కేసులు చాలా ఓపెన్ సోర్స్‌తో నేడు చాలా సాధ్యమే స్టాక్. ”మరియు మేము దాని వినియోగాన్ని ప్రారంభిస్తాము. కనుక ఇది అక్కడే పెద్ద తీపి ప్రదేశం. వారు ఓపెన్ సోర్స్ కోరుకున్నారు. వారు చాలా, చాలా సంవత్సరాలుగా అలవాటుపడిన విక్రేత లాక్-ఇన్ పరిస్థితి నుండి బయటపడాలని వారు నిజంగా చూస్తున్నారు. అప్పుడు ఇక్కడ మేము వచ్చి, "మీకు ఏమి తెలుసు, మేము మీ కోసం ఉపయోగించడానికి ఓపెన్ సోర్స్‌ను చాలా సులభం, స్నేహపూర్వకంగా చేస్తాము."

డెజ్ బ్లాంచ్ఫీల్డ్: సాంప్రదాయిక పదవిని తీసుకువచ్చేటప్పుడు ఎంటర్ప్రైజెస్ కనుగొనే ఇతర సవాలు ఏమిటంటే, మనం ఇక్కడ మాట్లాడుతున్న ఉత్తేజకరమైన విషయాల యొక్క రక్తస్రావం అంచు వెనుక ఉన్న ఒక తరం వారు మరియు నేను ప్రతికూల స్వల్పంగా భావించను. వాస్తవికత ఏమిటంటే, స్థిరమైన ప్లాట్‌ఫారమ్‌లు, పాత-పాఠశాల అభివృద్ధి మరియు UATN ఇంటిగ్రేషన్ సైకిల్స్ మరియు పరీక్షలు మరియు డాక్యుమెంటేషన్ మరియు మార్కెటింగ్ మరియు అమ్మకాల ద్వారా వారు భావించే వాటిని విడుదల చేయడానికి వారికి ఒక తరం మరియు ప్రయాణం ఉంది. మీరు చేస్తున్న రకంలో, నేను ఆలోచించటానికి ఆసక్తి ఉన్న విషయం ఏమిటంటే, గత రాత్రి మీ తాజా విడుదలలలో కొన్నింటిని పరిశోధనా పని చేస్తూ చూడటం, మీకు ఈ మిశ్రమం వచ్చింది. ముందస్తు కన్సల్టెన్సీ దృక్కోణం మరియు అమలు నుండి నైపుణ్యం కానీ మీరు రోల్ చేయగలిగే ఒక స్టాక్ కూడా మీకు లభించింది. అధికారంలో ఉన్నవారు కొంతకాలం కష్టపడబోతున్నారని నేను భావిస్తున్నాను. నేను మార్కెట్లో చేసినట్లు చాలా వాటిని మేము చూశాము. అవి తరచూ నేను క్యాచ్-అప్ నోడ్స్ అని పిలుస్తాను, అయితే మీరు ఆ సంభాషణలు చేస్తున్నప్పుడు మరియు మీరు అక్కడ అమలు చేస్తున్నప్పుడు మీరు మాకు చెబుతున్న దాని నుండి.

మీరు దత్తత తీసుకున్న కొన్ని సరిహద్దు నిలువు వరుసలకు కొన్ని ఉదాహరణలు ఇవ్వగలరా? ఉదాహరణకు, రాకెట్ సైన్స్ మరియు ఉపగ్రహాలను అంతరిక్షంలో ఉంచడం మరియు మార్స్ నుండి డేటాను సేకరించడం వంటి సముచిత వాతావరణం నిజంగా ఉంది. గ్రహం మీద కొద్దిమంది మాత్రమే ఆ పని చేస్తున్నారు. ఆరోగ్యం వంటి పెద్ద నిలువు వరుసలు ఉన్నాయి, ఏరోనాటిక్స్, షిప్పింగ్ మరియు లాజిస్టిక్స్, తయారీ మరియు ఇంజనీరింగ్‌లో, మీరు ఇప్పటివరకు ఉన్న పెద్ద మరియు విస్తృత పరిశ్రమ రంగాలకు ఉదాహరణలు ఏమిటి? దత్తత?

ఆనంద్ వేణుగోపాల్: టెల్కో ఒక పెద్ద ఉదాహరణ.

నేను ఇక్కడ నా స్లైడ్‌లను త్వరగా పరిష్కరించబోతున్నాను. మీరు ఇక్కడ స్లైడ్, కేస్ స్టడీ 4 చూడగలరా?

ఇది పెద్ద టెల్కో సెట్-టాప్ బాక్స్ డేటాను తీసుకొని దానితో పలు పనులు చేసే సందర్భం. కస్టమర్లు నిజ సమయంలో నిజంగా ఏమి చేస్తున్నారో వారు చూస్తున్నారు. సెట్-టాప్ బాక్స్‌లలో నిజ సమయంలో లోపాలు ఎక్కడ జరుగుతున్నాయో వారు చూస్తున్నారు. వారు కాల్ సెంటర్‌కు తెలియజేయడానికి ప్రయత్నిస్తున్నారు, ఈ కస్టమర్ ప్రస్తుతం కాల్ చేస్తే, ఈ కస్టమర్ యొక్క సెట్-టాప్ బాక్స్, నిర్వహణ టికెట్ సమాచారం నుండి కోడ్ లింక్ సమాచారం ఈ నిర్దిష్ట కస్టమర్ యొక్క సెట్-టాప్ బాక్స్‌కు సమస్య ఉందా లేదా అంతకు ముందే సంబంధం కలిగి ఉందా? కస్టమర్ ఒక మాట మాట్లాడుతాడు. ప్రతి కేబుల్ కంపెనీ, ప్రతి పెద్ద టెల్కో దీన్ని చేయడానికి ప్రయత్నిస్తున్నాయి. వారు సెట్-టాప్ బాక్స్ డేటాను తీసుకుంటారు, రియల్ టైమ్ అనలిటిక్స్ చేస్తారు, ప్రచార విశ్లేషణలు చేస్తారు, తద్వారా వారు తమ ప్రకటనలను ఉంచగలరు. భారీ వినియోగ కేసు ఉంది.

నేను చెప్పినట్లుగా, ఈ తనఖా సంస్థ ఉంది, ఇది మళ్ళీ సాధారణ నమూనా, ఇక్కడ డేటాను ప్రాసెస్ చేయడంలో పెద్ద వ్యవస్థలు పాల్గొంటాయి. సిస్టమ్ ఎ నుండి సిస్టమ్ బి నుండి సిస్టమ్ సి వరకు ప్రవహించే డేటా మరియు ఇవి నియంత్రిత వ్యాపారాలు, ఇవి ప్రతిదీ స్థిరంగా ఉండాలి.తరచుగా, వ్యవస్థలు ఒకదానితో ఒకటి సమకాలీకరించబడవు, ఒక వ్యవస్థ ఇలా చెబుతోంది, “నేను మొత్తం రుణాలను million 10 మిలియన్ల విలువతో వంద రుణాలను ప్రాసెస్ చేస్తున్నాను.” సిస్టమ్ చెబుతోంది, “లేదు, నేను 110 రుణాలను ప్రాసెస్ చేస్తున్నాను వేరే సంఖ్య. ”వారు నిజంగా అదే డేటాను ప్రాసెస్ చేస్తున్నారు మరియు విభిన్న వ్యాఖ్యానాలు చేస్తున్నందున వారు దానిని త్వరగా పరిష్కరించాలి.

ఇది క్రెడిట్ కార్డ్, లోన్ ప్రాసెసింగ్, బిజినెస్ ప్రాసెస్, లేదా అది తనఖా వ్యాపార ప్రక్రియ లేదా మరేదైనా అయినా, ఆ వ్యాపార ప్రక్రియలు సమకాలీకరించకుండా ఉండేలా నిజ సమయంలో సహసంబంధం మరియు సయోధ్య చేయడానికి మేము వారికి సహాయం చేస్తున్నాము. ఇది మరొక ఆసక్తికరమైన ఉపయోగ సందర్భం. అసాధారణమైన డిటెక్షన్ చేయడానికి DNS ట్రాఫిక్ వైపు చూస్తున్న ఒక ప్రధాన US ప్రభుత్వ కాంట్రాక్టర్ ఉన్నారు. వారు నిర్మించిన ఆఫ్‌లైన్ శిక్షణా నమూనా ఉంది మరియు వారు రియల్ టైమ్ ట్రాఫిక్‌పై ఆ మోడల్ ఆధారంగా స్కోరింగ్ చేస్తున్నారు. ఆ ఆసక్తికరమైన ఉపయోగ సందర్భాలలో కొన్ని. భద్రతా క్యూలను చూసే ప్రధాన విమానయాన సంస్థ ఉంది మరియు వారు మీకు ఆ సమాచారం ఇవ్వడానికి ప్రయత్నిస్తున్నారు, “హే, ఇది మీ విమానానికి మీ విమానానికి మీ ద్వారం. ఈ రోజు TSA క్యూ 45 నిమిషాలు మరియు రెండు గంటలు వర్సెస్ వేరొకదానికి వ్యతిరేకంగా ఉంది. ”మీరు ఆ నవీకరణను ముందస్తుగా పొందుతారు. వారు ఇంకా దానిపై పని చేస్తున్నారు. ఆసక్తికరమైన IoT వినియోగ కేసు కానీ కస్టమర్ అనుభవానికి వెళ్ళే స్ట్రీమింగ్ అనలిటిక్స్ యొక్క గొప్ప సందర్భం.

రెబెకా జోజ్వియాక్: ఇది రెబెక్కా. మీరు వినియోగ కేసుల విషయంపై ఉన్నప్పుడు, ఆశ్చర్యపోతున్న ప్రేక్షకుల సభ్యుడి నుండి ఒక గొప్ప ప్రశ్న ఉంది, “ఈ కేస్ స్టడీస్, ఈ కార్యక్రమాలు ఇంటి సమాచార వ్యవస్థల విశ్లేషణాత్మక వైపు నుండి నడపబడుతున్నాయా లేదా అవి ఎక్కువ నుండి నడపబడుతున్నాయా? నిర్దిష్ట ప్రశ్నలు లేదా అవసరాలను దృష్టిలో పెట్టుకున్న వ్యాపారం? ”

ఆనంద్ వేణుగోపాల్: నేను 60 శాతం లేదా అంతకంటే ఎక్కువ, 50 శాతం నుండి 55 శాతం వరకు చూస్తానని అనుకుంటున్నాను, ఎక్కువగా చాలా చురుకైన, ఉత్సాహభరితమైన సాంకేతిక కార్యక్రమాలు తెలుసుకునేవారు, వారు చాలా తెలివిగలవారు మరియు కొన్ని వ్యాపార అవసరాలను అర్థం చేసుకుంటారు మరియు వారు గుర్తించిన ఒక స్పాన్సర్ ఉండవచ్చు కానీ ఇవి వ్యాపార వినియోగ కేసుల దాడికి సాంకేతిక బృందాలు సిద్ధమవుతున్నాయా మరియు వారు సామర్థ్యాన్ని పెంచుకున్న తర్వాత, వారు దీన్ని చేయగలరని వారికి తెలుసు, ఆపై వారు వ్యాపారానికి వెళ్లి దూకుడుగా విక్రయిస్తారు. 30 శాతం నుండి 40 శాతం కేసులలో, వ్యాపారానికి ఇప్పటికే ఒక ప్రత్యేకమైన ఉపయోగ కేసు ఉందని మేము చూశాము, ఇది స్ట్రీమింగ్ అనలిటిక్స్ సామర్ధ్యం కోసం వేడుకుంటుంది.

రెబెకా జోజ్వియాక్: ఇది అర్థవంతంగా ఉంది. ప్రేక్షకుల సభ్యుడి నుండి నాకు ఇంకొంచెం సాంకేతిక ప్రశ్న వచ్చింది. ఈ వ్యవస్థలు నిజ సమయంలో ప్రవాహాలు లేదా పోస్ట్‌ల అవక్షేపాలు వంటి నిర్మాణాత్మక మరియు నిర్మాణాత్మక డేటా స్ట్రీమ్‌లకు మద్దతు ఇస్తాయా లేదా అని ఆలోచిస్తున్నారా లేదా ప్రారంభంలో ఫిల్టర్ చేయాల్సిన అవసరం ఉందా?

ఆనంద్ వేణుగోపాల్: మేము మాట్లాడుతున్న ఉత్పత్తులు మరియు సాంకేతికతలు నిర్మాణాత్మక మరియు నిర్మాణాత్మక డేటా రెండింటికీ మద్దతు ఇస్తాయి. వాటిని కాన్ఫిగర్ చేయవచ్చు. అన్ని డేటా ఒక లేదా XML లేదా ఏదైనా ఏదైనా నిర్మాణాన్ని కలిగి ఉంటుంది. టైమ్ స్టాంప్ ఫీడ్ ఉన్నందున కొంత నిర్మాణం ఉంది. అన్వయించాల్సిన మరొక బొట్టు ఉండవచ్చు, కాబట్టి మీరు డేటా నిర్మాణాలను అన్వయించడానికి పార్స్‌లను స్ట్రీమ్‌లోకి ప్రవేశపెట్టవచ్చు. ఇది నిర్మాణాత్మకంగా ఉంటే, “సరే, కామాతో వేరు చేయబడిన విలువలు ఉంటే మరియు మొదటిది స్ట్రింగ్ అయితే, రెండవది తేదీ.” కాబట్టి మనం ఆ పార్సింగ్ ఇంటెలిజెన్స్‌ను అప్-స్క్రీన్ లేయర్‌లలోకి ప్రవేశపెట్టవచ్చు మరియు నిర్మాణాత్మక మరియు నిర్మాణాత్మక డేటా రెండింటినీ సులభంగా ప్రాసెస్ చేయండి.

రెబెకా జోజ్వియాక్: నాకు ప్రేక్షకుల నుండి మరో ప్రశ్న వచ్చింది. నేను గంట పైభాగంలో కొంచెం పరిగెడుతున్నానని నాకు తెలుసు. ఈ హాజరైన వ్యక్తి తెలుసుకోవాలనుకుంటున్నారు, రియల్ టైమ్ స్ట్రీమింగ్ అనువర్తనాలు లావాదేవీ వ్యవస్థలు, మోసం నివారణ వ్యవస్థలు వంటివి తిరిగి సమగ్రపరచడానికి ఒక అవసరం మరియు అవకాశం రెండింటినీ అభివృద్ధి చేస్తున్నట్లు అనిపిస్తుంది. అలాంటప్పుడు, లావాదేవీ వ్యవస్థలు దానికి తగినట్లుగా సర్దుబాటు చేయాల్సిన అవసరం ఉందా?

ఆనంద్ వేణుగోపాల్: ఇది విలీనం, సరియైనదేనా? ఇది లావాదేవీ వ్యవస్థల విలీనం. అవి కొన్నిసార్లు మేము నిజ సమయంలో లావాదేవీలను విశ్లేషిస్తున్న డేటా యొక్క మూలంగా మారుతాయి మరియు చాలా సందర్భాల్లో ఒక అప్లికేషన్ ప్రవాహం ఉందని చెప్పండి మరియు ఇక్కడ నేను స్టాటిక్ డేటా లుక్అప్ సైట్‌ను చూపించడానికి ప్రయత్నిస్తున్నాను, ఆపై మన విషయంలో ఒక విధమైన స్ట్రీమింగ్ లో మరియు మీరు ఒక నిర్ణయం లేదా విశ్లేషణాత్మక అంతర్దృష్టిని పొందడానికి స్ట్రీమింగ్ డేటాను మరియు స్టాటిక్ డేటాను సమృద్ధిగా చేయడానికి HBase లేదా RDBMS వంటి స్టాటిక్ డేటాబేస్ను చూస్తున్నారు.

OLAP మరియు OLTP ల కలయిక - మేము కూడా చూస్తున్న మరో పెద్ద పరిశ్రమ ధోరణి ఉంది మరియు అందువల్ల మీకు కుడు వంటి డేటాబేస్లు మరియు ఒకే సమయంలో లావాదేవీలు మరియు విశ్లేషణాత్మక ప్రాసెసింగ్ రెండింటికి మద్దతు ఇచ్చే ఇన్-మెమరీ డేటాబేస్ ఉన్నాయి. స్ట్రీమ్ ప్రాసెసింగ్ లేయర్ పూర్తిగా మెమరీలో ఉంటుంది మరియు మేము ఈ లావాదేవీల డేటాబేస్‌లలో కొన్నింటిని చూస్తాము లేదా ఇంటర్‌ఫేస్ చేస్తాము.

రెబెకా జోజ్వియాక్: మిశ్రమ పనిభారం దూకడానికి చివరి అడ్డంకిలలో ఒకటి, నేను అనుకుంటున్నాను. డెజ్, రాబిన్, మీ ఇద్దరికీ ఇంకేమైనా ప్రశ్నలు ఉన్నాయా?

డెజ్ బ్లాంచ్ఫీల్డ్: మీరు పట్టించుకోకపోతే నేను చివరి ప్రశ్నలోకి దూకుతాను. గత దశాబ్ద కాలంగా నేను వ్యవహరిస్తున్న సంస్థలు లేదా స్ట్రీమ్ అనలిటిక్స్ యొక్క ఈ ఉత్తేజకరమైన సవాలుకు దారితీసిన మొదటి సవాలు, ఈ మొత్తం సవాలు చుట్టూ మేము సంభాషణను ప్రారంభించినప్పుడు వారు తిరిగి పట్టికలో ఉంచడం మొదటి విషయం. మేము నైపుణ్యం సమితిని పొందుతామా? నైపుణ్యం సమితిని మేము ఎలా తిరిగి శిక్షణ ఇస్తాము మరియు అంతర్గతంగా ఆ సామర్థ్యాన్ని ఎలా పొందగలం? ప్రేరణ మరియు చేతితో ప్రయాణం ద్వారా మమ్మల్ని పట్టుకుని, ఆపై గొప్ప మొదటి దశగా అమలు చేయండి మరియు అది చేయడం చాలా అర్ధమే.

కానీ మీడియం నుండి పెద్ద సంస్థ కోసం, దీని కోసం మీరు సిద్ధం చేయడానికి, అంతర్గతంగా ఆ సామర్థ్యాన్ని పెంపొందించడానికి, దాని చుట్టూ ఉన్న ప్రాథమిక పదజాలం నుండి ఏదైనా పొందటానికి మరియు వారు ఎలాంటి చేయగలుగుతారు? ఈ విధమైన ఫ్రేమ్‌వర్క్‌కు పరివర్తన చుట్టూ ఉన్న సంస్థ మరియు వారి ప్రస్తుత సాంకేతిక సిబ్బందిని సిఇఒ నుండి ఐటి నుండి రీటూల్ చేయడం ద్వారా మీరు దీన్ని నిర్మించి అమలు చేసిన తర్వాత వారు దీనిని అమలు చేయగలరా? చాలా క్లుప్తంగా, ఏ విధమైన సవాళ్లు మరియు వాటిని ఎలా పరిష్కరిస్తున్నారు, మీరు వ్యవహరిస్తున్న కస్టమర్‌లు, వారు కనుగొన్న సవాళ్లు మరియు వారు తిరిగి ఎలా అనుభవించాలో మరియు తిరిగి పొందడం ద్వారా అనుభవం మరియు జ్ఞానాన్ని తిరిగి పొందడం ద్వారా ఈ కోసం సిద్ధంగా ఉండటానికి మరియు ఉండటానికి కార్యాచరణ చుట్టూ తిరగగలరా?

ఆనంద్ వేణుగోపాల్: తరచుగా, స్ట్రీమింగ్ ఎనలిటిక్స్ ప్లాట్‌ఫామ్‌ను బయటకు వెళ్లి కొనుగోలు చేయడానికి ప్రయత్నిస్తున్న చిన్న వ్యక్తుల సమూహం ఇప్పటికే హడూప్ గురించి తెలుసుకోవడంలో సహేతుకంగా స్మార్ట్ గా ఉంది, వారు ఇప్పటికే తమ హడూప్ మ్యాప్‌రెడ్యూస్ నైపుణ్యాలను సంపాదించుకున్నారు మరియు వారు హడూప్ పంపిణీ విక్రేతతో కలిసి పనిచేస్తున్నారు, వారు సుపరిచితులు. ప్రతిదీ కాఫ్కాను పొందుతోంది, ఉదాహరణకు. వారు దానితో ఏదో చేస్తున్నారు మరియు తుఫాను లేదా స్పార్క్ స్ట్రీమింగ్ వారి ఓపెన్ సోర్స్ డొమైన్‌లో ఉంది. ఖచ్చితంగా, ప్రజలు దాని గురించి బాగా తెలుసు లేదా దాని చుట్టూ నైపుణ్యాలను పెంచుకుంటారు. కానీ ఇది తగినంత నైపుణ్యం మరియు తగినంత స్మార్ట్ ఉన్న వ్యక్తుల యొక్క చిన్న సమూహంతో మొదలవుతుంది. వారు సమావేశాలకు హాజరవుతున్నారు. వారు నేర్చుకుంటున్నారు మరియు వారు విక్రేతలకు తెలివైన ప్రశ్నలు అడుగుతారు మరియు కొన్ని సందర్భాల్లో వారు విక్రేతలతో నేర్చుకుంటారు. మొదటి సమావేశంలో విక్రేతలు వస్తున్నారు మరియు ప్రదర్శిస్తున్నారు, వారికి విషయాలు తెలియకపోవచ్చు కాని వారు కలిసి చదువుతారు మరియు వారు దానితో ఆడటం ప్రారంభిస్తారు.

ప్రజల యొక్క చిన్న సమూహం కేంద్రకం మరియు అది పెరగడం ప్రారంభిస్తుంది మరియు మొదటి వ్యాపార వినియోగ కేసు కార్యరూపం దాల్చుతుందని ప్రతి ఒక్కరూ ఇప్పుడు గ్రహించారు. అక్కడ ఒక వేవ్ మొదలవుతుంది మరియు గత వారం స్పార్క్ శిఖరాగ్ర సమావేశంలో క్యాపిటల్ వన్ వంటి పెద్ద సంస్థ అక్కడ మరియు పూర్తి శక్తితో ఉంది. వారు స్పార్క్ను ఎంచుకున్నారు. వారు దాని గురించి మాట్లాడుతున్నారు. వారు స్పార్క్లో తమ ప్రజలకు చాలా మందికి విద్యను అందిస్తున్నారు ఎందుకంటే వారు వినియోగదారుగా అనేక సందర్భాల్లో దీనికి సహకరిస్తున్నారు. మేము చాలా పెద్ద సంస్థలతో ఒకే విధంగా చూస్తాము. ఇది చాలా చిన్న స్మార్ట్ వ్యక్తులతో మొదలవుతుంది మరియు అది మొత్తం విద్య యొక్క తరంగాన్ని ప్రారంభిస్తుంది మరియు ఒకసారి ఒక సీనియర్ VP లేదా ఒకసారి ఒక సీనియర్ డైరెక్టర్ సమలేఖనం చేయబడిందని మరియు వారు ఈ విషయంపై పందెం వేయాలని కోరుకుంటున్నారని మరియు పదం చుట్టూ వస్తుంది వారు అన్ని ఈ నైపుణ్యాలను ఎంచుకోవడం ప్రారంభిస్తారు.

డెజ్ బ్లాంచ్ఫీల్డ్: ఆ ఛాంపియన్‌లను నిర్మించడంలో మీకు అద్భుతమైన సమయం ఉందని నేను ఖచ్చితంగా అనుకుంటున్నాను.

ఆనంద్ వేణుగోపాల్: అవును. మేము ప్రారంభ ఛాంపియన్‌లతో కలిసి పనిచేస్తున్నప్పుడు మేము చాలా విద్యను చేస్తాము మరియు మేము శిక్షణా కోర్సులు మరియు చాలా మందిని కలిగి ఉన్నాము, మా పెద్ద కస్టమర్ల కోసం చాలా మంది మేము తిరిగి వెళ్ళాము మరియు చాలా మంది వినియోగదారులను ప్రధాన స్రవంతి వినియోగ దశలోకి తీసుకురావడానికి తరంగాలు మరియు శిక్షణ తరంగాలను కలిగి ఉన్నాము. హడూప్ మ్యాప్‌రెడ్యూస్ సైట్‌లో. మా కస్టమర్ అయిన పెద్ద క్రెడిట్ కార్డ్ కంపెనీలో, మేము కనీసం ఐదు నుండి ఎనిమిది వేర్వేరు శిక్షణా కార్యక్రమాలను అందించాము. మాతో సహా ఈ ఉత్పత్తుల యొక్క ఉచిత కమ్యూనిటీ ఎడిషన్లు కూడా ఉన్నాయి, ప్రజలు డౌన్‌లోడ్ చేయగల శాండ్‌బాక్స్‌లు, అలవాటు చేసుకోవచ్చు మరియు తమను తాము విద్యావంతులను చేసుకోవచ్చు.

డెజ్ బ్లాంచ్ఫీల్డ్: ఈ ఉదయం మీ కోసం నేను కలిగి ఉన్నాను. చాలా ధన్యవాదాలు. మోడళ్ల రకాలను చూడటం మరియు ఈ రోజు మీరు మాకు లభించిన కేసులను ఉపయోగించడం చాలా ఆసక్తికరంగా ఉందని నేను భావిస్తున్నాను. ధన్యవాదాలు.

ఆనంద్ వేణుగోపాల్: గ్రేట్. చాలా ధన్యవాదాలు.

రెబెకా జోజ్వియాక్: ఈ హాట్ టెక్నాలజీస్ వెబ్‌కాస్ట్‌లో మాతో చేరిన ప్రతి ఒక్కరికీ ధన్యవాదాలు. డెజ్ బ్లాంచ్ఫీల్డ్, డాక్టర్ రాబిన్ బ్లూర్ మరియు ఇంపెటస్ టెక్నాలజీస్, ఆనంద్ వేణుగోపాల్ నుండి వినడం మనోహరంగా ఉంది. సమర్పకులకు ధన్యవాదాలు. వక్తలకు ధన్యవాదాలు మరియు ప్రేక్షకులకు ధన్యవాదాలు. వచ్చే నెలలో మాకు మరో హాట్ టెక్నాలజీస్ ఉన్నాయి, కాబట్టి దాని కోసం చూడండి. Insideanalysis.com లో ఆర్కైవ్ చేయబడిన మా కంటెంట్‌ను మీరు ఎల్లప్పుడూ కనుగొనవచ్చు. మేము స్లైడ్ షేర్‌లో చాలా కంటెంట్‌ను మరియు యూట్యూబ్‌లో కొన్ని ఆసక్తికరమైన బిట్‌లను కూడా ఉంచాము.

ఇవన్నీ. మళ్ళీ ధన్యవాదాలు మరియు మంచి రోజు. వీడ్కోలు.