'பெரிய தரவு' என்பது என்ன?

ஏன் இது ஒரு பெரிய ஒப்பந்தம்?

'பெரிய தரவு' என்பது புவியியல் அறிவியலின் பெரிய அளவிலான படிப்பினைகள் படிப்பதன் மூலம் புரிந்துணர்வின் புதிய விஞ்ஞானமாகும். பெரிய தரவு 'முன்னுரிமை பகுப்பாய்வு' என்றும் அழைக்கப்படுகிறது.

ட்விட்டர் பதிவுகள், பேஸ்புக் உணவுகள், eBay தேடல்கள், ஜிபிஎஸ் டிராக்கர்கள் மற்றும் ஏடிஎம் இயந்திரங்களை பகுப்பாய்வு செய்வது சில பெரிய தரவு எடுத்துக்காட்டுகள். பாதுகாப்பு வீடியோக்கள், டிராஃபிக் தகவல்கள், வானிலை வடிவங்கள், விமான வருகை, செல் போன் டாப் பதிவுகள், மற்றும் இதய துடிப்பு டிராக்கர்கள் ஆகியவை மற்ற படிவங்கள். பெரிய தரவு வாராந்தம் மாறுகிறது ஒரு குழப்பமான புதிய அறிவியல், மற்றும் ஒரு சில நிபுணர்கள் மட்டுமே அதை புரிந்து.

வழக்கமான வாழ்க்கையில் பெரிய தரவு சில எடுத்துக்காட்டுகள் என்ன?

மிகப் பெரிய தரவுத் திட்டங்கள் மிகவும் தெளிவற்றவை என்றாலும், தனிநபர்கள், நிறுவனங்கள் மற்றும் அரசாங்கங்களின் அன்றாட வாழ்க்கையை பாதிக்கும் பெரிய தரவுகளின் வெற்றிகரமான உதாரணங்கள் உள்ளன:

சமூக-அரசியல் தரவு, வானிலை மற்றும் காலநிலை தகவல்கள் மற்றும் மருத்துவமனை / மருத்துவ தரவு ஆகியவற்றை ஆய்வு செய்வதன் மூலம், இந்த விஞ்ஞானிகள் இப்போது டெங்கு காய்ச்சலை திடீரென 4 வாரங்கள் முன்கூட்டியே அறிவிக்கிறார்கள் என்று கணிக்கின்றனர்.

Homicide Watch: இந்த பெரிய தரவு திட்டம் சுயவிவரங்கள் கொலை பாதிக்கப்பட்டவர்கள், சந்தேக நபர்கள், மற்றும் வாஷிங்டன், டிசி குற்றவாளிகள். இறந்தவர்களையும் மக்களுக்கு ஒரு விழிப்புணர்வு வளத்தையும் கௌரவப்படுத்தும் விதமாக இந்த பெரிய தரவு திட்டம் கண்கவர் உள்ளது.

டிரான்ஸிட் டிராவல் பிளானிங், நியூ யார்க்: WNYC ரேடியோ ப்ரோக்ராமர் ஸ்டீவ் மெலென்டெஸ் பயணப் பாதை மென்பொருள் மூலம் ஆன்லைன் சுரங்கப்பாதை அட்டவணையை ஒருங்கிணைத்துள்ளார். அவரது படைப்பு நியூ யார்க்கர்ஸ் வரைபடத்தில் தங்கள் இருப்பிடத்தை அனுமதிக்கிறது, மற்றும் ரயில்கள் மற்றும் சுரங்கப்பாதை பயண நேரம் ஒரு கணிப்பு தோன்றும்.

செரொக்ஸ் அவர்களது பண இழப்பைக் குறைத்தது: கால் சென்டர் வேலை உணர்ச்சி ரீதியாக களைப்பாக இருக்கிறது. தொழில்முறை ஆய்வாளர்களின் உதவியுடன் தரவுகளின் ரேம்களைப் பற்றி ஜெராக்ஸ் ஆய்வு செய்துள்ளது, மேலும் இப்போது எந்த அழைப்பு மைய வாடகைக்கு நிறுவனம் நீண்ட காலமாக தங்கியிருக்கக்கூடும் என்று கணிக்க முடியும்.

பயங்கரவாதத்தை ஆதரிப்பது: சமூக ஊடகங்கள், நிதியியல் பதிவுகளை, விமான முன்பதிவு மற்றும் பாதுகாப்புத் தரவைப் படிப்பதன் மூலம், பயங்கரவாத சந்தேக நபர்களைத் துஷ்பிரயோகம் செய்வதற்கு முன்னதாக சட்ட அமலாக்கத்தை கணிக்க முடியும்.

சமூக மீடியா விமர்சனங்களை அடிப்படையாக கொண்ட பிராண்ட் மார்க்கெட்டிங் சரிசெய்தல் : மக்கள் ஒரு பப், உணவகம், அல்லது உடற்பயிற்சி கிளப் மீது தங்கள் ஆன்லைன் எண்ணங்களை பகிர்ந்து மற்றும் விரைவில் பகிர்ந்து. இந்த மில்லியன்கணக்கான சமூக ஊடக பதிவைப் படிப்பதற்கும், தங்கள் சேவைகளைப் பற்றி மக்கள் என்ன நினைக்கிறார்கள் என்பதனை நிறுவனத்திற்கு தெரிவிக்க முடியும்.

யார் பெரிய தரவு பயன்படுத்துகிறது? அவர்கள் என்ன செய்கிறார்கள்?

வாடிக்கையாளர்களின் திருப்தி அதிகரிக்க அவர்களின் பலன்கள் மற்றும் விலைகளை சரிசெய்ய பல தனித்துவமான நிறுவனங்கள் பெரிய தரவுகளைப் பயன்படுத்துகின்றன.

• உதாரணமாக, மேசியின் திணைக்கள அங்காடி 70 மில்லியன் தயாரிப்புகளுக்கு மேலதிகமாக தங்களுடைய விலையை நிர்ணயிப்பதற்கு பெரிய தரவுகளைப் பயன்படுத்துகிறது. அவர்கள் ஆர்வமாக உள்ளனர் என்று மேசி நம்புகிறார் என்பதன் அடிப்படையில் அவர்கள் வாடிக்கையாளர்களுக்கு தனிப்பயனாக்கப்பட்ட மின்னஞ்சல்களை அனுப்புகின்றனர்.
  
• பாஸ்டன் மராத்தான் குண்டுவீச்சிற்கு பொலிஸ் பதிலளிப்பு : வீடியோ மற்றும் கண்காணிப்புப் படங்களைப் படிக்க பெரிய தரவுகளைப் பயன்படுத்தி, பொலிஸ் சந்தேக நபர்களைத் தேடி விரைவாக விரைவாகச் சோதனையிட முடிந்தது.
  
• மோர்டன் இன் ஸ்டீக்ஹவுஸ் ட்ரெட்டரைப் பயன்படுத்துகிறது, இது மார்க்கெட்டிங் ஸ்டண்ட்ஸை இழுக்க, ஒரு போர்ட்டர்ஹவுஸ் ஸ்டீக் மற்றும் இறால் டின்னர் பிரபலமான நியூ ஜெர்சி விமான நிலையம் உட்பட.
  
• மோசடிகளை அடையாளம் கண்டு பிடிக்க பெரும் விசா பயன்படுத்துகிறது. ஒற்றை பரிவர்த்தனைகள் இங்கு ஒரு நேர்மையற்ற கடன் அட்டை பயனரை எளிதில் மறைக்க முடியும், ஆனால் மில்லியன் கணக்கான பரிவர்த்தனைகள் கவனமாக பார்த்து, மோசடி முறைகளை கண்டறிய முடியும்.
  
• பேஸ்புக் விளம்பரப்படுத்துதலுக்கு பெரிய தரவுகளைப் பயன்படுத்துகிறது . கவனமாக உங்கள் FB பிடிக்கும் மற்றும் உலாவல் பழக்கம் படிப்பதன் மூலம், சமூக ஊடக மாபெரும் உங்கள் சுவைகளை வியக்கத்தக்க பார்வையை கொண்டுள்ளது. உங்கள் பேஸ்புக் ஊட்டத்தில் நீங்கள் காணும் அந்த பக்கப்பட்டியில் விளம்பரங்கள் உங்கள் பேஸ்புக் பழக்கங்களைக் கவனித்துக் கொண்டிருக்கும் மிகவும் திட்டமிட்ட மற்றும் சிக்கலான நெறிமுறைகளால் தேர்ந்தெடுக்கப்படுகின்றன.

ஏன் பெரிய தரவு இத்தகைய பெரிய ஒப்பந்தம்?

4 விஷயங்கள் பெரிய தரவு முக்கியத்துவம்:

1. தரவு மகத்தானது. இது ஒற்றை வன்வட்டில் பொருந்தாது, யூ.எஸ்.பி குச்சி மிகக் குறைந்தது. தரவுகளின் அளவை விட மனித மனம் என்ன உணர முடிகிறது (ஒரு பில்லியன் பில்லியன் மெகாபைட்டுகளைப் பற்றி சிந்தித்து, பில்லியன் கணக்கில் பெருக்குகிறது).

2. தரவு குளறுபடியாகவும், கட்டமைக்கப்பட்டதாகவும் உள்ளது. பெரிய தரவு வேலை 50% முதல் 80% தகவலை மாற்ற மற்றும் சுத்தம் என்று தேடல் மற்றும் sortable உள்ளது. எங்கள் கிரகத்தில் ஒரு சில ஆயிரம் நிபுணர்கள் மட்டுமே இந்த தரவு தூய்மைப்படுத்துவது எப்படி தெரியும். இந்த வல்லுநர்களுக்கு HPE மற்றும் Hadoop போன்ற சிறப்பு கருவிகள் அவற்றின் கைவினை செய்ய வேண்டும். ஒருவேளை 10 ஆண்டுகளில், பெரிய தரவு வல்லுனர்கள் ஒரு டூம் டசின் ஆகலாம், ஆனால் இப்போது, ​​அவர்கள் ஆய்வாளரின் மிக அரிதான இனங்கள் மற்றும் அவர்களின் வேலை இன்னும் தெளிவற்ற மற்றும் கடினமானதாக உள்ளது.

3. விற்கவும் வாங்கவும் முடியும் என்று ஒரு பொருள் ** தகவல். நிறுவனங்கள் மற்றும் தனிநபர்கள் டெராபைட்ஸை சமூக ஊடகங்கள் மற்றும் பிற தரவுகளை வாங்கக்கூடிய தரவுத் தளங்கள் உள்ளன. தரவு மிக மேகம் அடிப்படையிலானது, இது எந்தவொரு வன்விலும் பொருந்தக்கூடிய மிகப்பெரியது. வாங்குதல் தரவு பொதுவாக ஒரு கிளவுட் சேவையக பண்ணைக்கு செருகக்கூடிய ஒரு சந்தா கட்டணத்தை உள்ளடக்குகிறது.

** பெரிய தரவு கருவிகள் மற்றும் கருத்துக்களின் தலைவர்கள் அமேசான், கூகுள், ஃபேஸ்புக், மற்றும் யாகூ. ஏனென்றால், இந்த நிறுவனங்கள் பல மில்லியன் கணக்கான மக்களை தங்கள் ஆன்லைன் சேவையுடன் சேவை செய்கின்றன, அவை சேகரிப்பு புள்ளியாகவும் பெரிய தரவு பகுப்பாய்வுக்குப் பின்னணியில் இருக்கும் பார்வையாளர்களாகவும் இருக்கும் என்று கருதுகிறது.

4. பெரிய தரவு சாத்தியங்கள் முடிவற்ற உள்ளன. அவர்கள் நடக்கும் சில வாரங்களுக்கு முன்பு மருத்துவர்கள் ஒருநாள் மாரடைப்பு மற்றும் பக்கவாதம் ஆகியவற்றை கணிக்க முடியும். விமானம் மற்றும் வாகன விபத்துகள் அவர்களின் இயந்திர தரவு மற்றும் போக்குவரத்து மற்றும் வானிலை முறைகள் கணிப்பு பகுப்பாய்வு குறைக்கப்படலாம். ஆன்லைன் டேட்டிங் உங்களுக்காக இணக்கமான நபர்கள் யார் பெரிய தரவு முன்னறிவிப்பாளர்கள் மூலம் மேம்படுத்தலாம். இசையமைப்பாளர்களின் மாறும் சுவைக்கு இசையமைப்பதில் மிகுந்த மகிழ்ச்சியளிக்கும் இசை அமைப்பாளர்களை இசைக்கலைஞர்கள் புரிந்து கொள்ளலாம். ஊட்டச்சத்துக்காரர்கள் கடையில் வாங்கும் உணவுகள் கலவையை ஒரு நபரின் மருத்துவ நிலைமைகளை மோசமாக்கும் அல்லது உதவுவார்கள் என்று கணிக்க முடியும். மேற்பரப்பு மட்டும் கீறப்பட்டது, மற்றும் பெரிய தரவு கண்டுபிடிப்புகள் ஒவ்வொரு வாரமும் நடக்கும்.

பெரிய தரவு குழப்பம்

பெரிய தரவு முன்கணிப்பு பகுப்பாய்வு ஆகும்: பாரிய கட்டமைக்கப்பட்ட தரவை தேடத்தக்க மற்றும் வரிசைப்படுத்தப்பட்ட ஒன்றை மாற்றியமைக்கிறது. இது விசேஷமான அறிவு மற்றும் பொறுமை தேவைப்படும் ஒரு குழப்பமான மற்றும் குழப்பமான இடமாகும்.

உதாரணமாக தனித்துவமான யுபிஎஸ் விநியோக சேவை எடுத்துக்கொள்ளுங்கள். போக்குவரத்து நெரிசலுக்குத் தக்கவாறு செயல்படுவதற்கு மிகவும் திறமையான வழிகளை ஆராய்ந்து பார்ப்பதற்கு டிரைவர்கள் 'ஜிபிஎஸ் மற்றும் ஸ்மார்ட்போன்கள் ஆகியவற்றிலிருந்து யுபிஎஸ் படிப்பு தரவரிசையில் உள்ள நிரலாளர்கள். இந்த ஜி.பி.எஸ் மற்றும் ஸ்மார்ட்போன் தரவுகள் பெருமளவில் உள்ளன, மேலும் தானாக பகுப்பாய்வு செய்ய தயாராக இல்லை. இந்த தரவு பல்வேறு ஜிபிஎஸ் மற்றும் வரைபட தரவுத்தளங்களில் இருந்து வெவ்வேறு ஸ்மார்ட்போன் வன்பொருள் சாதனங்களில் இருந்து ஊடுருவி வருகிறது. யுபிஎஸ் ஆய்வாளர்கள் அந்த தரவை அனைத்து தரவையும் மாற்றியமைத்து, எளிதாக தேட மற்றும் வரிசைப்படுத்த முடியும். முயற்சி என்றாலும், அது மதிப்பு. இந்த பெரிய தரவு பகுப்பாய்வுகளைப் பயன்படுத்த ஆரம்பித்ததிலிருந்து இன்று UPS 8 மில்லியனுக்கும் அதிகமான எரிபொருள்களை சேமிக்கிறது.

பெரிய தரவு குழப்பம் மற்றும் பயன்பாடு தூய்மைப்படுத்துதல் மற்றும் பயன்பாட்டுக்கு தயாரிக்க மிகவும் முயற்சி தேவை என்பதால், தரவு விஞ்ஞானிகள் அவர்கள் செய்ய அனைத்து கடினமான வேலை 'தரவு janitors' செல்லப்பெயர் மாறிவிட்டன.

பெரிய தரவு மற்றும் கணிப்பு பகுப்பாய்வு அறிவியல் ஒவ்வொரு வாரமும் மேம்படுத்துகிறது. 2025 ஆம் ஆண்டளவில் எல்லோருக்கும் உடனடியாக அணுகக்கூடிய பெரிய தரவு எதிர்பார்க்கலாம்.

பெரிய தரவு தனியுரிமை ஒரு ஊடுருவும் அச்சுறுத்தல் அல்லவா?

ஆமாம், எங்கள் சட்டங்களும் தனி தனியுரிமை பாதுகாப்புகளும் கவனமாக நிர்வகிக்கப்படவில்லை என்றால், பெரிய தரவு தனிப்பட்ட தனியுரிமைக்குள் ஊடுருவிவிடும். இது போல், Google மற்றும் YouTube மற்றும் பேஸ்புக் ஏற்கனவே உங்கள் தினசரி ஆன்லைன் பழக்கம் கண்காணிக்க . உங்கள் ஸ்மார்ட்போன் மற்றும் கணினி வாழ்க்கை ஒவ்வொரு நாளும் டிஜிட்டல் கால்தடங்களை விட்டு விடும், மற்றும் அதிநவீன நிறுவனங்கள் அந்த அடிச்சுவட்டை படிக்கும்.

பெரிய தரவுகளைச் சுற்றியுள்ள சட்டங்கள் உருவாகின்றன. தனியுரிமை என்பது இப்போது நீங்கள் தனிப்பட்ட பொறுப்பை ஏற்க வேண்டும் என்ற நிலையில் உள்ளது, இது இனிமேல் இயல்புநிலை உரிமை என்று எதிர்பார்க்க முடியாது.

உங்கள் தனியுரிமையைப் பாதுகாக்க நீங்கள் என்ன செய்யலாம்:

ஒரு VPN நெட்வொர்க் இணைப்பைப் பயன்படுத்தி உங்கள் தினசரி பழக்கவழக்கங்களை நீங்கள் எடுத்துக் கொள்ளலாம் . உங்கள் அடையாளமும் இடமும் குறைந்தபட்சம் பாவனையாளர்களிடமிருந்து மறைக்கப்பட்டுவிட்டால், ஒரு VPN சேவையானது உங்கள் சிக்னலை முறித்துக் கொள்ளும். இது உங்களை 100% அநாமதேயமாக்காது, ஆனால் உங்கள் ஆன்லைன் பழக்கவழக்கங்களை உலகளாவிய ரீதியில் கண்காணிக்க எவ்வளவு VPN கணிசமாக குறைக்கப்படும்.

பெரிய தரவுகளைப் பற்றி நான் எங்கு அறிய முடியும்?

பெரிய தரவு பகுப்பாய்வு மனதில் மக்கள் மற்றும் தொழில்நுட்ப ஒரு காதல் ஒரு கண்கவர் விஷயம். இது நீங்கள் என்றால், பின்னர் நிச்சயமாக சுவாரஸ்யமான பெரிய தரவு திட்டங்கள் இந்த பக்கம் வருகை.