మీ చాట్‌బాట్ కేవలం తర్వాతి పదాన్ని ఊహిస్తోంది. మరి అది అంత బాగా ఎలా పనిచేస్తుంది?

ఒక ఆధునిక చాట్‌బాట్‌ను క్వాంటమ్ మెకానిక్స్ వివరించమని అడగండి, అది వివరిస్తుంది. “strawberry” అనే పదంలో “r” అక్షరం ఎన్నిసార్లు వస్తుందని అడగండి, అది నమ్మకంగా మీకు రెండుసార్లు అని చెప్పవచ్చు.

ఆ అంతరం (ఒకే శ్వాసలో మేధావితనం, పొరపాటు) మీరు సరిదిద్దగలిగే ఒక లోపం కాదు. ఈ వ్యవస్థలు నిజంగా ఎలా పనిచేస్తాయో దాని నుండి నేరుగా ఇది వస్తుంది. ఈ రహస్యం దాదాపు అవమానకరంగా సరళమైనది.

ఇది ఆటోకంప్లీట్. అత్యంత చక్కని ఆటోకంప్లీట్.

ఒక పెద్ద భాషా నమూనా సరిగ్గా ఒకే పని చేస్తుంది: కొంత వచనం ఇచ్చినప్పుడు, అది వచనం యొక్క తర్వాతి భాగాన్ని అంచనా వేస్తుంది. తర్వాత ఆ భాగాన్ని జోడించి, కొత్త మొత్తాన్ని చూసి, తర్వాతిదాన్ని అంచనా వేస్తుంది. మళ్ళీ. మళ్ళీ, వందల సార్లు, అది మీకు ఒక వ్యాసం రాసేవరకు.

అంతే. ఇదే మొత్తం ఉపాయం. మీ ఫోన్ కీబోర్డ్ తర్వాతి పదాన్ని సూచించేటప్పుడు ఇలాంటిదే ఒక అనాలోచిత రూపాన్ని చేస్తుంది. చాట్‌జిపిటి అదే ఆలోచనను దాదాపు ఊహించలేనంతగా పెద్దదిగా చేస్తుంది, ఇంటర్నెట్‌లో పెద్ద భాగం, పుస్తకాలు, కోడ్‌పై శిక్షణ పొంది, దాని అంచనాలు విచిత్రంగా బాగుపడేవరకు.

మోడల్ స్వయంగా ఏదైనా వాస్తవాల డేటాబేస్‌ను సంప్రదించడం లేదు. ఇది ఒక ప్రశ్నకు సమాధానం ఇవ్వడానికి బిలియన్ల లెక్కలు నడుపుతోంది, మళ్ళీ మళ్ళీ: ఇప్పటివరకు జరిగినదాన్ని బట్టి, తర్వాత అత్యంత విశ్వసనీయంగా ఏ పదం వస్తుంది?

ఒక ముఖ్యమైన హెచ్చరిక, ఎందుకంటే ఇది మీరు ఏమి ఆశించాలో మారుస్తుంది. మోడల్ ఇంజిన్, మొత్తం కారు కాదు. ఈ మోడళ్ల చుట్టూ నిర్మించిన ఉత్పత్తులు ఇప్పుడు నిజంగా విషయాలను వెతుకుతాయి: చాట్‌జిపిటి లేదా క్లాడ్‌ను ఇటీవలి ఏదైనా అడగండి, అది తరచుగా వెబ్‌ను శోధించి మీకు మూలాలను అందిస్తుంది. ఆ తిరిగి పొందడం అంచనా-ఇంజిన్ చుట్టూ జోడించబడింది, దాన్ని భర్తీ చేయడం లేదు, ఆధునిక సహాయకులు గతంలో కంటే ఎక్కువసార్లు వాస్తవాలను సరిగ్గా చెప్పడానికి ఇదే ఏకైక అతిపెద్ద కారణం. లోపల, ఇంజిన్ ఇప్పటికీ అంచనా వేస్తూనే ఉంది.

పదాలను అంచనా వేయడం స్పష్టమైన మేధావితనాన్ని ఎందుకు సృష్టిస్తుంది

దీన్ని పనిచేయించే మెలిక ఏమిటంటే: మొత్తం మానవ రచనలో తర్వాతి పదాన్ని నిజంగా చక్కగా అంచనా వేయడానికి, ఒక వ్యవస్థ ఆ రచన కింద ఉన్న నమూనాలను గ్రహించవలసి వస్తుంది. దీని అర్థం వ్యాకరణం, ఏ వాస్తవాలు కలిసి కనిపిస్తుంటాయో, ఒక వాదన ఆకారం, ఒక జోక్ యొక్క లయ.

దీన్ని సాధ్యం చేసిన పురోగతి 2017లో ట్రాన్స్‌ఫార్మర్ అనే ఒక డిజైన్, ఇది మోడళ్లను ఒక పేరాలోని ప్రతి పదం మరో ప్రతి పదంతో ఎలా సంబంధం కలిగి ఉందో తూచడానికి అనుమతించింది, కచ్చితంగా ఎడమ నుండి కుడికి చదవడానికి బదులుగా సంబంధిత సందర్భానికి “శ్రద్ధ” చూపిస్తూ. ఆ నిర్మాణాన్ని తగినంత డేటా, గణన శక్తితో పెద్దదిగా చేయండి, తర్వాతి-పద అంచనా ఆటోకంప్లీట్‌లా కనిపించడం మానేసి జ్ఞానంలా కనిపించడం మొదలుపెడుతుంది.

కానీ ఇది జ్ఞానం కాదు. ఇది మనుషులు భాషను ఎలా ఉపయోగిస్తారో అద్భుతంగా వివరణాత్మకమైన గణాంక పటం. అందుకే ఇది మీకు ఒక సొనెట్ రాసివ్వగలదు, అయినప్పటికీ ఒక పిల్లల స్పెల్లింగ్ ప్రశ్నలో తడబడగలదు.

ఇది ఎందుకు భ్రమలు సృష్టిస్తుంది (ఎప్పుడూ కొంచెం సృష్టిస్తూనే ఉంటుంది)

ఒక చాట్‌బాట్ ఒక నకిలీ కోర్టు కేసును లేదా ఉనికిలో లేని పుస్తకాన్ని కల్పించినప్పుడు, మనం దాన్ని “భ్రమ” అని పిలుస్తాం. ఇది తప్పుదారి పట్టించే పదం. మోడల్ సరిగ్గా పనిచేయడం లేదు. ఇది ఎప్పుడూ చేసే దాన్నే సరిగ్గా చేస్తోంది, అత్యంత విశ్వసనీయంగా వినిపించే కొనసాగింపును ఉత్పత్తి చేస్తోంది, విశ్వసనీయమైన సమాధానం, నిజమైన సమాధానం ఒకటి కాని పరిస్థితిలో.

మోడల్‌కు “నిజం” అనే వేరే భావన లేదు. దానికి “సంభావ్యం” ఉంది. ఎక్కువసార్లు ఇవి అతివ్యాప్తి చెందుతాయి, అందుకే ఇది ఉపయోగకరంగా ఉంటుంది. ఇవి వేరుపడినప్పుడు, అది మీకు ఒక నమ్మకమైన, సాఫీగా ఉండే, పూర్తిగా కల్పితమైన సమాధానాన్ని ఇస్తుంది, లోపల ఎలాంటి హెచ్చరిక మోగకుండా, ఎందుకంటే మోగడానికి ఎలాంటి హెచ్చరికే లేదు.

ఆ “strawberry” సమస్య? ఇది వచనాన్ని అక్షరాలుగా కాకుండా టోకెన్లు అనే భాగాలుగా చూస్తుంది, కాబట్టి వ్యక్తిగత అక్షరాలను లెక్కించడం దీనికి ఇబ్బందికరం. ఇది తెలివితక్కువది కాదు. ఇది మీరు దానికి ఇచ్చిన పనికి భిన్నమైన మరో పని కోసం నిర్మించబడింది.

వాస్తవంగా దీన్ని ఉపయోగించడానికి దీని అర్థం ఏమిటి

“ఇది విశ్వసనీయ వచనాన్ని అంచనా వేస్తోంది, వాస్తవాలను తిరిగి పొందడం లేదు” అని మీరు అంతర్గతం చేసుకున్న తర్వాత, మొత్తం సాధనం స్పష్టంగా కనిపిస్తుంది:

• సాఫీదనమే లక్ష్యంగా ఉన్న చోట ఇది అద్భుతమైనది: డ్రాఫ్ట్ చేయడం, మళ్ళీ చెప్పడం, ఆలోచనలు రూపొందించడం, అనువదించడం, సారాంశం చేయడం.
• నమ్మకమైన తప్పుడు సమాధానం మీకు ఖరీదైనదైన ప్రతిచోటా ఇది ప్రమాదకరమైనది: నిర్దిష్ట వాస్తవాలు, గణాంకాలు, ఉల్లేఖనలు, న్యాయపరమైన లేదా వైద్యపరమైన వివరాలు. వాటిని ధృవీకరించండి. ఎల్లప్పుడూ.
• దానికి ఏమి తెలియదో దానికి “తెలియదు”, కాబట్టి అది అంచనా వేస్తున్నప్పుడు నమ్మదగినరీతిలో మిమ్మల్ని హెచ్చరించలేదు.

ఈ యంత్రాలు అసాధారణమైనవి. కానీ ఒకదానితో మీరు చేయగల అత్యంత తెలివైన పని ఏమిటంటే, లోపల నిజంగా ఏమి జరుగుతుందో గుర్తుంచుకోవడం. ఇది ఆలోచించడం లేదు, తెలుసుకోవడం కూడా లేదు. ఇది అంచనా వేస్తోంది. మీరు దీన్ని మనసులో ఉంచుకున్న తర్వాత, ఇది మాయాజాలం కావడం మానేసి నిజంగా ఏమిటో అదే అవుతుంది, ఇది వాదనాత్మకంగా మరింత ఆకట్టుకునేది: మనం ఇప్పటివరకు రాసిన ప్రతిదాని అద్దం, ఒకసారి ఒక పదం చొప్పున అంచనా వేస్తూ, అర్థం చేసుకోవడంలా చాలావరకు కనిపించే దానికి చేరుకుంటుంది.