AI ನ ಈ ಕಥೆ ಕಟ್ಟುವ ಅಭ್ಯಾಸವನ್ನು ತಡೆಗಟ್ಟಲು ಇಂಜಿನಿಯರ್‌ಗಳು ಕಂಡುಕೊಂಡಿರುವ ಅತ್ಯಂತ ಯಶಸ್ವಿ ತಂತ್ರಜ್ಞಾನವೇ ಆರ್.ಎ.ಜಿ (RAG).

AI ಗೆ 'ತೆರೆದ ಪುಸ್ತಕದ ಪರೀಕ್ಷೆ': ಆರ್.ಎ.ಜಿ (RAG) ಎಂದರೇನು?

ಹಿಂದಿನ ಲೇಖನದಲ್ಲಿ ನಾವು AI ಹೇಗೆ ಕೆಲವೊಮ್ಮೆ ಅತ್ಯಂತ ವಿಶ್ವಾಸದಿಂದ ಹಸಿ ಸುಳ್ಳುಗಳನ್ನು ಹೇಳುತ್ತದೆ (ಭ್ರಮೆ ಅಥವಾ Hallucination) ಎಂದು ನೋಡಿದೆವು. ತಂತ್ರಜ್ಞಾನ ಜಗತ್ತಿನಲ್ಲಿ ಈ ಸಮಸ್ಯೆಯನ್ನು ಬಗೆಹರಿಸಲು ಇರುವ ಅತ್ಯಂತ ಜನಪ್ರಿಯ ಮತ್ತು ಯಶಸ್ವಿ ಅಸ್ತ್ರವೇ ಆರ್.ಎ.ಜಿ (RAG - Retrieval-Augmented Generation).

ಇದನ್ನು ಸುಲಭವಾಗಿ ಅರ್ಥಮಾಡಿಕೊಳ್ಳಲು ಶಾಲಾ-ಕಾಲೇಜುಗಳ ಪರೀಕ್ಷೆಯ ಉದಾಹರಣೆಯನ್ನೇ ತೆಗೆದುಕೊಳ್ಳೋಣ.

ಮುಚ್ಚಿದ ಪುಸ್ತಕ (Closed-book) ಮತ್ತು ತೆರೆದ ಪುಸ್ತಕದ (Open-book) ಪರೀಕ್ಷೆ!

  • ಸಾಮಾನ್ಯ AI (ಮುಚ್ಚಿದ ಪುಸ್ತಕದ ಪರೀಕ್ಷೆ): ನಾವು ಸಾಮಾನ್ಯವಾಗಿ ಬಳಸುವ AI ಗಳು (ಉದಾಹರಣೆಗೆ ಮೂಲ ChatGPT) ಒಂದು ಮುಚ್ಚಿದ ಪುಸ್ತಕದ ಪರೀಕ್ಷೆ ಬರೆಯುವ ವಿದ್ಯಾರ್ಥಿಯಂತೆ. ಈ ವಿದ್ಯಾರ್ಥಿ ಪರೀಕ್ಷೆಗೂ ಮುನ್ನ ಇಡೀ ಇಂಟರ್ನೆಟ್ ಅನ್ನು ಓದಿ, ಎಲ್ಲವನ್ನೂ ತಲೆಯಲ್ಲಿ ತುಂಬಿಕೊಂಡು ಪರೀಕ್ಷಾ ಕೊಠಡಿಗೆ ಹೋಗಿರುತ್ತಾನೆ. ಒಳಗೆ ಹೋದಮೇಲೆ ಪುಸ್ತಕ ನೋಡುವಂತಿಲ್ಲ. ನೀವು ಪ್ರಶ್ನೆ ಕೇಳಿದಾಗ, ತನ್ನ ನೆನಪಿನ ಶಕ್ತಿಯಿಂದಲೇ ಉತ್ತರ ಬರೆಯಬೇಕು. ಒಂದು ವೇಳೆ ಉತ್ತರ ಮರೆತುಹೋದರೆ? ಆಗಲೇ ಅವನು ಗೊತ್ತಿಲ್ಲದಿದ್ದರೂ, ತನಗೆ ತಿಳಿದಿರುವ ಪದಗಳನ್ನು ಬಳಸಿ ಕಥೆ ಕಟ್ಟಲು (ಭ್ರಮೆ) ಶುರು ಮಾಡುವುದು!

  • RAG ವ್ಯವಸ್ಥೆ (ತೆರೆದ ಪುಸ್ತಕದ ಪರೀಕ್ಷೆ - Open-book System): RAG ಎಂಬುದು ಈ ವಿದ್ಯಾರ್ಥಿಗೆ ನೀಡುವ 'ತೆರೆದ ಪುಸ್ತಕದ ಪರೀಕ್ಷೆ'ಯ ಅದ್ಭುತ ಅವಕಾಶ. ಇಲ್ಲಿ ನೀವು ಪ್ರಶ್ನೆ ಕೇಳಿದಾಗ, ವಿದ್ಯಾರ್ಥಿ (AI) ತಕ್ಷಣವೇ ತನ್ನ ಸ್ವಂತ ನೆನಪಿನಿಂದ ಉತ್ತರ ಹೇಳುವುದಿಲ್ಲ. ಬದಲಿಗೆ, ನೀವು ಅವನಿಗೆ ಒದಗಿಸಿರುವ ಅಧಿಕೃತ ಮತ್ತು ವಿಶ್ವಾಸಾರ್ಹ ಪುಸ್ತಕಗಳನ್ನು (Verified Reference Textbooks) ತೆರೆದು, ನಿಮ್ಮ ಪ್ರಶ್ನೆಗೆ ಸಂಬಂಧಿಸಿದ ಸರಿಯಾದ ಪುಟವನ್ನು ಹುಡುಕುತ್ತಾನೆ. ಆ ಪುಟದಲ್ಲಿರುವ ಮಾಹಿತಿಯನ್ನು ಓದಿಕೊಂಡು, ಆ ಆಧಾರದ ಮೇಲೆ ಮಾತ್ರ ಖಚಿತವಾದ ಉತ್ತರವನ್ನು ಬರೆಯುತ್ತಾನೆ.

ಈ ವಿಧಾನದಲ್ಲಿ ಸುಳ್ಳು ಹೇಳುವ ಪ್ರಮೇಯವೇ ಬರುವುದಿಲ್ಲ, ಏಕೆಂದರೆ ಉತ್ತರವು ನೇರವಾಗಿ ನೀವು ನೀಡಿದ ಅಧಿಕೃತ ಪುಸ್ತಕದಿಂದಲೇ ಬಂದಿರುತ್ತದೆ!

RAG ಹೇಗೆ ಕೆಲಸ ಮಾಡುತ್ತದೆ? (ಮೂರು ಸರಳ ಹಂತಗಳು)

ಈ ತಂತ್ರಜ್ಞಾನದ ಹೆಸರಲ್ಲೇ (Retrieval-Augmented Generation) ಇದು ಹೇಗೆ ಕೆಲಸ ಮಾಡುತ್ತದೆ ಎಂಬ ಗುಟ್ಟಡಗಿದೆ:

  1. ಮಾಹಿತಿ ಹುಡುಕುವಿಕೆ (Retrieval): ನೀವು ಪ್ರಶ್ನೆ ಕೇಳಿದಾಗ, AI ಮೊದಲು ತನ್ನ ಬಳಿ ಇರುವ ದಾಖಲೆಗಳಲ್ಲಿ (ಉದಾಹರಣೆಗೆ ನಿಮ್ಮ ಕಂಪನಿಯ ಪಿಡಿಎಫ್‌ಗಳು, ಇಂಟರ್ನೆಟ್ ಲಿಂಕ್‌ಗಳು ಅಥವಾ ನಿಯಮಾವಳಿಗಳ ಪುಸ್ತಕ) ಆ ಪ್ರಶ್ನೆಗೆ ಸಂಬಂಧಿಸಿದ ನಿಖರವಾದ ಪ್ಯಾರಾಗ್ರಾಫ್ ಅನ್ನು ಹುಡುಕಿ ತೆಗೆಯುತ್ತದೆ.

  2. ಮಾಹಿತಿ ಒದಗಿಸುವಿಕೆ (Augmented): ಹೀಗೆ ಹುಡುಕಿ ತೆಗೆದ ಆ ಅಧಿಕೃತ ಮಾಹಿತಿಯನ್ನು ನಿಮ್ಮ ಪ್ರಶ್ನೆಯ ಜೊತೆಗೆ ಬೆಂಬಲವಾಗಿ ಲಗತ್ತಿಸುತ್ತದೆ.

  3. ಉತ್ತರ ಸೃಷ್ಟಿಸುವಿಕೆ (Generation): ಕೊನೆಯದಾಗಿ, ತನ್ನ ಅತ್ಯುತ್ತಮ ಭಾಷಾ ಜ್ಞಾನವನ್ನು ಬಳಸಿ, ಆ ಅಧಿಕೃತ ಮಾಹಿತಿಯನ್ನು ಓದಿಕೊಂಡು, ನಿಮಗೆ ಸುಂದರವಾದ ಮತ್ತು ಅರ್ಥವಾಗುವ ವಾಕ್ಯಗಳಲ್ಲಿ ಉತ್ತರವನ್ನು ಸೃಷ್ಟಿಸಿ ಕೊಡುತ್ತದೆ.

RAG ನ ಮುಖ್ಯ ಉಪಯೋಗಗಳೇನು?

  • ಸುಳ್ಳುಗಳಿಗೆ ಬ್ರೇಕ್ (No Hallucinations): AI ಕೇವಲ ನೀವು ಕೊಟ್ಟ ದಾಖಲೆಗಳನ್ನು ಮಾತ್ರ ನಂಬುವುದರಿಂದ, ಕಟ್ಟುಕಥೆಗಳನ್ನು ಹೇಳುವ ಸಾಧ್ಯತೆ ಬಹುಪಾಲು ಶೂನ್ಯವಾಗುತ್ತದೆ.

  • ಹೊಸ ಮತ್ತು ನಿಖರ ಮಾಹಿತಿ: AI ಮಾಡೆಲ್‌ಗಳಿಗೆ ಕೆಲವು ತಿಂಗಳ ಹಿಂದಿನ ಮಾಹಿತಿ ಮಾತ್ರ ಗೊತ್ತಿರಬಹುದು. ಆದರೆ RAG ಬಳಸಿ ಇಂದಿನ ತಾಜಾ ಸುದ್ದಿಯ ಲಿಂಕ್ ಅನ್ನು ಅದಕ್ಕೆ ಒದಗಿಸಿದರೆ, ಅದು ತಕ್ಷಣವೇ ಓದಿಕೊಂಡು ಅಪ್-ಟು-ಡೇಟ್ ಆಗಿ ಉತ್ತರಿಸಬಲ್ಲದು.

  • ಗೌಪ್ಯತೆ ಮತ್ತು ಭದ್ರತೆ (Data Privacy): ಬ್ಯಾಂಕ್ ಅಥವಾ ಆಸ್ಪತ್ರೆಗಳು ತಮ್ಮ ಗ್ರಾಹಕರ ಖಾಸಗಿ ಮಾಹಿತಿಯನ್ನು ನೇರವಾಗಿ ಪಬ್ಲಿಕ್ AI ಗೆ ಕೊಡಲು ಸಾಧ್ಯವಿಲ್ಲ. ಅಂತಹ ಸಮಯದಲ್ಲಿ ತಮ್ಮದೇ ಸರ್ವರ್‌ನಲ್ಲಿರುವ ಸುರಕ್ಷಿತ ಡಾಕ್ಯುಮೆಂಟ್‌ಗಳ ಮೇಲೆ ಮಾತ್ರ RAG ವ್ಯವಸ್ಥೆಯನ್ನು ಬಳಸಿ, ಅತ್ಯಂತ ನಿಖರವಾದ ಹಾಗೂ ಖಾಸಗಿತನವನ್ನು ಕಾಪಾಡುವ AI ಅಸಿಸ್ಟೆಂಟ್ ಅನ್ನು ಸೃಷ್ಟಿಸಿಕೊಳ್ಳಬಹುದು.

ಸಾರಾಂಶ: ಆರ್.ಎ.ಜಿ (RAG) ಎಂದರೆ AI ಗೆ ನಾವು ನೀಡುವ 'ತೆರೆದ ಪುಸ್ತಕದ ಪರೀಕ್ಷೆ' (Open-Book System). ಕೇವಲ ನೆನಪಿನ ಶಕ್ತಿಯಿಂದ ಕಥೆ ಕಟ್ಟುವ ಬದಲು, ಅಧಿಕೃತ ದಾಖಲೆಗಳನ್ನು ಓದಿ, ಸತ್ಯಾಂಶಗಳನ್ನು ಮಾತ್ರ ಒದಗಿಸುವಂತೆ AI ಅನ್ನು ನಿಯಂತ್ರಿಸುವ ಅತ್ಯುತ್ತಮ ತಂತ್ರಜ್ಞಾನವೇ RAG.