본문 바로가기

생성형 AI38

대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 (6) 추론 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용에 대한개요와 전체 목차 및 저자 소개는 아래의 이전 글에서 보실 수 있습니다. 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 개요안녕하세요 최근에 가장 많이 사용이 되고 있는 대형 언어 모델의 세계로 입문하고자 하시는 분들을 위해서 좋은 유튜브 강좌를 시리즈로 작성해 보려 합니다.원 저자는 Andrej Karpathy 로 스텐포daeson.tistory.com  딥러닝 모델을 활용할 때 중요한 과정 중 하나가 추론(Inference) 이에요. 학습된 모델을 사용해 새로운 데이터를 생성하는 과정이죠. 이번 포스팅에서는 추론 과정이 어떻게 진행되는지, 왜 결과가 항상 동일하지 않은지, 그리고 실제 응용 사례를 설명해 볼게요. 1. 추론(In.. 2025. 2. 18.
대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 (5)신경망 내부 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용에 대한개요와 전체 목차 및 저자 소개는 아래의 이전 글에서 보실 수 있습니다. 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 개요안녕하세요 최근에 가장 많이 사용이 되고 있는 대형 언어 모델의 세계로 입문하고자 하시는 분들을 위해서 좋은 유튜브 강좌를 시리즈로 작성해 보려 합니다.원 저자는 Andrej Karpathy 로 스텐포daeson.tistory.com  1. 뉴럴 네트워크란 무엇인가?뉴럴 네트워크(Neural Network)는 인공지능의 핵심 기술 중 하나로, 데이터를 기반으로 학습하고 예측하는 강력한 도구예요. 이를 이해하기 위해서는 먼저 신경망이 내부에서 어떻게 동작하는지를 살펴봐야 해요.기본적으로 신경망은 입력(Input).. 2025. 2. 17.
대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 (4)신경망 입출력 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용에 대한개요와 전체 목차 및 저자 소개는 아래의 이전 글에서 보실 수 있습니다. 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 개요안녕하세요 최근에 가장 많이 사용이 되고 있는 대형 언어 모델의 세계로 입문하고자 하시는 분들을 위해서 좋은 유튜브 강좌를 시리즈로 작성해 보려 합니다.원 저자는 Andrej Karpathy 로 스텐포daeson.tistory.com   지난번에 데이터셋의 텍스트 시퀀스를 토크나이저를 사용해 토큰 시퀀스로 변환했어요.결과를 보면, 예를 들어 Fine Web 데이터셋에서는 약 44테라바이트의 디스크 공간을 차지하는 데이터가 있으며, 이는 약 15조 개의 토큰 시퀀스로 구성되어 있어요. 여기에서 우리가 보는 것은 .. 2025. 2. 13.
대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 (3)토큰화 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용에 대한개요와 전체 목차 및 저자 소개는 아래의 이전 글에서 보실 수 있습니다. 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 개요안녕하세요 최근에 가장 많이 사용이 되고 있는 대형 언어 모델의 세계로 입문하고자 하시는 분들을 위해서 좋은 유튜브 강좌를 시리즈로 작성해 보려 합니다.원 저자는 Andrej Karpathy 로 스텐포daeson.tistory.com  토큰화(Tokenization)텍스트를 어떻게 표현할 것인가?우리는 텍스트를 컴퓨터에서 처리할 수 있도록 변환해야 해요. 뉴런 네트워크 모델들은 1차원(onedimensional) 순차적 심볼(sequence of symbols)을 입력으로 받아요. 또한, 이 심볼들은 유한한 개.. 2025. 2. 12.
대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 (2)학습데이터 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용에 대한개요와 전체 목차 및 저자 소개는 아래의 이전 글에서 보실 수 있습니다. 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 개요안녕하세요 최근에 가장 많이 사용이 되고 있는 대형 언어 모델의 세계로 입문하고자 하시는 분들을 위해서 좋은 유튜브 강좌를 시리즈로 작성해 보려 합니다.원 저자는 Andrej Karpathy 로 스텐포daeson.tistory.com  사전 훈련 단계 개요AI 모델을 훈련하는 과정은 여러 단계로 구성돼 있어요. 그중 첫 번째 단계가 사전 훈련(pre-training)이에요.이 과정에서 가장 먼저 해야 할 일은 인터넷에서 데이터를 다운로드하고 처리하는 것이에요.이 과정이 어떻게 이루어지는지 감을 잡으려면, Hug.. 2025. 2. 11.
대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 (1)소개 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용에 대한 개요와 전체 목차 및 저자 소개는 아래의 이전 글에서 보실 수 있습니다. 대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 개요안녕하세요 최근에 가장 많이 사용이 되고 있는 대형 언어 모델의 세계로 입문하고자 하시는 분들을 위해서 좋은 유튜브 강좌를 시리즈로 작성해 보려 합니다.원 저자는 Andrej Karpathy 로 스텐포daeson.tistory.com  1. 들어가며안녕하세요, 여러분! 오늘은 우리가 자주 사용하는 인공지능(AI) 기반 대형 언어 모델, 특히 ChatGPT에 대해 알아보려고 해요. 이 글에서는 AI가 어떻게 작동하는지, 우리가 입력하는 문장들이 어떻게 처리되는지를 쉽게 설명해 드릴게요.ChatGPT를 사용하다 .. 2025. 2. 10.
대형 언어 모델의 세계로 - ChatGPT의 원리와 활용 개요 안녕하세요 최근에 가장 많이 사용이 되고 있는 대형 언어 모델의 세계로 입문하고자 하시는 분들을 위해서 좋은 유튜브 강좌를 시리즈로 작성해 보려 합니다.원 저자는 Andrej Karpathy 로 스텐포드의 천재 박사로 AI 업계에서는 유명인이지요.3일전에 유튜브에 공개한 3시간 30분짜리 영상에 인공지능 대형 모델에 대한쉽게 풀어낸 원리를 공개했는데 ChatGPT의 원리와 활용에 대해서 아주 잘 설명하고 있습니다.이번 시리즈 포스팅을 통해서 입문자들에게 좋은 학습 기회가 되기를 희망합니다.  Deep Dive into LLMs like ChatGPT 영상 목차00:00:00 소개 / Introduction00:01:00 사전 학습 데이터 (인터넷) / Pretraining Data (Internet)00.. 2025. 2. 9.
AI와 검색의 미래: 트렌드, 기술, 그리고 사용자 반응 분석 인공지능(AI) 기술의 발전은 검색 분야에 혁신적인 변화를 가져오고 있습니다. 단순 키워드 매칭을 넘어 사용자의 의도를 파악하고 개인 맞춤형 결과를 제공하는 AI 검색 엔진은 사용자 경험을 향상시키고 정보 접근성을 높이는 데 기여하고 있습니다1. 본 보고서는 AI와 검색 분야의 최신 트렌드를 분석하고 주요 브랜드, 기술, 기능, 사용자 반응, 그리고 미래 전망을 심층적으로 조사하여 AI 검색의 현황과 미래를 제시합니다. 최신 트렌드: 당신이 알아야 할 6가지 변화1) 고도화된 검색 엔진의 등장AI는 검색 엔진의 진화를 이끌고 있습니다. 최신 검색 엔진은 고급 알고리즘과 자연어 처리 기술을 활용해 사용자의 의도를 더 정확히 파악하고, 원하는 정보를 보다 신속하게 제공합니다. 단순히 키워드 일치를 넘어, 문.. 2024. 12. 29.
2025 AI 트렌드: 미래를 여는 주목할 만한 기술들 2024년이 저물어가고 새해를 앞둔 지금, 전 세계 기술 산업의 시선은 AI(인공지능)의 미래로 향하고 있습니다. 최근 몇 년간 AI는 단순한 기술 혁신을 넘어 산업 전반과 우리의 일상 속에 깊이 스며들며 새로운 변화를 이끌어왔습니다. 하지만 이는 시작에 불과합니다. 2025년을 앞두고 AI는 더 정교하고 더 다양한 분야에서 영향력을 확장하며, 미래를 바꿀 기술적 도약을 예고하고 있습니다.특히 소버린 AI, 단백질 구조 예측 기술, LLM(대규모 언어 모델)의 한계 극복, AI 데이터센터의 에너지 문제 등, 내년에 주목해야 할 다양한 AI 트렌드들이 떠오르고 있습니다. 과연 어떤 AI 기술이 혁신의 중심에 서고, 우리의 삶과 산업을 어떻게 변화시킬까요?이제 함께 내년을 이끌 AI의 핵심 기술들을 살펴보며.. 2024. 12. 18.
오픈AI, AI 검색 시장 도전장! 구글의 아성을 흔들다 최근 AI 기술의 발전은 우리 일상의 패러다임을 바꾸고 있습니다. 특히 검색 시장에서 이러한 변화는 더욱 눈에 띄는데요. 오픈AI가 챗GPT의 검색 기능을 전면 무료로 개방하며 본격적으로 구글의 아성에 도전장을 던졌습니다. 기존의 키워드 중심 검색과는 다르게 자연어 기반 대화형 AI 플랫폼은 더 직관적이고 효율적인 정보 탐색을 제공하며 새로운 검색 시대를 열고 있습니다.Z세대를 중심으로 대화형 AI 검색 플랫폼에 대한 선호도가 급증하면서, 오랜 시간 검색 시장의 절대 강자로 군림해 온 구글의 점유율에도 변화의 바람이 불기 시작했습니다. 이제 AI 기반 검색은 단순한 정보 나열을 넘어 사용자의 니즈에 맞춘 맞춤형 솔루션까지 제공하며 빠르게 검색 패러다임을 재편하고 있습니다. 1. 오픈AI, 챗GPT 검색 .. 2024. 12. 17.