데이터와 함께하는 세상

최근 AI 기술이 급격히 발전하면서 ‘AI 에이전트(AI Agent)’ 가 우리의 일상과 비즈니스를 혁신적으로 변화시키고 있습니다. 특히, 앞으로 5년 내에 인터넷 경제의 패러다임을 근본적으로 바꿀 것으로 예상 됩니다. 기존 검색 기반 인터넷 환경 에서 AI 에이전트 중심 경제 로 변화하는 과정과 실제 활용 사례를 살펴보도록 하겠습니다. 1. AI 에이전트란?AI 에이전트는 사용자의 요청을 이해하고 실행하며, 최적의 결과를 제공하는 지능형 소프트웨어 입니다. 기존의 챗봇보다 한 단계 발전한 형태로, 개인 비서, 금융 관리, 쇼핑 도우미, 업무 자동화 등 다양한 역할을 수행할 수 있습니다.기존방식은 사용자가 직접 여러개의 사이트에서 항공권 가격을 비교합니다. AI 에이전트 방식은 일정과 예산을 고려해서 최..

보호되어 있는 글입니다.

1. 워드 클라우드(Word Cloud)란 텍스트 분석에서 가장 많이 등장하는 시각화 기법입니다. 자주 등장하는 단어의 빈도를 크기와 색상으로 표현하는 시각화 기법으로 단어의 빈도수가 높을수록 큰 글씨로 표현되며, 데이터의 주요 키워드를 빠르게 파악할 수 있습니다.워드 클라우드 활용의 예는 아래와 같습니다.뉴스 기사 분석: 특정 시기나 주제의 핵심 단어 파악소셜 미디어 분석: 트위터, 블로그 등에서 자주 언급되는 키워드 시각화고객 리뷰 분석: 제품 리뷰에서 자주 등장하는 단어 확인2. 워드 클라우드를 위한 주요 라이브러리 라이브러리주요기능wordcloud텍스트 데이터를 워드 클라우드 형태로 시각화konlpy한국어 자연어 처리(형태소 분석, 명사 추출 등)re정규 표현식 활용(텍스트 전처리)collecti..

1. 텍스트 마이닝이란?텍스트 마이닝(Text Mining)은 비정형 텍스트 데이터에서 의미 있는 정보를 추출하는 데이터 분석 기법입니다.  일반적인 데이터 마이닝이 수치 데이터를 분석하는 데 초점을 맞춘다면, 텍스트 마이닝은 자연어 처리(NLP)를 활용하여 문자 기반 데이터를 분석하는 것이 핵심입니다.  텍스트 마이닝은 많은 분야에 활용되고 있습니다.소셜 미디어 분석: 트위터, 인스타그램, 블로그 등의 데이터를 활용한 트렌드 분석고객 리뷰 분석: 제품 리뷰를 분석하여 고객 만족도를 평가감성 분석: 긍정 및 부정 감성을 파악하여 여론 조사나 브랜드 이미지 관리에 활용토픽 모델링: 뉴스 기사나 연구 논문에서 주요 주제를 자동으로 추출의료 및 법률 문서 분석: 대량의 의료 기록이나 법률 문서에서 중요한 정보..

1. 텍스트 마이닝(Text Mining), 텍스트 분석(text analytics)은 텍스트에서 고품질 정보를 추출하는 프로세스입니다. 텍스트의 리소스에는 웹사이트, 서적, 이메일, 리뷰 그리고 뉴스 등이 비정형 데이터가 포함될 수 있습니다. 텍스트 분석에는 정보 검색, 단어 빈도 분포를 연구하기 위한 어휘 분석, 패턴 인식, 태깅/주석, 정보 추출, 링크 및 연관 분석을 포함한 데이터 마이닝 기술, 시각화 및 예측 분석을 포함하고 있습니다. 2. 빈도가 많이 단어 분석문학과 영화에 관심이 있는 사람들은 텍스트 데이터를 분석하는 경험을 할 수 있습니다. 어린왕자 책에 일부분을 발췌하여 가장 많이 나오는 단어가 무엇인지 알아보는 실습입니다.주요 라이브러리는 collections 입니다. 많이 나오는 단어..

turtle 모듈은 파이썬에서 화면에 그림을 쉽게 그릴 수 있는 드로잉 도구입니다. 1. 기본 설정 명령어명령어설명import turtleturtle 모듈 가져오기t = turtle.Turtle()거북이 객체 생성t.shape("turtle")거북이 모양 설정 ("arrow", "circle", "square", "triangle", "classic")t.speed(0~10)거북이 속도 설정 (0 = 가장 빠름)turtle.bgcolor("색상")배경 색상 변경t.hideturtle() (ht())거북이 숨기기t.showturtle() (st())거북이 보이기 2. 이동 관련 명령어명령어설명t.forward(거리) (fd(거리))앞으로 이동t.backward(거리) (bk(거리))뒤로 이동t.right(..

파이썬 IDLE (Integrated Development and Learning Environment) Shell 모드에서 자주 사용되는 단축키를 정리한 내용이니 참조하세요.Shell 모드에서 유용한 단축키Alt + P → 이전 명령어 (이전 입력한 코드 불러오기)Alt + N → 다음 명령어 (다음 입력한 코드 불러오기)Ctrl + C → 실행 중인 코드 강제 종료Ctrl + Shift + V → 여러 줄 붙여넣기 (마우스 오른쪽 클릭 후 "Paste"와 같은 기능)기본 편집 및 실행 관련 단축키F5 → 현재 파일 실행Ctrl + '[' → 왼쪽 들여쓰기Ctrl +  ']' → 오른쪽 들여쓰기Ctrl + 'space' → 자동완성Alt + '3' → 주석 처리Alt + '4' → 주석 해제Ctrl +..

1. pip란 무엇인가?Pip Installs Packages의 약자로 파이썬의 패키지를 설치하고 관리하는 관리자 입니다(Package Manager)python 버전 3이상을 사용한다면 pip가 내장되어 있어 따라 pip를 설치할 필요가 없습니다.pip를 사용하여 설치(install), 업그레이드(upgrade), 제거(uninstall) 등을 할 수 있습니다. 2. IDLE(Integrated Development Environment : 통합개발환경) 에서 패키지 설치 (1) IDLE의 파일 위치를 찾고 파일 위치 열기를 클릭합니다.   (2) (1)번은 바로가기 프로그램이기 때문에 해당하는 IDLE 바로가기에서 오른쪽 단추를 클릭해서 파일위치 열기를 한번 더 클릭한다  (3) 파일을 열고 Scri..

1. 데이터 분석을 위한 가장 기본적인 라이브러리를 import 해야 됩니다. 기본적인 라이브러리는 pandas, numpy, matplotlib.pyplot, seaborn 입니다. 라이브러리를 불러오기(import)하기 전에  해당 패키지를 설치부터 하셔야 합니다. - 라이브러리 설치합니다. 한 번만 설치하면 됩니다.pip install pandas numpy matplotlib seaborn* pip에 대한 내용은 패키지 폴더에 있습니다(https://withdatastory.tistory.com/84 ) pip 패키지 관리자 사용1. pip란 무엇인가?Pip Installs Packages의 약자로 파이썬의 패키지를 설치하고 관리하는 관리자 입니다(Package Manager)python 버전 3..

1. Planning-  이해하기의과대학생들의 우울증이 심각한 상태학교를 이탈하는 경우가 다수 발생함 환자들의 대면서비스에 대한 불만이 다수 발생-  프로젝트 개요 울증에 영향을 주는 요인과 대체 방안 찾기요인을 찾아 의과대학생들의 이탈율을 방지하고자 함- 데이터 이해 스위스 의과대학 학생들의 empathy(공감), mental health(정신 건강), burnout(탈진) 데이터를 측정한 내용Maslach Burnout Inventory (MBI)는 직업적인 환경에서의 감정적, 정신적, 물리적으로 과도한 스트레 스와 업무스트레스로 인한 "소진" 상태를 평가하기 위한 표준화된 도구임(캐글에서 Medical Student Mental Health를 가공함) 2. 데이터 전처리(1) Data 불러오기imp..