| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | |||
| 5 | 6 | 7 | 8 | 9 | 10 | 11 |
| 12 | 13 | 14 | 15 | 16 | 17 | 18 |
| 19 | 20 | 21 | 22 | 23 | 24 | 25 |
| 26 | 27 | 28 | 29 | 30 |
- 클러스터
- 윈도우
- 딥러닝
- Spark Standalone
- spark
- 주린이
- 주식
- OpenAI
- 인공지능
- 데이터사이언스
- IT #꽃부리 #AI #인공지능 #데이터사이언스
- 스파크
- 스파크쉘
- ChatGPT
- Turing Test
- 스칼라
- 비지도학습
- 머신러닝
- 코딩
- 스파크스탠드얼론
- 지도학습
- spark-shell
- 분산처리
- 대시보드
- 강화학습
- 챗GPT
- NASDAQ
- 생성형AI
- 바이브코딩
- kaggle
- Today
- Total
목록분류 전체보기 (8)
Leeds Coding
1. 바이브 코딩 - Cursor의 Agent 모드와 함께 시작!Cursor, Lovable, Github Copilot 등 다양한 생성형 AI 개발 툴이 있는데, 나는 익숙하고 Agent 모드가 잘 되는 Cursor를 선택하기로 했다. 우선 시작은 정말 간단하게 커서에 요청해보기로 했다. 'Agent' 모드를 키면 요청 사항을 기반으로 커서가 계획을 세워서 코딩작업을 순차적으로 시작한다. 내가 기본적으로 보고 싶은 주식 지표 3개 KOSPI, S&P500, NASDAQ 와 함께 타입스크립트로 대시보드를 만들어달라고만 했다(타입스크립트를 사용한 이유는 파이썬 streamlit 등도 대시보드 만들 때 좋지만, 더 자유도 있게 웹을 개발하기 위해서임). 매우 단순한 요청에 대해서 어느 정도까지 커서가 스스..
1. 주식을 이해하기 위해 코딩 경험을 살려 보자 - 바이브 코딩!도 가능한 시대나는 코딩하고 AI 개발하며 지낸지도 6년이 지났다. 그동안 반성하는 점은 정작 코딩을 통해 무엇인가 만드는 경험을 너무 하고 싶어서 이 분야로 전향을 했음에도, 회사 업무를 하고 나면 집에서 또 코딩하는 것은 좀처럼 쉽지 않았다. 그리고 코딩과 AI에 대해 배우면서, 처음에는 기술 자체에 대한 관심이 많았고, 필요한 무엇을 만드는 것보다 기술 자체를 공부하는 게 무엇인가 더 재미있게 느껴졌던 것 같다. 또 특별히 만들고 싶은게 있지도 않았다. 또 뭔가 코드를 작성해서 만들려면 시간도 많이 들었고 ... 그러다가 이제 바이브 코딩(AI와 함께 코딩하는) 시대가 왔다. 바이코딩의 핵심은 '에이전트'인 것 같다! 다른 글을 통..
이전 글에서 집에 있는 윈도우 컴퓨터 3대에 스파크 클러스터 환경 구축을 완료하였다. (이전 글에서 방법 참고) 분산처리의 효과를 직접 확인해보기 위하여, 3대의 컴퓨터를 연결한 Spark 클러스터와 그냥 1대의 컴퓨터에서 실행한 것의 속도 차이를 비교해보려고 한다. scala 문법은 아직 모르고 PySpark도 설치하지 않았지만, 간단한 scala 명령은 찾아가며 실행할 수 있을 것이기 때문에 spark-shell을 사용하기로 했다. spark-shell을 실행하기 전에, 이전글에서 처럼 컴퓨터 1대를 Master로 구동하고, 다른 컴퓨터 2대를 Worker로 구동해놓은 상태여야 한다. 그리고 클러스터 환경에서 spark-shell을 실행하려면 주의해야 할 점이 있다. 처음에 잘 몰라서 Master로 ..
그동안 머신러닝/딥러닝, 자연어처리 중심으로 인공지능 연구개발을 주로 해왔는데, 시간이 생겨서 미루던 데이터엔지니어링 공부를 시작했다. 여러 기술들 중 분산 처리를 하는 스파크(Spark)를 우선 순위로 잡았다. 아직 스파크에 대해 잘 모르지만, 스파크를 사용해서 분산 처리를 하면 얼마나 시간을 단축할 수 있는지 직접 눈으로 확인하는 작업을 제일 먼저 하고 싶었다.그래서 우선 집에 있는 윈도우 컴퓨터(모두 노트북) 3대에 스파크를 설치하고 1대를 Master로 2대를 Worker로 구동하여 클러스터로 구성하는 작업을 진행했다! 스파크 윈도우 설치 스파크를 윈도우에 설치하는 것을 돕는 유튜브 영상이나 블로그는 잘 찾아보면 어느 정도 있는 것 같아서, 이번 글에서 매우 세부적으로 다루지는 않으려고 한다. 윈..
ChatGPT 는 생성형 AI이면서 General AI 로 다양한 자연어처리(NLP) 문제를 해결할 수 있습니다. 영문 뿐만 아니라 한글로 입력을 해도 대답을 해줍니다. 그리고 정말 많은 문제를 해결해주는데요. (ChatGPT왈) "ChatGPT는 다양한 분야에서 활용될 수 있습니다. 예를 들어, 자연어 이해, 자동 요약, 기계 번역, 대화 시스템, 질문 답변 시스템 등의 분야에서 사용될 수 있습니다. 또한, ChatGPT는 높은 정확도와 자연스러운 대화를 제공하며, 이를 통해 다양한 분야에서 인공지능 기술을 활용한 혁신적인 서비스를 제공할 수 있습니다." ChatGPT는 이렇게 뛰어난 인공지능이지만 한계 역시 있는 것으로 생각됩니다. 실제 ChatGPT를 생활에 활용해보려는 목적으로, 제가 실제 홍대 ..
요즘은 인공지능을 활용한 서비스나 제품이 정말로 많아졌다. 동시에 이런 인공지능 서비스를 만들기위해 사용하는 머신러닝, 딥러닝에 대해서도 언급이 많아졌다. 국내에서는 2016년 이세돌과 알파고의 경기에서 알파고가 승리한 이후, 국내의 기업들이나 일반 사람들도 인공지능(AI)에 대한 관심도가 급격히 올라갔다. 사실 인공지능이라는 분야는 오래전부터 연구가 되어오던 분야이다. 사람의 두뇌를 모방한 형태의 인공신경망의 기초가 되는 논문은 1940년대에 출판되었다. 컴퓨터의 아버지라고 불리는 앨런 튜링(Alan Turing)은 1950년에 인공지능을 평가하는 방법인 Turing Test를 제안했었다. 이 테스트는 대화하는 대상이 컴퓨터인지 사람인지 모른 상태로 대화를 할 때 대화한 컴퓨터가 사람이었다고 착각을 한..
안녕하세요? 유튜버 꽃부리입니다! ▼아래 꽃부리 뉴스레터 구독해주시면, 자주 묻는 질문들에 대한 답변 pdf파일 전달드려요~ (자동으로 전달되고, 몇 분 소요될 수 있습니다. 혹 확인이 안 되시면 스팸메일이나 Promotion메일로 분류됐을 수도 있으니 확인해주세요. 그래도 확인 안 되시면 aiwithsj@gmail.com으로 문의주세요) 1. 제가 들었던 국비지원 학원 관련 정보와 커리큘럼에 대한 조언 2.영국 리즈대학교 데이터사이언스 석사 입학까지의 준비과정과 타임라인 [꽃부리와 AI/IT생활] 뉴스레터(AI와 IT 관련 정보/강의) 무료 구독하기 * indicates required Email Address * 자주 묻는 질문들 파일 외에도, 꽃부리 뉴스레터를 통해 AI와 IT에 필요한 정보와 강의..
저는 '꽃부리'라는 유튜브 채널을 운영하며 제가 영국에서 데이터사이언스 석사를 한 경험, 머신러닝 공부에 도움이 되는 것들을 영상으로 1년 이상 공유해왔습니다. 영상으로 하기 힘든 글로 전달해야 하는 컨텐츠들도 있다는 것이 느껴져서 블로그도 시작하게 되었습니다! www.youtube.com/channel/UCUdyx4YZ_bkBmBS3aq_7Xag 꽃부리 30대 부부, 매일 성장하고 싶은 우리가 사는 법 www.youtube.com 이번 글에서는 머신러닝 딥러닝 인공지능 공부에 도움이 되는 중요한 사이트를 소개합니다! 머신러닝 입문자분들이 알아두시면 지속적으로 학습에 도움이 될 것입니다. 1. Kaggle www.kaggle.com/ Kaggle: Your Machine Learning and Data ..