Programming

개요

• vagrant 가상환경 설치 중 몇몇 수강생 분들의 에러 확인
• PowerShell 실행정책에 따라, 잘 안되는 것을 확인
• 그런데 choco 실행 전에는 아래와 같이 설정을 하라고 되어 있다.

• 그런데, 일부 수강생중에는 설치 시 에러가 나는 것을 확인, 따라서 이를 모두 unrestricted로 변경 후, 재 설치를 진행해본다.
  • 이전 글 참조 : https://dschloe.github.io/settings/2023/7/window_vagrant_ubutun18_04_python/

choco 설정의 내용 재 확인

• choco 공식 홈피에서 제공한대로 설정을 해본다.

PS C:\Users\j2hoo> Get-ExecutionPolicy
Restricted

• 위 상황에서 첫번째 명령어를 입력한다.

PS C:\Users\j2hoo> Set-ExecutionPolicy AllSigned
PS C:\Users\j2hoo> Get-ExecutionPolicy
AllSigned

• 현재 전체 실행 정책 목록을 확인해본다.

PS C:\Users\j2hoo> Get-ExecutionPolicy -List

개요

• 크롤링 교재에서 윈도우에 우분투 가상 환경을 설치하는 부분이 있어서 실제로 잘 되는지 테스트를 해보았다.
• 향후 교재를 활용한다면, 해당 가상환경에서 진행 하는 것도 고려할 수 있다.
• 가상환경은 vagrant를 활용했다.

교재

• 파이썬을 활용한 크롤러 개발과 스크레이핑 입문

Step 01. Chocolatey 설치

• 윈도우에서 많이 활용되는 패키지 매니저가 바로 Chocolatey 이다.
• 먼저 3가지를 확인해야 한다.
• 첫번째 PowerShel이 설치 되어 있어야 하며, 최소 지원 버전은 3이다.
  • PowerShell 버전 확인
  • PowerShell 탭을 열고 $PSVersionTable 명령어를 실행한다.

PS C:\Users\j2hoo> $PSVersionTable

Name                           Value
----                           -----
PSVersion                      5.1.22621.1778
PSEdition                      Desktop
PSCompatibleVersions           {1.0, 2.0, 3.0, 4.0...}
BuildVersion                   10.0.22621.1778
CLRVersion                     4.0.30319.42000
WSManStackVersion              3.0
PSRemotingProtocolVersion      2.3
SerializationVersion           1.1.0.1

개요

• 최근 django 강의를 진행하면서, Gmail로 이메일을 발송 하는 예제에서 인증 코드 진행하는 부분이 오래된 것을 확인
• 업그레이드 된 버전을 소개한다.

가상환경 및 django 라이브러리 설치

• 먼저 빈 폴더를 생성 후, 가상환경을 생성한다.
• (옵션) virtualenv 라이브러리 미 설치 시

$ pip install virtualenv

• 기 설치가 되어 있다면 아래 코드를 순차적으로 실행한다.

$ virtualenv venv
$ source venv/Scripts/activate

• 가상환경에 접속해 있다면 django를 설치 한다.

$ pip install django

장고 프로젝트 및 앱 설치

• 이제 장고 프로젝트를 설정한다.

$ django-admin startproject djangogmail

• 이제 해당 프로젝트 폴더에서 1개의 app을 만들어준다.

$ cd djangogmail/
$ python manage.py startapp main

• 앱을 등록해준다.
  • 파일 경로 : djangogmail > djangogmail > settings.py

INSTALLED_APPS = [
    "django.contrib.admin",
    "django.contrib.auth",
    "django.contrib.contenttypes",
    "django.contrib.sessions",
    "django.contrib.messages",
    "django.contrib.staticfiles",
    "main"
]

• runserver를 실행하여 장고 기본 화면이 나오는지 확인한다.

$ python manage.py runserver

개요

• Django 한 그릇 뚝딱 교재의 내용에서 멀티캠퍼스 강의에 맞게 일부 수정함
• 2019년 버전이고 현재는 2023년이기 때문에 소스코드 변경 사항이 필요할 거 같아서 글을 남김

교재 홍보

• 교재 구매 : https://www.yes24.com/Product/Goods/83568594

Step 01 - 이전 내용 확인

• 이 글을 처음 봤다면, 이전 블로그를 참조하기를 바란다.
  • 첫번째 글 : https://dschloe.github.io/python/2023/07/django_todolist_1/
  • 두번째 글 : https://dschloe.github.io/python/2023/07/django_todolist_2/
  • 세번째 글 : https://dschloe.github.io/python/2023/07/django_todolist_3/
  • 네번째 글 : https://dschloe.github.io/python/2023/07/django_todolist_4/

Step 02 - 데이터 삭제 방법 개요 및 HTML 수정

• 완료 버튼을 눌렀을 시, 데이터를 삭제하는 기능을 구현한다.
• HTML 코드를 살펴보면 완료 버튼이 존재한다.
  • 완료 버튼을 클릭할 때, form 태그 내에 있는 input 태그의 값이 함께 넘어오고, input의 value 값을 이용해 DB에서 알맞은 데이터를 찾아 삭제한다.

          <div class="toDoDiv">
                <ul class="list-group">
                    {% for todo in todos %}
                    <form action="" method="GET">
                        <div class="input-group" name='todo1'>
                            <li class="list-group-item">{{ todo.content }}</li>
                            <input type="hidden" id="todoNum" name="todoNum" value="{{ todo.id }}"></input>
                            <span class="input-group-addon">
                                <button type="submit" class="custom-btn btn btn-danger">완료</button>
                            </span>
                        </div>
                    </form>
                    {% endfor %}
                </ul>
            </div>

• form 태그의 action은 아직 정의되지 않았는데, 완료 버튼을 클릭 시, form 태그의 action값을 설정하도록 한다.

개요

• Django 한 그릇 뚝딱 교재의 내용에서 멀티캠퍼스 강의에 맞게 일부 수정함
• 2019년 버전이고 현재는 2023년이기 때문에 소스코드 변경 사항이 필요할 거 같아서 글을 남김

교재 홍보

• 교재 구매 : https://www.yes24.com/Product/Goods/83568594

Step 01 - 이전 내용 확인

• 이 글을 처음 봤다면, 이전 블로그를 참조하기를 바란다.
  • 첫번째 글 : https://dschloe.github.io/python/2023/07/django_todolist_1/
  • 두번째 글 : https://dschloe.github.io/python/2023/07/django_todolist_2/
  • 세번째 글 : https://dschloe.github.io/python/2023/07/django_todolist_3/

Step 02 - 남은 과제

• 사용자가 입력한 문자열을 데이터베이스에 저장하기
• DB에 저장된 내용을 보여 주기

Step 03 - 모델에 데이터 저장

• 먼저, my_to_do_app 폴더에 있는 [views.py](http://views.py) 파일에서 model을 사용하려면 [models.py](http://models.py) 파일을 불러와야 한다.

개요

• Django 한 그릇 뚝딱 교재의 내용에서 멀티캠퍼스 강의에 맞게 일부 수정함
• 2019년 버전이고 현재는 2023년이기 때문에 소스코드 변경 사항이 필요할 거 같아서 글을 남김

교재 홍보

• 교재 구매 : https://www.yes24.com/Product/Goods/83568594

Step 01 - 이전 내용 확인

• 이 글을 처음 봤다면, 이전 블로그를 참조하기를 바란다.
  • 첫번째 글 : https://dschloe.github.io/python/2023/07/django_todolist_1/
  • 두번째 글 : https://dschloe.github.io/python/2023/07/django_todolist_2/

Step 02 - model.py 작성 및 장고 서버 반영

• ToDo에 대한 데이터를 다룰 예정이며, 다음과 같이 코드를 작성한다.
  • 파일 경로 : ToDoList > my_to_do_app > models.py

from django.db import models

# Create your models here.
class Todo(models.Model):
    content = models.CharField(max_length=255)

• 위 코드를 실제 Django 서버에 등록해줘야 한다. 다음과 같은 명령어를 입력한다.
  • 실행 경로는 [manage.py](http://manage.py) 이 있는 곳에서 아래 코드를 실행한다.

$ ls
db.sqlite3  manage.py*  my_to_do_app/  ToDoList/

$ python manage.py makemigrations
Migrations for 'my_to_do_app':
  my_to_do_app\migrations\0001_initial.py
    - Create model Todo

• 그런데, 아직 데이터베이스 모델과 같은 테이블이 생성된 것은 아니다. 다음 명령어를 추가한다.

$ python manage.py migrate
  Applying auth.0001_initial... OK
  Applying admin.0001_initial... OK
  Applying admin.0002_logentry_remove_auto_add... OK
  Applying admin.0003_logentry_add_action_flag_choices... OK
  Applying contenttypes.0002_remove_content_type_name... OK
  Applying auth.0002_alter_permission_name_max_length... OK
  Applying auth.0003_alter_user_email_max_length... OK
  Applying auth.0004_alter_user_username_opts... OK
  Applying auth.0005_alter_user_last_login_null... OK
  Applying auth.0006_require_contenttypes_0002... OK
  Applying auth.0007_alter_validators_add_error_messages... OK
  Applying auth.0008_alter_user_username_max_length... OK
  Applying auth.0009_alter_user_last_name_max_length... OK
  Applying auth.0010_alter_group_name_max_length... OK
  Applying auth.0011_update_proxy_permissions... OK
  Applying auth.0012_alter_user_first_name_max_length... OK
  Applying my_to_do_app.0001_initial... OK
  Applying sessions.0001_initial... OK

Step 03 - DB 확인

• 실제 Django 프로젝트 DB에 접근해서 확인하도록 한다.

$ python manage.py dbshell
SQLite version 3.39.3 2022-09-05 11:02:23
Enter ".help" for usage hints.
sqlite>

• 테이블을 확인하기 위해서 다음 명령어를 이용한다.
  • my_to_do_app_todo 테이블이 만들어졌음을 확인한다.

sqlite> .tables
auth_group                  django_admin_log
auth_group_permissions      django_content_type       
auth_permission             django_migrations
auth_user                   django_session
auth_user_groups            my_to_do_app_todo
auth_user_user_permissions

• 테이블이 가진 정보를 확인한다.

sqlite> PRAGMA table_info(my_to_do_app_todo);
0|id|INTEGER|1||1
1|content|varchar(255)|1||0

• SELECT 명령어를 통해 데이터가 있는지 확인해본다.
  • 아무런 데이터가 없기 때문에 조회는 되지 않는다.

sqlite> SELECT * FROM my_to_do_app_todo;

Step 04 - HTML 코드 해석

• index.html 파일을 연다.
• 44번째 줄의 form 태그를 살펴본다.

개요

• Django 한 그릇 뚝딱 교재의 내용에서 멀티캠퍼스 강의에 맞게 일부 수정함
• 2019년 버전이고 현재는 2023년이기 때문에 소스코드 변경 사항이 필요할 거 같아서 글을 남김

교재 홍보

• 교재 구매 : https://www.yes24.com/Product/Goods/83568594

Step 01 - 이전 내용 확인

• 이 글을 처음 봤다면, 이전 블로그를 참조하기를 바란다.
  • 첫번째 글 : https://dschloe.github.io/python/2023/07/django_todolist_1/

Step 02 - HTML 템플릿 사용

• HTML과 CSS가 적용된 기본 템플릿은 다음 github 저장소에서 다운로드 받을 수 있다.

  • 책 저자 깃허브 : https://github.com/doorBW/Django_with_PracticeExamples

• my_to_do_app 폴더에 가면 templates 폴더는 처음에는 존재하지 않는다. 따라서, 새로운 폴더를 생성하여 폴더명을 templates라고 명명한다.

개요

• Django 한 그릇 뚝딱 교재의 내용에서 멀티캠퍼스 강의에 맞게 일부 수정함
• 2019년 버전이고 현재는 2023년이기 때문에 소스코드 변경 사항이 필요할 거 같아서 글을 남김

교재 홍보

• 교재 구매 : https://www.yes24.com/Product/Goods/83568594

Step 01 - 깃허브 Repo 생성

• 아래와 같이 깃허브에서 Repo를 생성한다.
• Repo명 : ToDoList-with-Django

Step 02 - 바탕화면으로 Git Clone

• 이 때 중요한 것은 본인 경로에 한글이 없도록 하는 것이 중요하다.
• 간혹 한글이 있는 경우 인코딩 문제로 라이브러리 설치 등 되지 않을 수가 있다.
• 복사할 때는 $ 는 제외한다.

$ git clone https://github.com/your_account_id/ToDoList-with-Django.git

개요

• 본 튜토리얼은 실제 공기관에서 진행할 때 수강생들이 직접 보고 할 수 있도록 만든 샘플 자료입니다.
• 무단 복사 및 블로그 게시는 금지입니다.

Step 01. Tableau Public 다운로드

• 아래 경로에서 Tableau Public를 다운로드 받는다. [만들기] - [Tableau Desktop Public Edition 다운로드]
  • 참고 : https://public.tableau.com/app/discover

Step 02. Tableau Desktop 설치 시작

Step 03. 태블로 화면 확인 및 파일 불러오기

• 아래 화면에서 Microsoft Excel 파일 불러온다.

Step 04. 워크시트 1 - 지역별 근로자 수 현황

• 엑셀 데이터를 불러온 후, 시트로 이동한다.

개요

• 수강생들이 가장 궁금해 하는 연봉에 대한 여러가지 이야기
• 그리고 필자의 이야기
• 마케팅, SI, 스타트업, 그리고 프리랜서의 이야기
• 약 2편에 걸쳐서 연재할 예정

어느 오픈 카톡방에서..

• 필자가 주로 애용하는 오픈 카톡방이 있다. 다양한 정보와 수다를 즐기는 곳인데, 여기에 아래와 같은 글이 공유되었다.

  • 참조 : 연봉 점프업의 비밀 1/3(산업구조 관점) by Soojung Shin

• 이 글을 읽으니 필자의 과거 행적이 스쳐 지나갔다.

첫번째 꿈은 선교 그리고 NGO

• 20대의 꿈은 쉽게 말하면 돈을 버는 직업은 아니었다. 20대만 해도 커리어의 중요성 보다는 그저 가치 중심으로 살았다. 기본적인 철학.
• 사고 전환의 계기 : 호주 워킹홀리데이(2011년)
  • 지금은 호주 달러가 매우 약했지만, 운이 좋았던 탓인지 그 당시에는 미국 달러보다 높았다. 이 때 나는 호주에서 약 4개월의 일을 했다. 투잡, 쓰리잡을 하면서, 소위 허드렛일을 하면서 저축한돈이 약 1천 2백만원 가량 되었다 (세금 환급 포함)
• 그 당시 한국에서 일을 하는 걸 선택하는 대신, 호주에서 일했던 경험이 나에게는 신선한 충격이었다.
  • 같은 일을 하더라도 어느 지역, 어느 나라에서 하느냐에 따라 모을 수 있는 자산의 크기는 달랐다.
  • 이 4개월의 경험이 9년 후, 향후 내가 프리랜서와 현재 일을 선택하는데 주저함이 없도록 만들어 버렸다.
• 호주에서 돌아와도 여전히 선교와 NGO의 꿈은 놓지 않았고, 관련 대학원에 진학했다. 그리고 여기에서 또 한번의 충격을 받는다.
  • 석사를 졸업한 형의 2014년 NGO 월급여 150만원 –> 2년 뒤 그 형은 NGO를 그만두고 멕시칸 음식을 팔기 시작했다.

IT 기술 그리고 빅데이터의 시대에의 적응

• 첫번째 꿈을 접고 난 후, 방황을 했던 필자는 지도교수님이 잠깐 알려준 데이터 마이닝에 꽂히기 시작했다. 그리고 그 선택이 현재의 인생이 되었다.
• DataCamp를 통해 당시 핫했던 R을 공부하기 시작했다. 다행스러웠던 것은 그래도 영어를 충실히 배웠기 때문에, 영어로 공부하는 것에 대해 거부감이 없었다. 그렇게 독학을 1년 넘게 하기 시작했다.
  • 이 때, 기초 프로그래밍, 통계, 머신러닝 등을 모두 독학했다.
  • 공모전에도 혼자 나가기 시작했다. 성과를 낸 건 아니었다. 그러나 공모전에 혼자 나가면서 데이터 분석의 개념과 방향성에 대해 잡히기 시작했다.
• 그런데, 중요한 것은 이것들은 모두 다른 일을 하면서 직장을 마치고 난 후, 주말에 꾸준하게 공부했다라는 것이다. 여기에서 수강생들에게 조언하는 것이 있다.
  • 그리고 이 지점이 내가 읽어보라고 추천하는 글과 다른 지점이다.
  • 현실적으로 모든 수강생이 좋은 회사에 들어갈수는 없다. 현재 나의 전공, 나이, 학력이 중요하다.
  • 진로 컨설팅을 할 때, 나이가 어리고, 어느정도 대학 학사를 보유했다면 필자는 수강생에게 보다 높은 곳을 지원할 것을 권한다. 지원해서 인턴이라도 할 수 있으면 하라고 권한다. 첫직장에 삼성전자 인턴 경험을 했다고 가정해보자. 두번째 직장을 구하는 것은 훨씬 쉽다.
  • 문제는 그렇지 못한 전공, 나이, 학력을 가지고 있을 때다. 가장 고민이 되는 사람들은 30대 초반의 비전공자, 전문대/고졸이다. 이 수강생이 좋은 회사에 신입으로 들어갈 확률은? 필자는 0으로 본다. 그럼 시작해야 할 곳은 좋지 못할 직장에서 시작할 가능성이 크다. 이 지점이 바로 모순점이다. 첫번째 직장이 중요하다고 하는데, 30대 초반의 비전공자, 전문대/고졸 출신에게 좋지 못할 직장에서 시작하라고 권하는 것이 맞는 컨설팅인가?
  • 필자는 맞다고 본다. 그런데, 선택 기준이 있다. 선택 기준은 SI 업체, 마케팅 대행 업체에 들어간다고 해도 고객사가 누구냐에 따라 달라진다.
  • 기본적으로 IT/빅데이터 산업 구조는 하청구조이다. 하청이라는 것은 원청이 존재하고, 원천에서 사업을 발주하여 여러 SI업체에 외주를 준다. 이 때, 본인이 능력을 발휘하여 고객사에게 인정을 받았다면, 비록 현실은 SI업체에서 저임금을 받고 있지만, 실력은 이미 고객사(대기업) 수준으로 인정을 받았다는 것을 의미한다.

첫번째 직무 - 마케팅 관련

• 필자가 경험했던 시나리오다. 필자가 IT/빅데이터 직무를 시작했을 때의 스펙은 다음과 같다.
  • 필자의 나이 30대 초반, 학점은행 경영학사, IT/빅데이터 관련 자격증 없음, 국비교육 2회 수료
  • 당시, 대기업에 들어갈 확률 0 / 공기업에 취업할 확률 0
• 그래서, 필자는 경력이 중요하다고 판단했고, 그 경력을 이루기 위해 중소업체에 100여군데에 이력서를 내기 시작했다.
  • 이 때, 면접까지 간 업체의 수는 5군데 남짓. 이 시기가 독학으로 공부한지 1년이 넘을 때다.
• 처음에는 SI 업체에 가고 싶었다. 그러나 받아주는 곳은 한군데도 없었다. 그게 그 때 당시의 내 실력이었다.
• 그래서, 마케팅 관련쪽으로도 지원서를 넣기 시작했고, 그리고 프랜차이즈컨설팅 업체로 이직하게 되었다.
  • 원했던 직무는 아니었다. 그러나 대안이 없었다. SI업체에서 경력을 쌓고 싶었지만 받아주는 곳이 없었던 필자에게 그 와 유사한 일을 시작할 수 있는 것만으로도 감사할 따름이었다.
• 일하면서 배운 기술 : Google Analytics, Google Tag Manager, Data Studio, 제안서

두번째 직무 - 데이터분석 관련

• 일을 하면서, 원래 가고자 했던 SI 업체에 이력서를 계속 넣었다. 일을 하면서도 이력서를 넣는 일은 마다하지 않았고, 공부도 틈날 때마다 계속 했다. 이 때에도 약 50여군데는 넣었던 거 같다.
• 그리고 드디어 기회를 잡았다. 대표님이 당시 LG CNS 출신이셨고, 이제 막 회사를 차렸다. 입사할 당시, 나와 같이 경력이 미천한 사람만 4명 있었다.
  • 강남역 조그만 사무실에서 대표님 포함 5명 + 그 외 다양한 자문을 주신 분들이 있었다.
• 여기에서 매우 귀중한 기회를 잡게 된다.
  • 회사의 업력이 짧았기 때문에, 단독으로 공기관 입찰은 불가했다. 그런데, 당시 다른 회사에 얹혀서 프로젝트를 하던 중(보통 하청의 재하청이라 말함) 담당 프로젝트 매니저로부터 강의를 제안 받는다. R로 하는 머신러닝 강의
  • 당시 필자는 이미 R로 DataCamp를 통해서 꾸준하게 공부를 해왔던 터라, 강의 준비할 시간은 있었다.
  • 그런데, 강의 경력은? 없었다. 그런데 강의를 하라고 부탁을 받은 것이다. 그리고 대표님도, 이 회사에 R을 할 수 있는 사람은 나뿐이라, 내가 꼭 해야 한다는 것이다.
  • 이 강의가 인생의 전환 포인트가 되었다. 향후 세번째 회사로 이직할 때도 그 회사 대표님이 이 강의를 언급하면서, 짧은 경력에 어떻게 여기에서 강의를 했느냐고 물어볼 정도였으니…
• 업무 성과의 중요성 : 그리고 오퍼를 받기 시작함
  • 약 3일간의 강의를 진행하였고, 그 후에 3번의 강의를 더하게 된다.
  • 그런데, 분석 관련 미팅 및 프로젝트를 하게 되면서 고객사로부터 계약직 제의를 받기 시작했다.
• 이 때, 필자는 이직 타이밍을 재기 시작했다.
• 일하면서 배운 기술 : IT기술 영업, 제안서, AWS, AZURE, GCP 클라우드, Python, SQL, 그리고 IT 프로그래밍 강의

세번째 직무 - 빅데이터 팀장

• 수강생들에게 하고 싶은 말이 여기에 있다. 첫번째 직장이 중요하다! 그러나, 더 중요한 것은 SI에서 일을 시작했다면, 고객사로부터 인정을 받는 것이 중요하다. 고객사로부터 인정을 받았다면, 그 때가 이직할 타이밍이고, 그리고 이직할 타이밍에서 중요한 건 내가 이직하려고 하는 회사의 산업구조를 이해하는 것이 중요하다.
• 이 부분은 2편에서 연재할 예정

직무를 전환할 때 반드시 필요한 것 2가지

• 1일 블로그와 깃허브
• 필자의 수업을 들었던 수강생들과 가끔 저녁 및 식사를 할 때가 종종 있다. 그럼, 그 친구들이 나로부터 들었던 말 중 기억나는 것을 얘기할 때 마다, 1일 블로그와 깃허브를 종종 말한다.
• 필자가 가장 아쉬워 하는 것 중의 하나가, 만약 2013년, 14년, 16년 프로그래밍을 처음 접하던 시절부터 블로그와 깃허브를 꾸준히 했더라면.. 하는 아쉬움이 늘 존재한다.
• 블로그는 본격적으로 프리로 전환한 2020년부터 하기 시작했다. 만약 그 전부터 꾸준히 했더라면, 어땠을까? 하는 아쉬움이 늘 존재한다. 그랬다면 최소 1000개의 글이 내 블로그에 존재할지도 모르겠다.
• 신입에게 내 성실성과 꾸준함을 객관화 시킬 수 있는 것은 어쩌면 프로그래밍 관련 블로그 뿐일지도 모른다.
• 참고로 이 글은 3년간 작성한 글의 447번째 글이 될 것이다.