Google Colaboratory - python 실습하기

https://colab.research.google.com/

https://research.google.com/colaboratory/faq.html

자주 묻는 질문(FAQ)

기본 사항

Colab 사용하기

Google Colab Free GPU Tutorial

https://medium.com/deep-learning-turkey/google-colab-free-gpu-tutorial-e113627b9f5d

Hello! I will show you how to use Google Colab, Google’s free cloud service for AI developers. With Colab, you can develop deep learning applications on the GPU for free.

Thanks to KDnuggets!

I am happy to announce that this blog post was selected as KDnuggets Silver Blog for February 2018! Read this on KDnuggets.

What is Google Colab?

Google Colab is a free cloud service and now it supports free GPU!

You can;

• improve your Python programming language coding skills.
• develop deep learning applications using popular libraries such as Keras, TensorFlow, PyTorch, and OpenCV.

The most important feature that distinguishes Colab from other free cloud services is; Colab provides GPU and is totally free.

Detailed information about the service can be found on the faq page.

Getting Google Colab Ready to Use

Creating Folder on Google Drive

Since Colab is working on your own Google Drive, we first need to specify the folder we’ll work. I created a folder named “app” on my Google Drive. Of course, you can use a different name or choose the default Colab Notebooks folder instead of app folder.

I created an empty “app” folder

Creating New Colab Notebook

Create a new notebook via Right click > More > Colaboratory

Right click > More > Colaboratory

Rename notebook by means of clicking the file name.

Setting Free GPU

It is so simple to alter default hardware (CPU to GPU or vice versa); just follow Edit > Notebook settings or Runtime>Change runtime type and select GPU as Hardware accelerator.

Running Basic Python Codes with Google Colab

Now we can start using Google Colab.

I will run some Basic Data Types codes from Python Numpy Tutorial.

It works as expected :) If you do not know Python which is the most popular programming language for AI, I would recommend this simple and clean tutorial.

Running or Importing .py Files with Google Colab

Run these codes first in order to install the necessary libraries and perform authorization.

When you run the code above, you should see a result like this:

Click the link, copy verification code and paste it to text box.

After completion of the authorization process, you should see this:

Now you can reach you Google Drive with:

install Keras:

!pip install -q keras

upload mnist_cnn.py file to app folder which is located on your Google Drive.

mnist_cnn.py file

run the code below to train a simple convnet on the MNIST dataset.

!python3 "/content/drive/My Drive/app/mnist_cnn.py"

As you can see from the results, each epoch lasts only 11 seconds.

https://ko.wikipedia.org/wiki/%ED%8C%8C%EC%9D%B4%EC%8D%AC

파이썬[3](영어: Python)은 1991년[4] 네덜란드계 프로그래머인 귀도 반 로섬[5]이 발표한 고급 프로그래밍 언어로, 플랫폼에 독립적이며 인터프리터식, 객체지향적, 동적 타이핑(dynamically typed) 대화형 언어이다. 파이썬이라는 이름은 귀도가 좋아하는 코미디인〈Monty Python's Flying Circus〉에서 따온 것이다. 이름에서 고대신화에 나오는 커다란 뱀을 연상하는 경우도 있겠지만, 이와는 무관하다. 다만 로고에는 뱀 두마리가 형상화되어 있다.

파이썬은 비영리의 파이썬 소프트웨어 재단이 관리하는 개방형, 공동체 기반 개발 모델을 가지고 있다.

파이썬은 초보자부터 전문가까지 사용자층을 보유하고 있다. 동적 타이핑(dynamic typing) 범용 프로그래밍 언어로, 펄 및 루비와 자주 비교된다. 다양한 플랫폼에서 쓸 수 있고, 라이브러리(모듈)가 풍부하여, 대학을 비롯한 여러 교육 기관, 연구 기관 및 산업계에서 이용이 증가하고 있다. 또 파이썬은 순수한 프로그램 언어로서의 기능 외에도 다른 언어로 쓰인 모듈들을 연결하는 접착제 언어로써 자주 이용된다. 실제 파이썬은 많은 상용 응용 프로그램에서 스크립트 언어로 채용되고 있다. 도움말 문서도 정리가 잘 되어 있으며, 유니코드 문자열을 지원해서 다양한 언어의 문자 처리에도 능하다.

 

구문이 강조된 파이썬 코드 예제

파이썬은 기본적으로 해석기(인터프리터) 위에서 실행될 것을 염두에 두고 설계되었다.

• 주요 특징
  • 동적 타이핑(dynamic typing). (실행 시간에 자료형을 검사한다.)
  • 객체의 멤버에 무제한으로 접근할 수 있다. (속성이나 전용의 메서드 훅을 만들어 제한할 수는 있음.)
  • 모듈, 클래스, 객체와 같은 언어의 요소가 내부에서 접근할 수 있고, 리플렉션을 이용한 기술을 쓸 수 있다.

• 해석 프로그램의 종류
  • Cython: C로 작성된 인터프리터.
  • 스택리스 파이썬: C 스택을 사용하지 않는 인터프리터.
  • 자이썬: 자바 가상 머신용 인터프리터. 과거에는 제이파이썬(JPython)이라고 불렸다.
  • IronPython: .NET 플랫폼용 인터프리터.
  • PyPy: 파이썬으로 작성된 파이썬 인터프리터.

현대의 파이썬은 여전히 인터프리터 언어처럼 동작하나 사용자가 모르는 사이에 스스로 파이썬 소스 코드를 컴파일하여 바이트 코드(Byte code)를 만들어 냄으로써 다음에 수행할 때에는 빠른 속도를 보여 준다.

파이썬에서는 들여쓰기를 사용해서 블록을 구분하는 독특한 문법을 채용하고 있다. 이 문법은 파이썬에 익숙한 사용자나 기존 프로그래밍 언어에서 들여쓰기의 중요성을 높이 평가하는 사용자에게는 잘 받아들여지고 있지만, 다른 언어의 사용자에게서는 프로그래머의 코딩 스타일을 제한한다는 비판도 많다. 이 밖에도 실행 시간에서뿐 아니라 네이티브 이진 파일을 만들어 주는 C/C++ 등의 언어에 비해 수행 속도가 느리다는 단점이 있다. 그러나 사업 분야 등 일반적인 컴퓨터 응용 환경에서는 속도가 그리 중요하지 않고, 빠른 속도를 요하는 프로그램의 경우에도 프로토타이핑한 뒤 빠른 속도가 필요한 부분만 골라서 C 언어 등으로 모듈화할 수 있다(ctypes, SWIG, SIP 등의 래퍼 생성 프로그램들이 많이 있다). 또한 Pyrex, Psyco, NumPy 등을 이용하면 수치를 빠르게 연산할 수 있기 때문에 과학, 공학 분야에서도 많이 이용되고 있다. 점차적인 중요성의 강조로 대한민국에서도 점차 그 활용도가 커지고 있다.

https://ko.wikipedia.org/wiki/%ED%8C%8C%EC%9D%B4%EC%8D%AC%EC%9D%98_%EC%97%AD%EC%82%AC

 

파이썬의 로고 (1990년대~2006년)

프로그래밍 언어 파이썬은 1980년대 말에 구상되었으며[1] 그 구현체는 1989년 12월[2] 예외 처리가 가능하고 아메바 운영 체제와 통신이 가능한 ABC의 후속 프로그래밍 언어로서 CWI(Centrum Wiskunde & Informatica)의 귀도 반 로섬에 의해 시작되었다.[3]

파이썬 2.0은 2000년 10월 16일 출시되었으며 메모리 관리를 위한 사이클 감지 쓰레기 수집기(참조 카운팅뿐 아니라), 유니코드 지원을 포함한 새롭고 수많은 주요 기능들이 포함되었다. 그러나 가장 중대한 변화는 개발 프로세스 그 자체로서, 더 투명하고 공동체의 지원을 받는 프로세스로의 전환이다.[4]

파이썬 3.0은 메이저급의 하위 호환성이 없는 릴리스로서 2008년 12월 3일 출시되었으며[5] 이는 수많은 테스트 기간을 거친 뒤에 개발되었다. 주요 기능들 중 다수가 하위 호환이 가능한 파이썬 2.6, 2.7로 백포팅되고 있다.[6]

2018년 7월 12일, 귀도 반 로섬은 리더의 자리에서 내려왔다.[7]

버전 표[편집]

출시 전 내용:

• 개발 시작 - 1989년 12월[2]
• 네덜란드 국립 수학 정보과학 연구소에서 내부 발표 - 1990년[2]

버전최신 버전발표일제품 지원 종료일보안 지원 종료일

내용주:

차트[편집]

https://www.youtube.com/watch?v=7kJMBT9pv8Y 

오늘 새벽 5시부터 판교 데이터센터의 전력 공급이 완료됐습니다. 카카오도 판교 서버 3만 2천 대 중 3만 1천 대가 복구됐다고 밝혔습니다. 카카오는 오늘 오전 11시 긴급 기자회견을 엽니다.

https://www.mk.co.kr/news/it/view/2022/10/912486/

카카오가 이용하고 있는 판교 SK C&C 데이터센터에서 화재가 발생해 카카오톡을 비롯한 주요 서비스가 접속 오류를 빚고 있는 것으로 나타났다.

15일 카카오 관계자는 "이날 오후 판교 데이터센터 화재 영향으로 카카오톡 등 서비스가 원활하지 않은 장애가 발생했다"며 "세부 장애 범위 등은 파악 중이고, 빠른 복구를 위해 노력 중"이라고 밝혔다. 이 관계자는 또 "현재 소방당국이 화재 진압을 위해 데이터센터 전원을 차단한 상태"라며 "전원이 들어오는 시점으로부터 2시간 안에 전체 서비스가 복구될 것으로 기대한다"고 설명했다.

소방당국에 따르면 이날 오후 3시 33분 경기도 성남시 분당구 소재 SK판교 캠퍼스 지하 3층 배터리실에서 화재가 발생했다는 신고가 접수됐다. 불이 난 건물은 지상 6층에 지하 4층 규모(연면적 6만7000여㎡)로 네이버, 카카오, SK계열사가 데이터를 관리하는 시설이다. 화재 원인은 정확하게 밝혀지지 않았다. 다만 클라우드 데이터센터의 특성상 발열이나 전기 누전으로 화재가 발생했을 가능성이 있는 것으로 알려졌다. 소방당국은 불이 나자 인원 60여명과 펌프차 등 장비 20여대를 투입해 약 2시간 만인 이날 오후 5시 46분께 큰 불길을 잡았다. 하지만 건물 안에 연기가 많아 불을 완전히 진압하는 데는 시간이 다소 더 걸릴 전망이다. 이날 불로 인명피해는 발생하지 않은 것으로 전해졌다. 화재 발생 당시 건물 안에 20여명의 근무자가 있었으나 모두 무사히 대피한 것으로 확인됐다. 소방당국은 지하 3층 무정전전원장치(UPS)에서 불이 났다는 건물 관계자의 신고를 토대로 잔불을 정리하는 대로 자세한 화재 원인을 조사할 예정이다.

SK C&C 관계자는 "안전을 위해 데이터센터 전원 공급을 차단했고, 화재 관련해 추가적인 상황을 확인한 뒤 전원 공급을 재개할 예정"이라며 "화재로 인한 인명 피해는 없었지만 카카오와 네이버, SK계열사 등 입주 회사의 서비스에는 영향이 불가피하다"고 설명했다. 이 관계자는 이어 "데이터센터가 정상적으로 운영을 할 수 있도록 최선을 다할 것"이라고 밝혔다.

이날 화재 여파로 카카오톡, 포털 다음, 카카오내비 등 카카오의 주요 서비스가 접속 장애와 작동 오류가 발생했다. 카카오톡은 이날 오후 3시 33분 무렵부터 오후 7시 현재까지 메시지 전송 오류 장애를 겪고 있다. 다른 사람에게 메시지를 보내거나 받을 때 전송이 아예 안 되거나 시간이 한참 지나서야 전송되는 상황이 발생하고 있다. 카카오톡 PC 버전에서도 로그인을 시도해도 접속이 안 되는 경우가 지속되고 있다. 이날 카카오톡뿐 아니라 카카오의 포털 사이트 '다음'에서도 로그인이 안 되고 커뮤니티 서비스도 원활하게 작동하지 않는 문제가 발생하고 있다. 다만 다음 검색과 뉴스 등 다른 서비스는 정상적으로 돌아가고 있다. 다음은 지난 1일부터 로그인 방식이 기존의 다음 아이디 대신 카카오계정으로 일원화된 상황이다. 나아가 카카오모빌리티의 카카오내비와 카카오 T 앱 등도 원활히 접속되지 않는 문제가 발생했다.

[모두의 말뭉치 활용 방법] 모두의 말뭉치 소개 및 파일 신청하기 (1회차)

https://www.youtube.com/watch?v=bEWw5oqNugA 

노션에 대하여 몇 페이지 만들어보고 나니

Notion 의견 : 여러 의견이 있었지만, 아래와 같이 정리해 보았습니다.

장점 : 블로그 보다 화면구성이 손쉽고, IT지식이 부족해도 운영에 어려움이 없다.

한 화면에 주요정보를 노출하기 쉽고, 모바일 친화적이라 접근성이 높다.

단점 : 사용목적에 따른 기획이 없으면 화면을 구성하는게 쉽지 않다는 것을 알고 시작해야 한다.

파일첨부시 보안에 문제가 있을만한 파일은 업로드 하지 않는것을 권고한다.