데이터분석 167

rtx 2060 - tensorflow 1.14.0 - cuda 10.0 ubuntu 설치기

약 주말포함 20시간 3일동안 계속 팠는데 설치에 실패했다. cuda_dnn.cc:329 Could not create cudnn handle : CUDNN_STATUS_INTERNAL_ERROR rtx 2060 - tensorflow 1.14.0 - cuda 10.0 ubuntu 18.04 아주 평범한 형태의 돈없지만 아주 없지는 않은 회사원의 rtx 구성이다. 일단 tensorflow가 cuda 10.1과 안맞는다는 제보를 듣고 버전을 맞추려고 별짓을 다했다. 드라이버 문제인것같아 410 415 418 430 435 안깔아본 드라이버가 없으며, cuda 10.1, cuda 10 그리고 tensorflow 1.14, 1.13 모두 시도 해봤지만 항상 같은 문제가 생길 뿐이다. cudnn에서 Conv2D..

TPU 구글에서 사용

https://console.cloud.google.com/storage/browser/ Google Cloud Platform 하나의 계정으로 모든 Google 서비스를 Google Cloud Platform을 사용하려면 로그인하세요. accounts.google.com 1.) 필요한 파일을 버켓에 올린다. 2) Computing Machine 을 올린다. 3) 그리고 ssh를 틀어서 해당프로젝트를 들어가서, gsutil cp gs://XXX/train.csv train.csv 로 복사를 하면된다. XLNET으로 한번 트레인을 해보고자 했는데, 일단 XLNET에서 공개한 github에서 https://github.com/zihangdai/xlnet 다운로드를 한 후, 여기서 실제로 kaggle toxi..

브라이틱스로 데이터분석해서 중고차 사기

중고차를 사야하기 때문에, K car에 내가 원하는 후방센서가 달린 차들을 몇개 뽑았다. 옵션은 비슷해보인다. 데이터는 아래와 같다. 차종연식주행거리가격투싼1236109투싼1236110뉴 아반떼1561114아반떼1644120아반떼1645120아반떼1637121아반떼1626124투싼1157125아반떼1629125투싼1157126아반떼 디젤1662129BMW 31162133투싼1336142아반떼1634144뉴 투싼1522162아반떼 스포츠1732164 수입차가 하나 껴있기는 하지만 어쨌든 모든걸 다 데이터마이닝하기는 힘드니, 빠르게 하고 지른다. 사실, 효율적인 구매는 다나와에서 인기상품순으로 정렬한 다음에 지르는것이 시간과 비용을 아끼는 제일 좋은 방법인데, 차같은경우는 남심을 자극하는 뭔가가 있어서 조금..

데이터분석 2019.03.13

gensim word2vec simple usage

from gensim.models import word2vec token = [['나는','너를', '사랑해'],['나도','너를','사랑해']] embedding = word2vec.Word2Vec(token, size=5, window=1, negative=3, min_count=1) embedding.save('model') #모델 저장embedding.wv.save_word2vec_format('my.embedding', binary=False) #모델 저장 embedding.wv['너를'] embedding.most_similar('너를') from gensim.models.keyedvectors import KeyedVectorsembedding.wv.save_word2vec_format('m..

windows10 tensorflow-gpu 설치

아래와 같은 에러가 뜨면서 아무리 메뉴얼대로 설치해도 잘 안되는경우가 있다.Traceback (most recent call last): File "", line 1, in File "C:\Users\kohry\Anaconda3\lib\site-packages\tensorflow\__init__.py", line 22, in from tensorflow.python import pywrap_tensorflow # pylint: disable=unused-import File "C:\Users\kohry\Anaconda3\lib\site-packages\tensorflow\python\__init__.py", line 49, in from tensorflow.python import pywrap_tenso..

ADP 합격후기

더이상 기억이 사라지기 전에 적어놓는 ADP 최종 합격후기.10회차 실습을 끝으로 졸업을 하게 되었다.경영대를 다니면서도 통계 개념들은 재무나 생산관리등에서 종종 등장해왔고, 흥미가 많았었다.뭔가 경영학의 뜬구름스러움에 대한 아쉬움때문에 컴공 / 통계에 대한 전공을 고려해본적도 있었으니, 사실 지금하는일도 프로그램 개발/분석에 가깝기 때문에 결국에는 취향따라 어떻게든 도착을 하기는 했다.프로그램 개발을 하다보면, 어느날 도메인 지식에 대한 아쉬움이 느껴질때가 있다. 코딩을 잘하고 설계를 잘하는것도 물론 충분히 가치있는 일이기는 하나, 결국에는 무엇을 만드는지가 굉장히 중요하다. 그 목표를 잡기위해 계속 공부를 하다보면서 다다르게 되었던 곳이 데이터 분석이다. 물론 데이터분석도 도메인에 관한 지식이 없으면..

데이터분석 2018.08.27