전체 글196 [28일차] Graph 👩🏻2022-07-28👩🏻 논문 시각화하기 때문에 파이썬을 선호한다. conda install matplotlib 설치 figsize는 inches... marker https://matplotlib.org/stable/api/markers_api.html?highlight=marker 2022. 7. 28. [27일차] for문 if문 한 번에 쓰기 for 문과 if문을 한번에 - List comprehension의 if 문 이번 강의에서는 list comprehension 안에서 조건문을 넣는 방법에 대해 알아봅시다. 다른 언어에서는..(또는 이 기능을 모르시는 분은) 보통 사람들은 for 문 안에서 조건문을 사용해 2-depth 블록을 만듭니다. mylist = [3, 2, 6, 7] answer = [] for number in mylist: if number % 2 == 0: answer.append(number**2) # 들여쓰기를 두 번 함 파이썬에서는 파이썬의 list comprehension을 사용하면 한 줄 안에 for 문과 if 문을 한 번에 처리할 수 있습니다. mylist = [3, 2, 6, 7] answer = [number.. 2022. 7. 27. [27일차] 데이터 시각화 numpy / pandas 😶2022-07-27😶 python list 차이점 다양한 타입을 동시에 제공할 수 있다. 굉장한 유연성이 있다. 담으려는 타입이 여러가지 인 경우를 쓰는 경우가 거의 없다. .편의성은 좋으나 내부 처리속도가 굉장히 느리다. 눈에 띄게 내부처리 속도가 느리다. 데이터가 큰 데이터가 될 경우 문제가 된다. 그래서 나온 경우가 numpy 배열.. 내부 핵심 로직은 다 C++로 작성 빠른 속도를 위해 다양한 타입을 한꺼번에 지원하지 않음 속도때문에 ... 하나의 타입만 지원한다. numpy 가상환경 확인하기 numpy 설치 가상환경에는 conda로 설치하기 numpy pandas 2022. 7. 27. [26일차] map python programmers https://school.programmers.co.kr/learn/courses/4008/lessons/12730 프로그래머스 코드 중심의 개발자 채용. 스택 기반의 포지션 매칭. 프로그래머스의 개발자 맞춤형 프로필을 등록하고, 나와 기술 궁합이 잘 맞는 기업들을 매칭 받으세요. programmers.co.kr 모든 멤버의 type 변환하기 - map 이번 강의에서는 Iterable의 모든 멤버의 type을 변환하는 방법을 알아봅시다. 예시) 문자열 배열 ['1', '100', '33']을 정수 배열 [1, 100, 33]로 바꾸기 부동소숫점 튜플 (3.14, 3.5, 22.6)을 정수 배열 (3, 3, 22)로 바꾸기 다른 언어에서는..(또는 이 기능을 모르시는 분은) 보통 사람들은 for 문을 이.. 2022. 7. 26. [26일차] hadoop 평가 2022. 7. 26. [26일차] hadoop eco system/hive 설치/HiveQL사용하기 💙2022-07-26💙 하둡 에코 시스템 hadoop eco system 개념상 맨 하단에 하둡파일 시스템 위에 얀이 올라감. yarn이 올라가서 수많은 애플리케이션이 탄생함. HDFS를 사용한 noSQL 대용량 hdfs 를 사용 hbase.. HDFS를 머신러닝에 입력으로 사용 PIG 자바를 모르는 사람들을 위한 파이썬 비슷한 스크립트 언어 mapreduce할 수 있게.. 거의 안씀 사라졌다고 봐도 됨 이유가 다른 애플리케이션 SQL로 SQL 하둡 mapreduce 작업을 해서 결과를 나타냄.. cloudera .. HIVE 완벽한 ANSI표준 지원 X .. TAJO 고려대 대학교 DB팀이 만들어냈다. 쿼리문을 이용 각종 프로세스들 통신// 통신이 필요할 경우 재구성 zookeeper 동물원 관리 주키.. 2022. 7. 26. 테마바꾸기2 2022. 7. 25. [25일차] DelayCountWithMultipleOutputs.java 🤍 2022-07-25 🤍 DelayCountMapperWithMultipleOutputs.java package com.gyuone.mapper; import java.io.IOException; import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.Text; import org.apache.hadoop.mapreduce.Mapper; import com.gyuone.common.AirlinePerformanceParser; import com.gyuone.common.DelayCounters; public class DelayCountMapperWithMul.. 2022. 7. 25. [24일차] driver 패키지에 ArrivalDelayCount/ DelayCount/ DelayCounterWithCounter/ DelayCountWithCounterTwo 작성하기 어제 한건 출발지연시간 오늘은 도착지연시간을 출력해보자. ArrivalDelayCountMapper.java ArrivalDelayCountMapper; package com.gyuone.driver; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.Text; import org.apache.hadoop.mapreduce.Job; import org.apache.hadoop.mapreduce.lib.input.FileInputFormat; import org.apache.hadoop.mapr.. 2022. 7. 21. JAVA 시험 문제 파일 2022. 7. 20. [23일차] Hadoop WordCount . DepartureDelayCount 🚀2022-07-20 🚀 하둡파일 시스템 루트 밑에 tmp.. ls 하면 no such file이 나오는 이유는 ls 하면 없는 이유는 사용자계정이 없어서 루트로 접근하니깐,, ls가 사용자 계정으로 접근하게 되어서 계정을 직접 만들어줘야한다. 기본적으로 하둡이랑 linux명령어가 비슷.. 유사하다 ubuntu22 로그인 mapred historyserver start& 서버 실행 2번째 창으로 들어가기 jps제외한 7개 뜨는 거 확인 linux-> firefox -> localhost:50070 jps 개수확인 start-yarn.sh 시작 vi . ~/.bashrc 수정 hdfs dfs -ls / -> 안나오니깐 hdfs dfs -mkdir /user 유저를 따로 만들어서 설정해준다. hdfs dfs.. 2022. 7. 20. 테마 바꾸기 2022. 7. 20. 이전 1 ··· 9 10 11 12 13 14 15 ··· 17 다음
