CoInzBlog

Excel을 사용할 때, Pivot 작업을 많이 하게 되는데, 날짜 필드를 행에 넣을 때, 자동으로 "년", "분기" 같은 단위로 묶이는 경우가 있다. 이를 원하는대로 년/월/일/시 같은 단위로 묶는 방법은 다음과 같다.

Elasticsearch에서는 서버 부하를 줄이기 위하여, 기본적으로 10000개의 응답이 회신된다. 이는 인덱스 설정을 바꿔주면 해결이 된다. from elasticsearch import Elasticsearch es = Elasticsearch(hosts=['http://localhost:9200']) es.indices.put_settings( index="my_index", # 이 필드는 꼭 없어도 되는 것 같음. body= {"index" : { "max_result_window" : 500000 }}) resp = es.search(index="my_index", query={"match_all": {}}, size=500000) print("Got %d Hits:" % resp['hits'..

업무를 하면서 각종 스크립트를 작성하다보면, 로그 파일을 잘 관리하는게 필요하다. 쉽게 하는 방법은 logger를 이용해 파일로 stdout/stderr 를 출력하도록 하면 되는데, 로그를 많이 생성할 수록 용량이 기하급수적으로 늘어나게 된다. 그리고, 파일 용량이 커지면 에러가 발생한 시점을 찾기도 어렵다. 따라서, 이럴 때는 날짜별로 구분하여 저장되도록 설정하고, 과거 로그는 자동으로 압축되도록 Rotate 설정하는 것이 좋다. Ubuntu에서는 아래 경로에 관리할 대상 로그에 대한 설정을 생성해주면 된다. >> sudo vi /etc/logrotate.d/myproject /data/myproject/log/*.log { daily

Systemd로 등록하여 서비스로 관리하는 경우가 있는데, 구글링을 열심히 하다보면, 로그를 저장할 경로를 StandardOutput / StandardError를 이용해 지정하라고 한다. 아래와 같이 값을 넣어두면 될 것이라고 생각을 했는데, StandardOutput=/myproject/log/stdout.log StandardError=/myproject/log/stderr.log 이런 경우 아래와 같이 에러가 생기고 무시가 되어 버리며, /var/log/syslog 에 로그가 저장되어 버린다. /etc/systemd/system/myproject.service:11: Failed to parse output specifier, ignoring: /myproject/log/stdout.log 이는 ..

맥에서 Python 개발을 할 때, matplotlib 로 그래프 출력이 안되는 경우가 있는 것 같다. 에러 메시지는 다음과 같이 난다. import matplotlib.pyplot as plt File "/Users/cosrah/anaconda3/envs/py35/lib/python3.5/site-packages/matplotlib/pyplot.py", line 115, in _backend_mod, new_figure_manager, draw_if_interactive, _show = pylab_setup() File "/Users/cosrah/anaconda3/envs/py35/lib/python3.5/site-packages/matplotlib/backends/__init__.py", line 6..

리스트에 포함된 데이터에서두 개의 모든 데이터 쌍을 얻고 싶을 때아래와 같이 코드를 작성할 수 있습니다. def get_pairs_from_list(lst): pairs = [] lst_len = len(lst) for i in range(lst_len): if i == (lst_len-1): break subset = lst[i+1:] for item in subset: pairs.append((lst[i], item)) return pairs 감사합니다.

오늘 작업을 하다가 보니,Python에서 멀티쓰레드로 작업을 처리하고 싶어졌다.그런데, 단순히 Thread를 Array로 만들어서 처리하다보니 너무 복잡했다.그래서 Pool 형태로 구현하는 방법을 찾아보니, 아래 링크처럼 구현이 가능했다. http://code.activestate.com/recipes/577187-python-thread-pool/ class ThreadPool: """Pool of threads consuming tasks from a queue""" def __init__(self, num_threads): self.tasks = Queue(num_threads) for _ in range(num_threads): Worker(self.tasks) def add_task(self, ..

GIT 프로그램이 콘솔 프로그램이기 때문에 Proxy 설정을 어떻게 해야할지 난감할 때가 있다.웹에 여러가지 글이 있지만, 한방에 설정한 방법이 아래이다. git config --global http.proxy hostname:port @hostname : IP or Host Url@port : * 검은색 글씨는 그대로 적고, 뒤의 hostname과 port 정보를 입력하여 Proxy 설정을 해준다.* 원래의 git 명령어 실행 감사합니다.

오늘 두 가지 문제를 확인했다. 첫 번째, Python 2.6.6 버전에서는 (적어도 내가 확인한 바로는) import sys sys.setdefaultencoding('utf-8)방식으로 인코딩 설정을 할 수 없었다. 한글 처리에서의 어려움이 있었는데, 이 방법으로 해결했다. site.py 파일에서의 encoding 기본 값을 강제로 설정하는 방법... 좀 무식하긴 하지만;; Python 에서 이런 부분을 전혀 고려해주지 않아서, 또는 제대로 개발자가 알 수 없도록 해서 어쩔 수 없이 적용하는 부분이니까... 두 번째, 위 처럼 수정하니까. sqlite3 에서 문제가 발생했다. " Could not decode to UTF-8 column ~~ " 이것은 한글로 입력된 데이터에 대해서 'select' ..

원 저작자 덕분에 한 건 해결했네요. 감사의 의미로 링크만 달아놓습니다. http://windwaker.tistory.com/427 감사합니다.