블로그

Reinforcement learning in artificial and biological systems

Reinforcement learning in artificial and biological systems 리뷰논문에 대한 글. 저자들은 biological inspired RL 개발쪽에 관심이 많은듯하다. 본인들이 개발한 RL 시스템은 spike-based deep, continuous local learning(DCLL)이다. 그래서 machine RL의 한계에 대해 지적하는데, 환경이 제한되어있고 정적이라는 점이 큰 한계라고 한다. Open AI Gym, game environment 등 모두 크지 않고, 정적이다. 하지만 biology의 learning enviroment는 아주 dynamic하다. 대신 … 계속 읽기 Reinforcement learning in artificial and biological systems

Distributional Reinforcement Learning in the Brain 리뷰논문(TINS 2020) 요약

  Distributional Reinforcement Learning in the Brain Lowet et al. 2020 리뷰논문 요약. 이 논문이 나오게 된 계기 또는 이전의 흐름은 Deep mind에서 발표한 distributional RL 논문 두개. Bellamare et al. 2017, Dabney et al. 2017, 그리고 이 두 논문의 computational 효과, 그리고 biological implementation에 대한 논문. Dabney et al. 2020. 이 세 논문이 전제되어 … 계속 읽기 Distributional Reinforcement Learning in the Brain 리뷰논문(TINS 2020) 요약

개인 웹서버 설치 및 워드프레스 설치

APM, 워드프레스 설치 처음 따라한 방법은 우분투 워드프레스 설치 방법 - HiSEON 와 우분투 MySQL 설치 - HiSEON 여기에 속칭 APM 3종 세트를 설치하는 방법과 워드프레스까지 설치하는 방법이 나와있다. 하지만 여기서 https 인증 때매 삽질하다 찾은 블로그는 좀더 자세하고 정확하다. 그런데 복잡해서 한참 헤멤.하지만 다음 웹싸이트에서 지시하는대로 하면 새로운 user를 만들어서 그 user의 home안에 www … 계속 읽기 개인 웹서버 설치 및 워드프레스 설치

우분투 Ubuntu 사용자 관리 user manage 관련 CLI 명령어

사용자 추가 $ sudo adduser USERID # 뒤에 sudo 를 추가하면 sudo 유저로 추가 사용자를 sudo 유저로 만들기, 권한 빼기. $ sudo usermod -aG sudo USERID # sudo 유저로 만들기 $ sudo deluser USERID sudo # sudo 유저에서 빼기 sudo 유저 그룹 확인 $ grep "sudo" /etc/group 사용자 전환 $ su - USERID root 계정 … 계속 읽기 우분투 Ubuntu 사용자 관리 user manage 관련 CLI 명령어

Trouble shooting for Ubuntu GPU machine

GPU driver가 사라졌을때 !!!요부분은 아직 경험하지 못한 부분 우분투 14.04를 쓸 땐 CUDA driver를 썼지만, 16에서는 따로 드라이버를 잡았으로, 그 드라이버를 새로 깔아서 해결해보자. 그전에 이 현상이 안 일어나야겠지…. 자동 업데하다 nvidia랑 충돌나서 생기는 문제인 거 같은데. !!!결론적으로 자동 업데가 화근이었다. 최근 받은 미루웨서 매뉴얼에 따르면 GUI autoupdate를 켜놓으면 dist-upgrade를 자동으로 하는데 그러면 추천 앱+커널이 … 계속 읽기 Trouble shooting for Ubuntu GPU machine

우분투 설치과정 및 설정

우분투 설치 우분투 배포판 다운로드, USB부팅 디스크 제작 윈도우에서 해야함 /는 OS booting 전용 영역 package들을 깔걸 생각해서 64G정도 잡음 swap 영역은 윈도우의 cache에 해당 32G 나머지 partition은 /home으로 몰아줌(이럼 사용자 data는 따로 백업가능) 부팅 usb로 부팅할때부터 nouveau때문에 화면이 안보일 수 있다. 이럴 땐. bios setting 메세지가 뜬 직후 shift를 누르고 grub화면이 뜨는 걸 확인한다. grub에서 원하는 ubuntu boot option에서 e를 누른다. 그럼 grub setting 화면이 뜸. linux로 시작하는 line에 modprobe.blacklist=nouveau 를 추가한다. Ubuntu에 tensorflow(GPU) 돌리기 기본적으로는 ubuntu에 tensorflow구동 이걸따라가고, terryum 블로그 도 참고 할것. 이건 위의 블로그를 참고할 것. (blacklist nouveau를 /etc/modprobe.d/blacklist.conf 에 추가할것. 안 그럼 nvidia driver가 안깔림.) secure boot option도 disabled해둠. 안그럼 driver installer가 kernel에 덮어쓸 수 없음. 텐서플로 공홈에서도 secure boot가 과정을 … 계속 읽기 우분투 설치과정 및 설정

How to write a great research paper by Simon PJ

Microsoft research Simon PJ의 강연 요약 먼저 쓰기 시작해라. 쓰다보면 아이디어가 발전한다. 연구를 진행하고 나서의 결과물이 논문이 아니다. 논문을 쓰는 과정 자체가 연구다. 쓰다보면 부족한 부분, 개선해야할 점이 보이고, 그러면서 연구를 진행하자. 키 아이디어를 잡자. 논문을 쓰는 목적은 아이디어를 전달하는 것이다. 아이디어는 프로그램 같은 것보다 생명력이 길다. 모짜르트의 악보를 생각해봐라. 실현한 연주는 오래가지 않지만, 악보에 … 계속 읽기 How to write a great research paper by Simon PJ