[글쓴이:] Hyunsu Lee

강화학습은 게임환경 밖 실제 환경에서 사용될 수 있을 것인가

OpenAI에서 최근 마인크래프트를 Video-pretraining을 통해 다이아몬드 곡괭이까지 만드는 것에 성공했다. Atari보다 훨씬 큰 latent space(state, action 모두)에서 이것을 성공한 것은 대단한 일이다. 이전 OpenAI에서는 로봇손으로 루빅큐브를 푸는 것도 성공한 바 있다. 위 두 가지 접근은 현실에 어떻게 강화학습이 적용될 수 있을까에 대한 두 가지 접근방식을 보여준다. 사람이 플레이한 게임 화면을 그대로 보여주어 사전 학습을 시킨 … 계속 읽기 강화학습은 게임환경 밖 실제 환경에서 사용될 수 있을 것인가

왜 인공지능 만들기는 생각보다 어려운가?(Mitchell 논문 리뷰 3)

왜 인공지능 만들기는 생각보다 어려운가?(Mitchell 논문 리뷰 1) 왜 인공지능 만들기는 생각보다 어려운가?(Mitchell 논문 리뷰 2) 위 글들에 이어지는 글이다. 미첼이 지적하는 세번째 오류는 인공지능 연구자들이 스스로가 만든 인공지능 알고리즘에 과잉해석을 덧붙인다는 점이다. 멋들어진 약어를 쓰고(예를 들어 UNDERSTAND, GOAL같은), 알고리즘을 인간적으로 비유하는 것이 대중 뿐만 아니라, 연구자들 스스로로 함정에 빠뜨리게 된다는 점을 지적한다. 예전 대략 … 계속 읽기 왜 인공지능 만들기는 생각보다 어려운가?(Mitchell 논문 리뷰 3)

왜 인공지능 만들기는 생각보다 어려운가?(Mitchell 논문 리뷰 2)

왜 인공지능 만들기는 생각보다 어려운가?(Mitchell 논문 리뷰 1) 에서 이어지는 내용이다. 네가지 요소 중 두번째 문제인 모라벡의 역설에 대해 다루겠다. 모라벡의 역설은 한스 모라벡이 그의 저서 Mind Children (1988년)에서 처음 제기한 역설이다. 간단히 설명하면 인공지능으로 체스를 잘 두는 것을 만드는 것은 상대적으로 쉽지만, 체스말을 정교하게 움직이게 하는 것은 아주 어렵다는 역설이다. 실제로 우리는 이제 바둑을 … 계속 읽기 왜 인공지능 만들기는 생각보다 어려운가?(Mitchell 논문 리뷰 2)

왜 인공지능 만들기는 생각보다 어려운가?(Mitchell 논문 리뷰 1)

Mitchell M. (2021). Why AI is Harder Than We Think. arXiv 2104.12871v2. 인공지능의 발전 속도가 아주 빠른 것은 사실이나, 사람들이 기대한 만큼은 아니다. 우리는 아직 완전 자율주행차를 가지지 못 했고, 각종 집안일을 대신 해줄 수 있는 로봇도 없다. 인공지능 비서 역시 아직은 믿을만 하지 않다. 대신 우리에게 있는 것은 반자율주행차, 로봇청소기, 식기세척기 등이다. 그리고 가끔 … 계속 읽기 왜 인공지능 만들기는 생각보다 어려운가?(Mitchell 논문 리뷰 1)

Reinforcement learning in artificial and biological systems

Reinforcement learning in artificial and biological systems 리뷰논문에 대한 글. 저자들은 biological inspired RL 개발쪽에 관심이 많은듯하다. 본인들이 개발한 RL 시스템은 spike-based deep, continuous local learning(DCLL)이다. 그래서 machine RL의 한계에 대해 지적하는데, 환경이 제한되어있고 정적이라는 점이 큰 한계라고 한다. Open AI Gym, game environment 등 모두 크지 않고, 정적이다. 하지만 biology의 learning enviroment는 아주 dynamic하다. 대신 … 계속 읽기 Reinforcement learning in artificial and biological systems

Distributional Reinforcement Learning in the Brain 리뷰논문(TINS 2020) 요약

  Distributional Reinforcement Learning in the Brain Lowet et al. 2020 리뷰논문 요약. 이 논문이 나오게 된 계기 또는 이전의 흐름은 Deep mind에서 발표한 distributional RL 논문 두개. Bellamare et al. 2017, Dabney et al. 2017, 그리고 이 두 논문의 computational 효과, 그리고 biological implementation에 대한 논문. Dabney et al. 2020. 이 세 논문이 전제되어 … 계속 읽기 Distributional Reinforcement Learning in the Brain 리뷰논문(TINS 2020) 요약

개인 웹서버 설치 및 워드프레스 설치

APM, 워드프레스 설치 처음 따라한 방법은 우분투 워드프레스 설치 방법 - HiSEON 와 우분투 MySQL 설치 - HiSEON 여기에 속칭 APM 3종 세트를 설치하는 방법과 워드프레스까지 설치하는 방법이 나와있다. 하지만 여기서 https 인증 때매 삽질하다 찾은 블로그는 좀더 자세하고 정확하다. 그런데 복잡해서 한참 헤멤.하지만 다음 웹싸이트에서 지시하는대로 하면 새로운 user를 만들어서 그 user의 home안에 www … 계속 읽기 개인 웹서버 설치 및 워드프레스 설치

우분투 Ubuntu 사용자 관리 user manage 관련 CLI 명령어

사용자 추가 $ sudo adduser USERID # 뒤에 sudo 를 추가하면 sudo 유저로 추가 사용자를 sudo 유저로 만들기, 권한 빼기. $ sudo usermod -aG sudo USERID # sudo 유저로 만들기 $ sudo deluser USERID sudo # sudo 유저에서 빼기 sudo 유저 그룹 확인 $ grep "sudo" /etc/group 사용자 전환 $ su - USERID root 계정 … 계속 읽기 우분투 Ubuntu 사용자 관리 user manage 관련 CLI 명령어

Trouble shooting for Ubuntu GPU machine

GPU driver가 사라졌을때 !!!요부분은 아직 경험하지 못한 부분 우분투 14.04를 쓸 땐 CUDA driver를 썼지만, 16에서는 따로 드라이버를 잡았으로, 그 드라이버를 새로 깔아서 해결해보자. 그전에 이 현상이 안 일어나야겠지…. 자동 업데하다 nvidia랑 충돌나서 생기는 문제인 거 같은데. !!!결론적으로 자동 업데가 화근이었다. 최근 받은 미루웨서 매뉴얼에 따르면 GUI autoupdate를 켜놓으면 dist-upgrade를 자동으로 하는데 그러면 추천 앱+커널이 … 계속 읽기 Trouble shooting for Ubuntu GPU machine