2021 RL Korea Drone Delivery Challenge with Unity

Python 100.00%

challenge delivery drone reinforcement-learning

2021_rlkr_drone_delivery_challenge_with_unity's Introduction

🎉 2021 RL Korea Drone Delivery Challenge with Unity 수상자 발표 🎉

Welcome!👋

본 챌린지는 RL Korea에서 주최하는 2021 RL Korea Drone Delivery Challenge with Unity 입니다.

드론이 물류창고의 물품들을 배송지인 집으로 빠르고 안전하게 배송하도록

강화학습 알고리즘으로 학습시켜 보세요!

✅ 자세한 대회 안내는 아래 챌린지 살펴보기 버튼을 눌러 확인해보세요!

대회 시나리오와 모델 평가 기준(Evaluation)을 확인하실 수 있습니다.

다양한 강화학습 알고리즘들을 한번 시도해보고, 혹시 강화학습이 처음이시더라도 이번 챌린지에서 도전해보시면서 강화학습의 매력을 경험해 볼 수 있는 좋은 기회가 되시길 바랍니다.

🔥 Who will be the coolest drone delivery model?

➡️ Index

Click to get to the section you want quickly.

📅 Schedule

Date	Event
2021.11.01	챌린지 시작 START
2021.11.10 updated	모델 Submission START
2021.12.07 updated	챌린지 종료 END

모든 스케쥴은 해당 당일 오전 12시(0시)시작을 기준으로 합니다.

🏆 Awards

2021 RL Korea Drone Delivery Challenge with Unity의 어워드는 다음과 같습니다.🎉

Rank	Award	수령 팀 수
🥇1st	200만원	1
🥈2nd	100만원	1
🎖Unity 특별상	50만원	2

1st, 2nd Award는 Submission 채점 기준에 따라 리더보드에서 결정됩니다.
Unity 특별상은 Python API가 아닌 ml-agents 2.0 내부 알고리즘(PPO, SAC) 을 이용하여 최고 성적을 낸 2팀에게 수여됩니다.
- 참여 방법에 대한 안내 🚀Let's START를 참고해주세요.
- 리더보드의 순위와 별개로 시상하는 상이므로, 1st, 2nd 상금과 중복 수령 가능 합니다.

👩‍💻 Enjoy the Challenge! 👨‍💻

챌린지를 더욱 더 재밌고 효율적으로 즐기기 위한 방법들을 소개합니다. 대회 기간동안 적극적으로 활용해주세요!

이전에 안내해드린 Slack 채널로는 운영하지 않고 Github으로 통합할 예정입니다.

챌린지에 관해 자주 나오는 질의응답은 FAQ에 정리되어 있으니 한번 확인해보세요!

Issues

✅ Issues 버튼을 눌러 문의 사항을 남겨보세요!

아래 각 이슈에 대한 설명을 읽어보시고 해당하는 Issue Template를 활용하여 문의사항을 적어주세요. 

최대한 빠른 시간안에 답변드릴 수 있도록 노력하겠습니다!

참가신청문의 : 챌린지 참가 신청에 관한 이슈와 문의
환경파일문의 : 챌린지 환경파일인 RL Village에 관한 이슈와 문의
Docs문의 : 챌린지 Github에 올라와 있는 docs에 관한 이슈와 문의
Submission문의 : 모델 제출, 리더보드에 관한 이슈와 문의
기타문의 : 위 카테고리에 해당되지 않은 운영진에게 전달하고 싶은 이슈와 문의

Discussions

✅ Discussions 버튼을 눌러 자유롭게 글을 남겨보세요!

챌린지 기간 동안에 참여자분들을 위한 Communication 공간 입니다.

Announcements : 대회 기간에 중요한 일정이나 공지를 운영진측에서 올릴 때 쓰는 카테고리 입니다.
- RL Korea Facebook에도 같은 공지가 게시되오니, Facebook 알림으로도 소식을 받아보세요!
General : 대회에 참가한 모든 분들과 인사를 나눠주세요! 네트워킹도 편하게 즐겨주시는 라운지같은 공간입니다.
Ideas : 재밌는 생각이나 신기한 참고 레퍼런스를 공유하고 싶으신가요? 여기를 이용해주세요!

🏡 Challenge Environment

본 챌린지에서 사용하는 환경은 RL Village 입니다.

Unity Engine을 사용하여 제작되었으며 아래 링크에서 자세한 정보를 보실 수 있습니다.

[11월 1일 공개] 📥 RL Village 환경 Download

RL Village를 다운받으실 때는 참가자 여러분들의 OS에 맞는 파일을 다운받아주세요.

리눅스 서버에서 환경을 실행하시는 경우 리눅스 빌드를 이용하시면서 그래픽 장치를 연결해주시거나 xhost 등을 이용하여 원격 GUI를 사용해야합니다. 리눅스 서버 빌드를 사용하는 경우 렌더링이 안되는 관계로 ML-agents를 통해 이미지 데이터를 얻을 수 없어 이번 대회에서 제공하지 않습니다.

Mac 빌드 환경 파일이 업데이트 되었습니다. Mac 빌드 환경파일 관련 안내를 참고해주세요.

🚀 Let's START

2021 RL Korea Drone Delivery Challenge를 시작하기 위해서는 2 가지 방법으로 참여할 수 있습니다.

Python으로 직접 작성한 RL 알고리즘으로 참여하고 싶으신 분은 1️⃣을,

unity ml-agents 2.0에서 제공하는 알고리즘으로 참여하고 싶으신 분은 2️⃣를 참고해주세요.

모든 참가자 분들에게 공통된 사항은 ⏺으로 안내하겠습니다.

	참가방식	설명
1️⃣	python API	자신이 직접 python으로 작성한 RL 알고리즘을 이용하는 참가자
2️⃣	ml-agents 2.0	Unity ml-agents 2.0에서 제공하는 PPO, SAC 알고리즘을 이용하는 참가자
⏺	ALL	모든 참가자에게 해당하는 공통사항

👥 Operator(Contact)

대회 기간동안 문의사항은 Issues 안내를 참고하셔서 글을 써주시면 최대한 빠르게 답변드리도록 하겠습니다. 많은 분들이 궁금해하실 문의에 대해서는 챌린지 FAQ 에 정리해놓았습니다. 문의 전에 한번 확인해보시길 권장해드립니다.

이외에 대회 문의는 아래의 메일로 연락을 주시면 최대한 빠르게 답변해드리겠습니다.

📧 Contact: [email protected]

민규식, 이동민, 이정연, 이정우, 정규열, 차금강

💙 Support

Thanks to

2021_rlkr_drone_delivery_challenge_with_unity's People

Contributors

Stargazers

Watchers

Forkers

leejwuniverse sw6820 gmbdoc-review rheehot tomleelive yeonghujung solemin luke-hyungjin bic4907 dev-will409 jungpyo kooooo ramer-dev backgom2357 drone-oculus-won hyeongjunk05 cs20131516 ju-suk

2021_rlkr_drone_delivery_challenge_with_unity's Issues

[Submission문의] 제출시 채점 안되는 에러

팀명 : NewBe
문의자 : 임찬우

문의 내용

현재 aifactory에 제출을 하였고 성공이라고 표시가 됬습니다.
근데 반일정도 지났는데 아직 채점이 안되어서 문의드립니다

에러같은 경우는 처음 제출할때

2021-11-13 17:12:40:Authentication:WARNING: Authentication procedure not available.
2021-11-13 17:12:40:Authentication:WARNING: Skip the submit key validity check.
2021-11-13 17:12:43:AFAPIClient:INFO: Submission failed.
2021-11-13 17:12:43:AFAPIClient:INFO: ==========response from the submission server==========
2021-11-13 17:12:43:AFAPIClient:INFO: <Response [500]>
2021-11-13 17:12:43:AFAPIClient:INFO: ==========response from the submission server==========
2021-11-13 17:12:43:AFAPIClient:ERROR: API call Failed.

라는 로그가 떴고, 이후 1분정도후 다시 같은 명령어로 쳤을때

2021-11-13 17:13:32:Authentication:INFO: Response from auth server: KEY_VALID
2021-11-13 17:13:32:Authentication:INFO: Submit key validity checked.
2021-11-13 17:13:38:AFAPIClient:INFO: Submission completed. Please check the leader-board for scoring result.
2021-11-13 17:13:38:AFAPIClient:INFO: You have submitted for 7 times.
2021-11-13 17:13:38:AFAPIClient:INFO: The model name was recorded as NewBe_20211113_081339.
2021-11-13 17:13:38:AFAPIClient:INFO: Other messages from the submission server: This is an alpha-version of the submission API of AI Factory Platform. 
Your answer might not be assessed. 
Please use our website instead if you are not specifically instructed to..
2021-11-13 17:13:38:AFAPIClient:INFO: API call was successful.

로그가 뜨며 정상 제출 되었습니다.

++추가로 로그에 제출횟수가 7회라고 나와있는데 제출 실패를 했을때도 제출횟수에 들어가는지 궁금합니다.
성공시만 제출횟수에 들어가는걸로 알고있는데 맞나요?

[Submission문의] TOO_MANY_TRIALS 이슈

팀명: S1
문의자: 송주환

문의 내용
안녕하세요. 제출 과정에서 다음과 같은 에러 메세지를 확인하였습니다.
하루 동안 3회 제출하였기 때문에 특별히 제출 횟수 규정을 위반하지는 않은 것 같습니다.
원인이 무엇인지 확인 부탁드리겠습니다.

Authentication:INFO: Response from auth server: KEY_VALID
Authentication:INFO: Submit key validity checked.
AFAPIClient:INFO: Submission failed.
AFAPIClient:INFO: ==========response from the submission server==========
AFAPIClient:INFO: <Response [200]>
AFAPIClient:INFO: TOO_MANY_TRIALS
AFAPIClient:INFO: ==========response from the submission server==========
AFAPIClient:ERROR: API call Failed.

[Submission문의] This type of file is not acceptable for now 오류 관련

팀명 : 드론코딩팀
문의자 : 이정표 [email protected]

문의 내용
(문의하시는 내용을 적어주세요! 자세할 수록 피드백을 드리기 좋습니다. 빠른 시간내에 답변드리겠습니다😀)

ml-agents로 학습하여 도출된 onnx 파일을 제출하고자 하는데, 다음과 같은 오류가 발생합니다.
11/14 23: 50 부터 제출시도를 했고, 현재까지 동일한 이슈로 Fail이 발생하는데, 원인을 모르겠습니다.

조언 부탁드립니다.

2021-11-15 08:44:23:Authentication:INFO: Response from auth server: KEY_VALID
2021-11-15 08:44:23:Authentication:INFO: Submit key validity checked.
2021-11-15 08:44:24:AFAPIClient:INFO: This type of file is not acceptable for now.
2021-11-15 08:44:24:AFAPIClient:INFO: Please check which type of file you have to use for this task.
2021-11-15 08:44:24:AFAPIClient:ERROR: API call Failed.

[Submission문의] 리더보드 점수 0점 관련

팀명 : pnltoen
문의자 : 박우진

문의 내용

Docs의 "학습된 모델 제출하기" 부분을 보고 AIFactory에서 제출완료하였습니다.
mlagents로 진행하여 .onnx 확장자를 제출하였고 "API call was successful" 또한 확인할 수 있었습니다.
저희 팀에서 제출전에 예상하기로는 고득점을 예상하였는데, 제출 후 0점으로 기입되어서 질문드리게 되었습니다.

챕쳐한 로그파일입니다! 바쁘시겠지만 해결방안을 공유해주신다면 정말 감사하겠습니다!

[Submission문의] Grading Fail

팀명 : S1
문의자 : 송주환

문의 내용
안녕하세요, 학습된 onnx 파일을 제출되었는데, 제출 이력은 있으나 다음과 같이 Grading이 실패한 상태입니다.
원인이 무엇인지 확인 부탁드립니다.

[환경파일문의] Describe Your Issue

팀명 : 강알못
문의자 : cheesama

문의 내용
(문의하시는 내용을 적어주세요! 자세할 수록 피드백을 드리기 좋습니다. 빠른 시간내에 답변드리겠습니다😀)
MAC 환경에서 환경 파일 받아 진행을 하려는데 제대로 로드되지 않습니다. 첨부파일에 나와있는 화면대로 나와있고 진행이 되지 않습니다.
parameters.json 파일에도 값 제대로 설정된 상태입니다. 확인 부탁드릴게요^^

[Submission문의] 11월 26일 시점의 TOO_MANY_TRIALS 이슈

팀명 : S1
문의자 : 송주환

문의 내용
안녕하세요 ml-agents 모델을 제출하는데 TOO_MANY_TRIALS 에러로 인해 제출이 되지 않는 상황입니다.
11월 26일 21시를 넘겨서 제출을 시도하였기 때문에 특별히 제출 횟수 제한을 넘기지는 않은 것 같은데요.
참고하시라고 지난 이틀 간의 제출 시간 기록을 첨부해드립니다.

오늘 순위 변동이 있었기 때문에 모델을 빨리 검증해보고 싶은 관계로 늦은 시간이지만 확인 부탁드립니다!

[기타문의] 파이썬 코드를 이용해 학습 시 model의 input 변형 문의

팀명 : 넥서스
문의자 : 전민기

문의 내용

안녕하세요
파이썬 코드를 이용해 학습을 진행하는 경우 모델의 input을 임의로 변경이 가능한지 알고 싶습니다!
지금 코드를 이용한 submission 방법을 확인해보면 model을 load하고 policy를 정의하는 부분만 존재 하는데 input을 다른형태로 사용하고 싶은 경우에는 이 부분이 아닌 환경에서 step을 하고 나오는 state에서 변경을 해야하는데 코드 제출 부분에서는 해당 부분은 제출 하지 않기 때문에 모델의 input의 경우에는 정해진 형태만 사용해야 하는지 알고 싶습니다!