메모장

-. EBS Internet radio는 HLS (HTTP Live Streaming) 임
   : [참고] https://ompanggin.tistory.com/26

-. 위의 link 에서 Update 함.
    : EBS 주소를 on air 주소로 변경함
    : bydu cloud에 backup 함. (설정 필요)

#!/bin/bash
# v2 : update address. streaming rtmp -> HSL
# internet radio 18:20 Easy, 18:40 Power
# RADIO_ADDR="http://bandibook.ebs.co.kr/bandibook/live_m4a/playlist.m3u8"
# FM 07:20 Easy, 07:40 Power

RADIO_ADDR="http://ebsonairiosaod.ebs.co.kr/fmradiobandiaod/bandiappaac/playlist.m3u8"

PROGRAM_NAME=$1
RECORD_MINS=$(($2 * 60))
DEST_DIR=$3

REC_DATE=`date +%Y%m%d-%H%M`

MP3_FILE_NAME=$PROGRAM_NAME"_"$REC_DATE.mp3

ffmpeg -t $RECORD_MINS -y -i $RADIO_ADDR $MP3_FILE_NAME &>/dev/null

mkdir -p $DEST_DIR

mv $MP3_FILE_NAME $DEST_DIR

#if [ $1 = "EasyEnglish" ] 
#then
#	nohup /usr/local/bin/bypy upload $DEST_DIR/$MP3_FILE_NAME /EBS.Easy.English&
#fi

#if [ $1 = "PowerEnglish" ] 
#then
#	nohup /usr/local/bin/bypy upload $DEST_DIR/$MP3_FILE_NAME /EBS.Power.English&
#fi

(21.05.22)
다음 사이트의 변경되어서 정상작동하지 않습니다. 
Kodi v19 대응 python 버전으로 변경 중입니다.    

--------
아래의 링크에서 update 함

https://ompanggin.tistory.com/29

[ver 0.4]  [bug fix] 검색결과가 영문 제목이 안나오는 경우 (예, 동네사람들) 검색 실패를 수정 (*source 버전을 배포 버전과 맞춤.)

- procedure 

• ver 0.3은  <title>에 “한글제목(영문제목)” 으로 나타내려고 “한글제목, movieID, 영문제목, year”를 한꺼번에 검색

<RegExp input="$$1" output="&lt;entity&gt;&lt;title&gt;\2(\3)&lt;/title&gt;&lt;year&gt;\4&lt;/year&gt;&lt;id&gt;\1&lt;/id&gt;&lt;url cache=&quot;daum-movie-\1.json&quot;&gt;http://movie.daum.net/data/movie/movie_info/detail.json?movieId=\1&lt;/url&gt;&lt;/entity&gt;" dest="6">
	<expression clean=“1">movie\.daum\.net[^\?]*\?movieId=(\d*)[^\?]*tit_name&quot;&gt;&lt;b&gt;(.[^"]*)&lt;/b&gt;[^\?]*tit_sub&quot;&gt;(.[^"]*),[^\?]*(\d{4})</expression>
</RegExp>

• “동네사람들"과 같이 검색결과에 영문 제목이 없는 경우에 (.[^”]*)이 매칭이 안되어 전체 검색 실패함. (* suggest page 는 json 형태로 원래 영문 제목이 없음)
• ver 0.4는 <entity> 항목을 모두 별도로 검색하여 한개가 매칭이 안되더라도 나머지로 검색할 수 있도록 수정함.

<RegExp conditional="OrigTitleInSrchResult" input="$$6" output="&lt;entity&gt;\1&lt;/entity&gt;" dest="5">
	<RegExp input="$$7" output="&lt;title&gt;\1&lt;/title&gt;" dest="6">
		<RegExp input="$$1" output="\1" dest="7">
			<expression clean="1">movie\.daum\.net.*tit_name&quot;&gt;&lt;b&gt;(.[^"]*)&lt;/b&gt;</expression>
		</RegExp>
		<RegExp input="$$1" output="(\1)" dest="7+">
			<expression clean="1">movie\.daum\.net.*tit_sub&quot;&gt;(.[^"]*),</expression>
		</RegExp>
	<expression noclean="1" />
	</RegExp>
	<RegExp input="$$1" output="&lt;id&gt;\1&lt;/id&gt;&lt;url cache=&quot;daum-movie-\1.json&quot;&gt;http://movie.daum.net/data/movie/movie_info/detail.json?movieId=\1&lt;/url&gt;" dest="6+">
		<expression clean="1">movie\.daum\.net[^\?]*\?movieId=(\d*)</expression>
	</RegExp>
	<RegExp input="$$1" output="&lt;year&gt;\1&lt;/year&gt;" dest="6+">
		<expression clean="1">movie\.daum\.net.*tit_sub&quot;&gt;[^"]*(\d{4})</expression>
	</RegExp>
	<expression noclean="1" />
</RegExp>

우선 아래 링크의 scraper 작성 시 TODO로 남겨 놓았던 항목들을 작성함. https://ompanggin.tistory.com/28

[ ver 0.2 ] CreateSearchUrl : 한글, 숫자 제목만 뽑아서 search keywords로

- 파일명이 “한글 제목.2019.english.title”로 되어 있을때 “한글 제목 2019” 로 검색하도록  함

- Procedure 

• 파일명 : “한글 제목.2019.english.title.FHDRip.H264.AAC-NonDRM.mp4” 이면 
• kodi : “한글 제목 2019 english title” 정도로 정리해서 리턴함.
  : https://kodi.wiki/view/Advancedsettings.xml#cleanstrings 여기서 설정 가능함.
• scrapper : 파일명을 받으면 정규식으로 앞에 나오는 언어의 제목만 뽑아줌.
  : 이때 urlencoding하여 보내주므로 이에 맞게 정규식 적용함. (utf-8인 경우 %e.(?:%\w\w){2} 가 한글)
  : 예, 파일명이 "한글제목.english.title" 라면 kodi는 urlencode 하여 %ed%95%9c%ea%b8%80%ec%a0%9c%eb%aa%a9.english.title) 리턴
  : python 정규식을 따르고 ((?=.*%e.(?:%\w\w){2})(?:%e.(?:%\w\w){2}|\d|[._\-() ]|%20|%5b|%5d)*(?:%e.(?:%\w\w){2})|(?:\w|[._\-() ]|%20|%5b|%5d)*\w) 적용하면
  : “한글제목”만 <CreateSearchUrl> 에 검색어로 추가(english.title.한글제목 의 경우 “english.title”이 선택)
• 잘 검색이 안될 때는 “한글제목2019” 로 개봉 연도를 붙여서 검색하면 잘됨.

[ver 0.3] daum search를 movie 한정, movie 페이지 검색의 suggest 활용

- 다음 movie의 suggest search를 활용하여 영화 한정하여 검색하게 함.
   : 제목을 자세히 썼는데 틀리면 검색안됨. 간단히 써서 리스트에서 선택함.
   : 디렉토리 검색할때는 첫번째 리스트 된 것만 적용하여 오류가 많음.
   : 디렉토리는 search 잘 안찾아지는 페이지는 suggest 로 함.

- Procedure

• search page 변경 : 기존 http://search.daum.net/search?w=tot&amp;q=\1
  변경 https://suggest-bar.daum.net/suggest?id=movie&amp;cate=movie&amp;multiple=1&amp;mod=json&amp;code=utf_in_out&amp;q=\1
• 검색어는 ver 0.2에서 앞에 나오는 언어로 선택됨. suggest 검색은 연도가 들어갈 경우 잘 검색이 안되어 연도제외.
• kodi 리턴하는 json은 …  "movie" : [ “제목|movieID|poster url|개봉연도|검색일치율(?)”, “…" ] 로 되어 있음.
• 정규식은  json 의 “movie” … 부분을 따다가 제목, movieID, 개봉연도를 parsing 함.
  <RegExp input="$$6" output="<entity><title>\1</title><year>\4</year><id>\2</id><url cache="daum-movie-\2.json">http://movie.daum.net/data/movie/movie_info/detail.json?movieId=\2</url></entity>" dest="5">
      <RegExp input="$$1" output="\1" dest=“6">
            <expression>.*"movie".*?:.*?\[(.*?)\]</expression>
      </RegExp>
      <expression repeat="yes" clean="1">"(.*?)\|(\d+)\|(.*?)\|(\d+)\|.*?"</expression>
  </RegExp>

[ ver 0.4 ] suggest page search 를 옵션화 + zip 파일 생성

- Procedure

• addon.xml : bug fix <description lang=“kr”> -> <description lang=“ko”>
  current version에 대한 간단한 설명
• resource/settings.xml : Search Suggest 추가
  <setting label="30008" type="bool" id="SearchSuggest" default="false"/>
• resource/language/Korean/strings.xml : 항목 이름 추가
  <string id="30008">Daum Suggest 사용</string>
• <RegExp 에 conditional 추가. 이외의 영역에 추가하면 작동안함.
  <RegExp conditional=“!SearchSuggest" …. search page 검색 …
  <RegExp conditional=“SearchSuggest"  …. suggest page 검색 …

- zip 파일로 설치시 addon 설치 에러나면 재부팅하면 정상 설치됨 . (OSX에서 압축한 것도 정상설치)

[TODO] Daum TV Scrapper

- 기존 소스의 살아있는 link 가 없고 처리해야할 항목도 많아서 시간이 좀 걸리지만... 

(혼란을 막기 위해 최신 version 만 남기고  지난 version은 삭제함.)