Release 2021.04.22

[documentation] Fix typos

[ci] Disable fail-fast

[lazy_extractor] Do not load plugins

Update to ytdl-commit-7e8b3f9

[youtube] Remove unused code
https://github.com/ytdl-org/youtube-dl/commit/7e8b3f9439ebefb3a3a4e5da9c0bd2b595976438

[mildom] Remove proxy (#260)

Closes #251
Makes 2cff49599769dcc131c385cbc24bab35d0b182ad, ab406a1c0e7f0afde7e80818c0159bfa2847481f, #252 obsolete

Authored by: fstirlitz

[BilibiliChannel] Fix pagination
Closes #222

https://github.com/nao20010128nao/ytdl-patched/commit/ccca21d7f57f1330a205f07d369e31883ba006c2
Coauthored by: nao20010128nao, pukkandan

[documentation] Clarify which deprecated options still work

Improve output template (see desc)
* Objects can be traversed like `%(field.key1.key2)s`
* A number can be added to the field as `%(field+n)s`
* Deprecates `--autonumber-start`

Add option `--skip-playlist-after-errors`
Allows to skip the rest of a playlist after a given number of errors are encountered

[go] Fix `_VALID_URL`
Closes #255

[mildom] Warn user of proxy

[MetadataFromField] Improve regex and add tests

[youtube] Bugfix in `_extract_ytcfg`

Improve --sub-langs (see desc)
* Treat `--sub-langs` entries as regex
* `all` can be used to refer to all the subtitles
* the language code can be prefixed with `-` to exclude it
* Deprecates `--all-subs`
Closes #253

[mildom:user:vod] Download only necessary amount of pages

[mildom:vod] Remove proxy
* Proxy is needed only for live videos

[mildom] Change proxy
Related: #251
Closes #252

[twitcasting] Fix extractor
* `Origin: https://twitcasting.tv` must be sent when requesting the webpage. Otherwise the extracted `m3u8` will always give a `502`
* Fix regex for when `data-movie-playlist` is a dict containing the needed list
* media initialization is fully supported; so change downloader to native

Closes #220

[rai] Add support for http formats (#208)

Authored by: nixxo

Improve the yt-dlp.sh script (#248)

* Quote the `$0` variable to correctly handle spaces
* Change the shebang line to `/bin/sh` to avoid unnecessarily depending on bash
* Use the `exec` command to avoid having the shell process linger unnecessarily
* Change the mode to make the script directly executable

Authored by: fstirlitz

:ci skip all

Update to ytdl-commit-9f6c03

[cbsnews] Fix extraction for python <3.6
https://github.com/ytdl-org/youtube-dl/commit/9f6c03a00602eb1119e43a522cf50682f6d6a6dd

[youtube:tab] Reload with unavailable videos for all playlists

If the unavailable video is in a later page, the warning and button are not shown in the initial webpage
So we force all playlists' initial page to reload with the correct params

Add option `--ignore-no-formats-error`
* Ignores the "no video format" and similar errors
* Experimental - Some extractors may still throw these errors

Fix inconsistent use of `report_warning`

[downloader] Fix ffmpeg selection for m3u8_native

[youtube:tab] Show unavailable videos in playlists (#242)

Closes #231

Authored by: colethedj

Fix some linter and typos

[viu:ott] Fix extractor (see desc)
* add language_flag_id query param
* add support for premium account (untested since I dont have a premium account)
* support entire series

Code from:
https://github.com/blackjack4494/youtube-dlc/pull/211
https://github.com/ytdl-org/youtube-dl/pull/15182
https://github.com/ytdl-org/youtube-dl/pull/26775

Fixes:
https://github.com/yt-dlp/yt-dlp/issues/219
https://github.com/ytdl-org/youtube-dl/issues/27946
https://github.com/ytdl-org/youtube-dl/issues/27863
https://github.com/ytdl-org/youtube-dl/issues/27812
https://github.com/ytdl-org/youtube-dl/issues/27464
https://github.com/ytdl-org/youtube-dl/issues/26788
https://github.com/blackjack4494/yt-dlc/issues/136

Possibly also fixes (untested):
https://github.com/ytdl-org/youtube-dl/issues/16992
https://github.com/ytdl-org/youtube-dl/issues/26701

Co-authored by: lkho, pukkandan

[Exec] Ensure backward compatibility when the command contains `%`

[youtube] Standardize API calls for tabs, mixes and search (#245)

Authored by: colethedj

[youtube] Ignore invalid stretch ratio
Closes #244

[downloader] Fix downloader selection for m3u8
Bug introduced by: 52a8a1e1b93dbc88f0018d4842f1e90ba96e095f and a31953b0e69f710f737643cb36b0ca1caf69e04c

[TubiTv] Add TubiTvShowIE (#243)

Authored by: Ashish0804

[youtube] Improve channel syncid extraction to support ytcfg (#241)

Authored by: colethedj

Ensure `mergeall` selects best format when multistreams are disabled

[downloader] Fix external downloader selection for m3u8
Closes #239

[version] update

:ci skip all

Release 2021.04.11

[documentation] Improvements

Add option `--convert-thumbnails`
Closes: https://github.com/yt-dlp/yt-dlp/issues/99 https://github.com/yt-dlp/yt-dlp/issues/102

Allow running some `postprocessors` before actual download

[youtube] Parse API parameters from initial webpage (#230)

* Obtain innertube_context, api_key and x-goog-visitor-id from webpage
* Generalize the header & Innertube_context extraction across YouTube extractors

Related: https://github.com/ytdl-org/youtube-dl/commit/1b0a13f33cfb3644cc718d35951ea85bb1905459

Authored by: colethedj

[youtube] Fix thumbnail URL
Closes: https://github.com/yt-dlp/yt-dlp/issues/233 https://github.com/ytdl-org/youtube-dl/issues/28023

Pass any field to `--exec` using similar syntax to output template
Related: https://github.com/ytdl-org/youtube-dl/issues/28642

Fix `mergeall` when requested formats are unavailable

Update to ytdl-commit-4fb25ff

[maoritv] Add new extractor
https://github.com/ytdl-org/youtube-dl/commit/4fb25ff5a3be5206bb72e5c4046715b1529fb2c7

Except:
[vimeo] improve extraction https://github.com/ytdl-org/youtube-dl/commit/3ae9c0f410b1d4f63e8bada67dd62a8d2852be32
[youtube:tab] Pass innertube context... https://github.com/ytdl-org/youtube-dl/commit/1b0a13f33cfb3644cc718d35951ea85bb1905459

[downloaders] Fix API access
Bug introduced by: 52a8a1e1b93dbc88f0018d4842f1e90ba96e095f

Deprecate more options

* `--all-formats` = `-f all`
* `--include-ads` is not implemented

Fix default of `dynamic_mpd`

Option to choose different downloader for different protocols

* Renamed `--external-downloader-args` to `--downloader-args`
* Added `native` as an option for the downloader
* Use similar syntax to `--downloader-args` etc. Eg: `--downloader dash:native --downloader aria2c`
* Deprecated `--hls-prefer-native` and `--hls-prefer-ffmpeg` since the same can now be done with `--downloader "m3u8:native"` and `m3u8:ffmpeg` respectively
* Split `frag_urls` protocol into `m3u8_frag_urls` and `dash_frag_urls`
* Standardize shortening of protocol names with `downloader.shorten_protocol_name`

Improve argument parsing for `-P`, `-o`, `-S`

* `-P "subtitle,thumbnail:PATH"` is now possible. Similarly for `-o`
* `-S "fps,br" -S "res,codec"` is now interpreted as `-S res,codec,fps,br`. Previously, `-S fps,br` was ignored in this case.

Format selector `mergeall` to download and merge all formats

[youtube] Fix _extract_alerts

* Sometimes one warning is split between multiple runs
* Also simplified code

[nebula] Add extractor (watchnebula.com) (#122)

Authored by: hheimbuerger

[NFHSNetwork] Add extractor (#217)

Authored by: llacb47

[nitter] Fix extraction of reply tweets (#218)

And update instance list

Closes #215

Authored by: B0pol

[bilibili] Fix uploader
Related: https://github.com/yt-dlp/yt-dlp/issues/222

[youtube] Extract comments' approximate timestamp (#221)

Authored by: colethedj

[utils] Add `datetime_from_str` to parse relative time (#221)
and `datetime_add_months` to accurately add/subtract months

Authored by: colethedj

[nitter] Fix thumbnails (#216)

Authored by: B0pol

[DiscoveryPlusIndia] Add DiscoveryPlusIndiaShowIE (#213)

Co-authored-by: Ashish <redacted>
Co-authored-by: pukkandan <redacted>

Fix some `m3u8` not obeying `--allow-unplayable-formats`

[version] update

:ci skip all

Release 2021.04.03

Update to ytdl-commit-654b4f4

[youtube] prioritize information from YoutubeIE for playlist entries
https://github.com/ytdl-org/youtube-dl/commit/654b4f4ff2718f38b3182c1188c5d569c14cc70a

[YouTube] Show premium state in `availability` (#209)

Authored by colethedj

[documentation] Improve `--parse-metadata` documentation

Ability to set a specific field in the file's metadata

Eg: `--parse-metadata "description:(?s)(?P<meta_comment>.+)"`
sets the "comment" field using `description`

[ViewSource] Add extractor to handle `view-source:`

[mildom] Update extractor to comply with current proxy (#212)

Authored by nao20010128nao

[DiscoveryPlus] Add discoveryplus.in (#203)

Closes #201

Ability to select nth best format
Eg: -f `bv*.2`

* Also cleaned up the related format selection code

[generic] Detect Invidious' link element (Closes #195)

[ard:mediathek] Fix video id extraction (Closes #202)

Fix some typos and linter

[sponskrub] Run before embedding thumbnail
Workaround for https://github.com/faissaloo/SponSkrub/issues/29
Closes https://github.com/yt-dlp/yt-dlp/issues/204

Update to ytdl v2021-04-01
https://github.com/ytdl-org/youtube-dl/commit/14f29f087e6097feb46bdb84878924bc410a57eb

Closes #205

[la7] Add podcasts and podcast playlists (#198)

Authored by: nixxo

[version] update

Release 2021.03.24.1

Revert commit 8562218

[ard] improve clip id extraction
https://github.com/ytdl-org/youtube-dl/commit/8562218350a79d4709da8593bb0c538aa0824acf

This was merged incorrectly

Release 2021.03.24

Update to ytdl-commit-8562218

[ard] improve clip id extraction
https://github.com/ytdl-org/youtube-dl/commit/8562218350a79d4709da8593bb0c538aa0824acf

Parse metadata from multiple fields

Closes #196

[linuxacadamy] Fix login

Ability to load playlist infojson

* If `--no-clean-infojson` is given, the video ids are saved/loaded from in the infojson along with their playlist index
* If a video entry that was not saved is requested, we fallback to using `webpage_url` to re-extract the entries

Related: https://github.com/yt-dlp/yt-dlp/issues/190#issuecomment-804921024

Write current epoch to infojson when using `--no-clean-infojson`
Closes #191

[youtube_live_chat] fix bug when trying to set cookies
Closes #194

[niconico] Fix for when logged in

Related: https://github.com/yt-dlp/yt-dlp/issues/171#issuecomment-803692716
Co-authored by: CXwudi, xtkoba

[version] update

Release 2021.03.21

Update to ytdl-commit-7e79ba7

https://github.com/ytdl-org/youtube-dl/commit/7e79ba7dd6e6649dd2ce3a74004b2044f2182881
[vimeo:album] Fix extraction for albums with number of videos multiple to page size

[youtube] Show if video is `private`, `unlisted` etc in new field `availability` (#188)
Closes: #185, https://github.com/ytdl-org/youtube-dl/issues/25631
Authored by: colethedj, pukkandan

[linuxacadamy] Improve regex

TODO: We need to make a more robust standard regex for fetching js objects from html

[nbc] Improve metadata extraction (#187)

Authored by: 2ShedsJackson

[amcnetworks] Fix extractor (#179)

* Prefer use of manifest based on `releasePid` since the one based on `videoPid` may have Fairplay
* Additional thumbnail images were added
* Don't add `season_number` and `series` to `title`
* `series` is now set to `None` rather than "_" when empty
* fix bug with age limit

Authored by: 2ShedsJackson

[niconico] Add user extractor
Co-authored by: animelover1984

[bilibili] Add anthology support
Closes: #118
Co-authored by: animelover1984

More consistent warning messages (#173)
Co-authored by: Damiano Amatruda <redacted>