[embedthumbnail] Correctly escape filename

Closes #352
The approach in [1] is faulty as can be seen in the test cases
1. https://github.com/ytdl-org/youtube-dl/commit/bff857a8af696e701482208617bf0b7564951326

[embedthumbnail] Embed if any thumbnail was downloaded, not just the best

[youtube:playlist] fix bug

Remove `None` values from `info.json`

[zee5] Fix m3u8 formats extension

Write messages to `stderr` when both `quiet` and `verbose`

Pre-check archive and filters during playlist extraction

This makes `--break-on-existing` much faster.
It also helps `--break-on-reject` if the playlist extractor can extract the relevant fields

Refactor `__process_playlist` using `LazyList`

[utils] Add `__getitem__` for `PagedList`

[utils] Add `LazyList`

[cleanup] `_match_entry`

[patreon] Support vimeo embeds (#349)

Authored by: rhsmachine

[extractor] Always prefer native hls downloader by default

When the manifest is not downloadable by native downloader, it already is able to detect it and switch to `ffmpeg`. So there doesn't seem to be a reason anymore to use ffmpeg as the preferred downloader

[update] Replace self without launching a subprocess in windows

Closes: #335, https://github.com/ytdl-org/youtube-dl/issues/28488, https://github.com/ytdl-org/youtube-dl/issues/5810, https://github.com/ytdl-org/youtube-dl/issues/5994
In windows, a running executable cannot be replaced. So, the old updater worked by launching a batch script and then exiting, so that the batch script can replace the executable. However, this caused the above-mentioned issues.

The new method takes advantage of the fact that while the executable cannot be replaced or deleted, it can still be renamed. The current update process on windows is as follows:
1. Delete `yt-dlp.exe.old` if it exists
2. Download the new version as `yt-dlp.exe.new`
3. Rename the running exe to `yt-dlp.exe.old`
4. Rename `yt-dlp.exe.new` to `yt-dlp.exe`
5. Open a shell that deletes `yt-dlp.exe.old` and terminate

While we still use a subprocess, the actual update is already done before the app terminates and the batch script does not print anything to stdout/stderr. So this solves all the above issues

[cleanup] Refactor updater

The updater now uses `.update.run_update` and not `.update.update_self`.
Although I don't expect anyone to be using the updater via API, a wrapper `update_self` is provided for compatibility just in case

Handle Basic Auth `user:pass` in URLs

Fixes https://github.com/ytdl-org/youtube-dl/issues/20258, https://github.com/ytdl-org/youtube-dl/issues/26211
Authored by: hhirtz, pukkandan

[ard] Allow URLs without `-` before id
https://github.com/ytdl-org/youtube-dl/pull/29091

Authored by: olifre

[extractor] Skip subtitles without URI in m3u8 manifests
Closes #339

Authored by: hheimbuerger

[embedthumbnail] Embed in `mp4`/`m4a` using mutagen

Code from: https://github.com/ytdl-org/youtube-dl/pull/23525
Co-authored by: tripulse , pukkandan

[Sonyliv] Add subtitle support (#342)

Authored by: Ashish0804

Sanitize and sort playlist thumbnails
Closes #341

[ShemarooMe] Add extractor (#332)

Closes #307
Co-authored-by: Ashish0804, pukkandan

[ffmpeg] Download and merge in a single step if possible

[youtube] Fix bug where not all hls formats were extracted
Bug introduced in 9297939ec358f24678b566b2bd2211c51f9f99ed

[SonyLIV] Add SonyLIVSeriesIE (#331)

Authored by: Ashish0804

[telemundo] add extractor (#327)

Closes #284
Authored by: king-millez

[cleanup] Refactor ffmpeg convertors

[videoconvertor] Generalize with remuxer and allow conditional recoding

[ThumbnailsConvertor] Support conversion to `png` and make it the default (#333)

PNG, being a lossless format, should be a better default here compared to JPG since we won't be compressing to a lossy format and losing some of the original image data
PNG is also supported for embedding in all the formats similar to JPEG

Authored by: louie-github

[youtube] `/live` URLs should raise error if channel is not live
Fixes: https://github.com/ytdl-org/youtube-dl/issues/29090

[version] update
:ci skip all

[build] Fix `pefile` version for x86
Authored by: shirt-dev

Release 2021.05.20

Update to ytdl-commit-dfbbe29

[redbulltv] fix embed data extraction
https://github.com/ytdl-org/youtube-dl/commit/dfbbe2902fc67f0f93ee47a8077c148055c67a9b

[parlview] Add extractor (#322)

Authored by: king-millez

[cleanup] See desc
* Remove struct from `embedthumbnail`
* Use bullet lists in readme where numbered list don't make sense
* Fix error introduced in 9c2b75b5616f058c3970e54c664e9543f86b9f0c when `ie_result` is `None`

[embedthumbnail] Add `flac` support and refactor `mutagen` code

https://github.com/ytdl-org/youtube-dl/pull/28894, https://github.com/ytdl-org/youtube-dl/pull/24310
Authored by: tripulse

[options] Alias `--write-comments`, `--no-write-comments`
Closes: #264

[youtube] Add `html5=1` param to `get_video_info` page requests (#329)
Workaround for #319, https://github.com/ytdl-org/youtube-dl/issues/29086
Authored by: colethedj

[youtube] Better message when login required

[audius:artist] Add extractor (#323)

Authored by: king-millez

[youtube] Sort audio-only formats correctly
Closes #317

Field `additional_urls` to download additional videos from metadata

[downloader] Fix `write_debug`

[test] Fix `test_YoutubeDL.TestYoutubeDL`
Test `test_ignoreerrors_for_playlist_with_url_transparent_iterable_entries` was broken due to `__original_infodict` being added to the dict

Ensure `post_extract` and `pre_process` only run once
Previously, they ran once for each format requested

[cleanup] linter, code formatting and readme

[tenplay] Fix extractor (#314)

Authored by: king-millez

[youtube] Always extract `maxresdefault` thumbnail
Fixes: https://github.com/ytdl-org/youtube-dl/issues/29049

[youtube:tab] Support youtube music `MP` pages

[youtube:tab] Redirect `UC` channels that doesn't have a `videos` tab

Many topic URLs don't have a videos tab, but has an equivalent `UU` playlist.
If there is no playlist, fallback to using channel page

[youtube:tab] Support youtube music `VL` and `browse` pages

[youtube:tab] Support channel search
Fixes: https://github.com/ytdl-org/youtube-dl/issues/29071

[cleanup] youtube tests

[youtube:tab] Show alerts only from the final webpage

[test:download] Only extract enough videos for `playlist_mincount`

Add `pl_thumbnail` outtmpl key for playlist thumbnails
This should have been implemented in 681de68e9df67f07dde3fbbc6cb2e65a78b2bb16, but I forgot

[extractor] Add `write_debug` and `get_param`

Write thumbnail of playlist

Related: https://github.com/ytdl-org/youtube-dl/pull/28872, https://github.com/ytdl-org/youtube-dl/pull/28860
This is slightly different from the above PRs in that this downloads the playlist's thumbnail instead of the uploader's profile picture. But for youtube channel URLs these are the same

Fix bug in listing subtitles
Bug introduced by: 2412044c90ef3d122eab0b195aaa0f5b2ab27394

[Youtube] Extract more formats for `music.youtube` URLs (#311)

Based on: https://github.com/ytdl-org/youtube-dl/pull/28778, https://github.com/ytdl-org/youtube-dl/pull/26160

Co-authored-by: craftingmod, colethedj, pukkandan

[youtube] Add language names

Co-authored by: nixxo, tpikonen
Based on: https://github.com/ytdl-org/youtube-dl/pull/26112
Closes: #310

Add field `name` for subtitles

Co-authored by: pukkandan, tpikonen

Based on: #310, https://github.com/ytdl-org/youtube-dl/pull/26112

[youtube] multiple subtitles in same language

Fixes: https://github.com/ytdl-org/youtube-dl/issues/21164
Related: #310, https://github.com/ytdl-org/youtube-dl/pull/26112

Fix `--check-formats` when there is network error

[compat] Fix py2

[youtube] Extract audio language

Add option `--print`

Deprecates: `--get-description`, `--get-duration`, `--get-filename`, `--get-format`, `--get-id`, `--get-thumbnail`, `--get-title`, `--get-url`
Closes #295

[options] Refactor callbacks

Standardize `write_debug`

[cleanup] Fix typos

[common] bugfix for when `compat_opts` is not given

[rmcdecouverte] Generalize `_VALID_URL`
Closes #291

Add compat-option `no-attach-infojson`

[version] update :ci skip all

Release 2021.05.11
* and some documentation improvements

[generic] Respect the encoding in manifest

Option `--compat-options` to revert some of yt-dlp's changes
* Deprecates `--list-formats-as-table`, `--list-formats-old`

Deprecate support for python versions < 3.6
Closes #267

Remove `-l`, `-t`, `-A` completely and disable `--auto-number`, `--title`, `--literal`, `--id`

[Plugins] Prioritize plugins over standard extractors
and prevent plugins from overwriting the standard extractor classes

Closes #304

[fragment] Make sure first segment is not skipped

Update to ytdl-commit-a726009

[blinkx] Remove extractor
https://github.com/ytdl-org/youtube-dl/commit/a7260099873acc6dc7d76cafad2f6b139087afd0

Fix `playlist_index` and add `playlist_autonumber` (#302)

Now `playlist_index` is always the position of the video in the actual playlist and `playlist_autonumber` is the position of the item in the playlist queue

Add experimental option `--check-formats` to test the URLs before format selection

Improve output template internal formatting
* Allow slicing lists/strings using `field.start:end:step`
* A field can also be used as offset like `field1+num+field2`
* A default value can be given using `field|default`
* Capture all format strings and set it to `None` if invalid. This prevents invalid fields from causing errors

[plutotv] Fix format extraction for some urls
* And fallback to the first urls if ad-free urls can't be found
Closes #299

[plutotv] Extract subtitles from manifests

[SonyLiv] Fix `title` and `series` extraction (#301)

Authored by: Ashish0804

[downloader] Fix `quiet` and `to_stderr`

[utils] Add `network_exceptions`

[fragment] Ensure the file is closed on error

[blinkx] Minor fix
Fixes: https://github.com/ytdl-org/youtube-dl/issues/28941

[embedthumbnail] Fix bug where jpeg thumbnails were converted again
Closes #297

Fix number of digits in `%(playlist_index)s`

When used with `--playlist-(items|start|end)`, the number of digits should depend on the last index in the playlist, not number of items

Move option warnings to `YoutubeDL`
Previously, these warnings did not obey `--no-warnings` and did not output colors

Fix `preload_download_archive` writing verbose message to `stdout`
* And move it after all deprecated warnings

[zee5] Fix py2 compatibility

[whowatch] Add extractor #292

closes #223

Authored by: nao20010128nao
Modified from: https://github.com/nao20010128nao/ytdl-patched/blob/9e4a0e061a558cdb05a618e27f47ca0ac56ece94/youtube_dl/extractor/whowatch.py

[aria2c] Fix whitespace being stripped off
Closes #276