2014-01-30 15:48:00 -05:00
import re
2024-06-11 19:09:58 -04:00
import urllib . parse
2014-01-30 15:48:00 -05:00
from . common import InfoExtractor
2014-02-10 09:07:41 -05:00
from . . utils import (
2016-05-22 17:44:04 -04:00
ExtractorError ,
2024-05-26 15:27:21 -04:00
determine_ext ,
2014-02-10 09:07:41 -05:00
int_or_none ,
2016-05-22 17:44:04 -04:00
parse_iso8601 ,
2015-06-17 10:28:47 -04:00
remove_end ,
2014-02-10 09:07:41 -05:00
)
2014-01-30 15:48:00 -05:00
class LifeNewsIE ( InfoExtractor ) :
2016-05-22 18:00:08 -04:00
IE_NAME = ' life '
IE_DESC = ' Life.ru '
_VALID_URL = r ' https?://life \ .ru/t/[^/]+/(?P<id> \ d+) '
2014-02-10 09:07:41 -05:00
2015-05-03 13:24:19 -04:00
_TESTS = [ {
2016-03-01 11:59:11 -05:00
# single video embedded via video/source
2016-05-22 18:00:08 -04:00
' url ' : ' https://life.ru/t/новости/98736 ' ,
2016-03-01 11:59:11 -05:00
' md5 ' : ' 77c95eaefaca216e32a76a343ad89d23 ' ,
2014-01-30 15:48:00 -05:00
' info_dict ' : {
2016-03-01 11:59:11 -05:00
' id ' : ' 98736 ' ,
2014-02-10 09:07:41 -05:00
' ext ' : ' mp4 ' ,
2016-03-01 11:59:11 -05:00
' title ' : ' Мужчина нашел дома архив оборонного завода ' ,
' description ' : ' md5:3b06b1b39b5e2bea548e403d99b8bf26 ' ,
2016-05-22 17:44:04 -04:00
' timestamp ' : 1344154740 ,
2016-03-01 11:59:11 -05:00
' upload_date ' : ' 20120805 ' ,
2016-05-22 17:44:04 -04:00
' view_count ' : int ,
2024-06-11 19:09:58 -04:00
} ,
2015-05-03 13:24:19 -04:00
} , {
2016-03-01 11:59:11 -05:00
# single video embedded via iframe
2016-05-22 18:00:08 -04:00
' url ' : ' https://life.ru/t/новости/152125 ' ,
2015-05-03 13:24:19 -04:00
' md5 ' : ' 77d19a6f0886cd76bdbf44b4d971a273 ' ,
' info_dict ' : {
' id ' : ' 152125 ' ,
' ext ' : ' mp4 ' ,
' title ' : ' В Сети появилось видео захвата «Правым сектором» колхозных полей ' ,
' description ' : ' Жители двух поселков Днепропетровской области не простили радикалам угрозу лишения плодородных земель и пошли в лобовую. ' ,
2016-05-22 17:44:04 -04:00
' timestamp ' : 1427961840 ,
2015-05-03 13:24:19 -04:00
' upload_date ' : ' 20150402 ' ,
2016-05-22 17:44:04 -04:00
' view_count ' : int ,
2024-06-11 19:09:58 -04:00
} ,
2015-05-05 11:39:54 -04:00
} , {
2016-03-01 11:59:11 -05:00
# two videos embedded via iframe
2016-05-22 18:00:08 -04:00
' url ' : ' https://life.ru/t/новости/153461 ' ,
2015-05-05 11:39:54 -04:00
' info_dict ' : {
' id ' : ' 153461 ' ,
' title ' : ' В Москве спасли потерявшегося медвежонка, который спрятался на дереве' ,
' description ' : ' Маленький хищник не смог найти дорогу домой и обрел временное убежище на тополе недалеко от жилого массива, пока е г о не нашла соседская собака. ' ,
2016-05-22 17:44:04 -04:00
' timestamp ' : 1430825520 ,
' view_count ' : int ,
2016-03-01 11:59:11 -05:00
} ,
' playlist ' : [ {
' md5 ' : ' 9b6ef8bc0ffa25aebc8bdb40d89ab795 ' ,
' info_dict ' : {
' id ' : ' 153461-video1 ' ,
' ext ' : ' mp4 ' ,
' title ' : ' В Москве спасли потерявшегося медвежонка, который спрятался на дереве (Видео 1)' ,
' description ' : ' Маленький хищник не смог найти дорогу домой и обрел временное убежище на тополе недалеко от жилого массива, пока е г о не нашла соседская собака. ' ,
2016-05-22 17:44:04 -04:00
' timestamp ' : 1430825520 ,
2016-03-01 11:59:11 -05:00
' upload_date ' : ' 20150505 ' ,
} ,
} , {
' md5 ' : ' ebb3bf3b1ce40e878d0d628e93eb0322 ' ,
' info_dict ' : {
' id ' : ' 153461-video2 ' ,
' ext ' : ' mp4 ' ,
' title ' : ' В Москве спасли потерявшегося медвежонка, который спрятался на дереве (Видео 2)' ,
' description ' : ' Маленький хищник не смог найти дорогу домой и обрел временное убежище на тополе недалеко от жилого массива, пока е г о не нашла соседская собака. ' ,
2016-05-22 17:44:04 -04:00
' timestamp ' : 1430825520 ,
2016-03-01 11:59:11 -05:00
' upload_date ' : ' 20150505 ' ,
} ,
} ] ,
2015-05-09 14:27:49 -04:00
} , {
2016-05-22 18:00:08 -04:00
' url ' : ' https://life.ru/t/новости/213035 ' ,
' only_matching ' : True ,
} , {
' url ' : ' https://life.ru/t/ % D0 % BD % D0 % BE % D0 % B2 % D0 % BE % D1 %81% D1 %82% D0 % B8/153461 ' ,
' only_matching ' : True ,
} , {
' url ' : ' https://life.ru/t/новости/411489/manuel_vals_nazval_frantsiiu_tsieliu_nomier_odin_dlia_ighil ' ,
2015-05-09 14:27:49 -04:00
' only_matching ' : True ,
2015-05-03 13:24:19 -04:00
} ]
2014-01-30 15:48:00 -05:00
def _real_extract ( self , url ) :
2016-05-22 18:00:08 -04:00
video_id = self . _match_id ( url )
2014-01-30 15:48:00 -05:00
2016-05-22 18:00:08 -04:00
webpage = self . _download_webpage ( url , video_id )
2014-01-30 15:48:00 -05:00
2016-03-01 11:59:11 -05:00
video_urls = re . findall (
r ' <video[^>]+><source[^>]+src=[ " \' ](.+?)[ " \' ] ' , webpage )
iframe_links = re . findall (
2016-08-14 09:49:11 -04:00
r ' <iframe[^>]+src=[ " \' ]((?:https?:)?//embed \ .life \ .ru/(?:embed|video)/.+?)[ " \' ] ' ,
2016-03-01 11:59:11 -05:00
webpage )
if not video_urls and not iframe_links :
2024-06-11 19:09:58 -04:00
raise ExtractorError ( f ' No media links available for { video_id } ' )
2014-01-30 15:48:00 -05:00
2015-06-17 10:28:47 -04:00
title = remove_end (
self . _og_search_title ( webpage ) ,
2016-05-22 18:00:08 -04:00
' - Life.ru ' )
2014-01-30 15:48:00 -05:00
description = self . _og_search_description ( webpage )
view_count = self . _html_search_regex (
2016-05-22 17:44:04 -04:00
r ' <div[^>]+class=([ " \' ]).*? \ bhits-count \ b.*? \ 1[^>]*> \ s*(?P<value> \ d+) \ s*</div> ' ,
webpage , ' view count ' , fatal = False , group = ' value ' )
2014-01-30 15:48:00 -05:00
2016-05-22 17:44:04 -04:00
timestamp = parse_iso8601 ( self . _search_regex (
r ' <time[^>]+datetime=([ " \' ])(?P<value>.+?) \ 1 ' ,
webpage , ' upload date ' , fatal = False , group = ' value ' ) )
2014-01-30 15:48:00 -05:00
2015-05-03 13:24:19 -04:00
common_info = {
' description ' : description ,
' view_count ' : int_or_none ( view_count ) ,
2016-05-22 17:44:04 -04:00
' timestamp ' : timestamp ,
2015-05-03 13:24:19 -04:00
}
2016-03-01 11:59:11 -05:00
def make_entry ( video_id , video_url , index = None ) :
2015-05-03 13:24:19 -04:00
cur_info = dict ( common_info )
cur_info . update ( {
2024-06-11 19:09:58 -04:00
' id ' : video_id if not index else f ' { video_id } -video { index } ' ,
2016-03-01 11:59:11 -05:00
' url ' : video_url ,
2024-06-11 19:09:58 -04:00
' title ' : title if not index else f ' { title } (Видео { index } ) ' ,
2015-05-03 13:24:19 -04:00
} )
return cur_info
2016-03-01 11:59:11 -05:00
def make_video_entry ( video_id , video_url , index = None ) :
2024-06-11 19:09:58 -04:00
video_url = urllib . parse . urljoin ( url , video_url )
2016-03-01 11:59:11 -05:00
return make_entry ( video_id , video_url , index )
def make_iframe_entry ( video_id , video_url , index = None ) :
video_url = self . _proto_relative_url ( video_url , ' http: ' )
cur_info = make_entry ( video_id , video_url , index )
cur_info [ ' _type ' ] = ' url_transparent '
2015-05-03 13:24:19 -04:00
return cur_info
2014-02-28 10:52:06 -05:00
2016-03-01 11:59:11 -05:00
if len ( video_urls ) == 1 and not iframe_links :
return make_video_entry ( video_id , video_urls [ 0 ] )
if len ( iframe_links ) == 1 and not video_urls :
return make_iframe_entry ( video_id , iframe_links [ 0 ] )
entries = [ ]
if video_urls :
for num , video_url in enumerate ( video_urls , 1 ) :
entries . append ( make_video_entry ( video_id , video_url , num ) )
if iframe_links :
for num , iframe_link in enumerate ( iframe_links , len ( video_urls ) + 1 ) :
entries . append ( make_iframe_entry ( video_id , iframe_link , num ) )
playlist = common_info . copy ( )
playlist . update ( self . playlist_result ( entries , video_id , title , description ) )
return playlist
2015-05-09 15:03:26 -04:00
class LifeEmbedIE ( InfoExtractor ) :
IE_NAME = ' life:embed '
2016-08-14 09:49:11 -04:00
_VALID_URL = r ' https?://embed \ .life \ .ru/(?:embed|video)/(?P<id>[ \ da-f] {32} ) '
2015-05-09 15:03:26 -04:00
2016-08-14 09:49:11 -04:00
_TESTS = [ {
2015-05-09 15:03:26 -04:00
' url ' : ' http://embed.life.ru/embed/e50c2dec2867350528e2574c899b8291 ' ,
' md5 ' : ' b889715c9e49cb1981281d0e5458fbbe ' ,
' info_dict ' : {
' id ' : ' e50c2dec2867350528e2574c899b8291 ' ,
' ext ' : ' mp4 ' ,
' title ' : ' e50c2dec2867350528e2574c899b8291 ' ,
2017-01-02 07:08:07 -05:00
' thumbnail ' : r ' re:http://.* \ .jpg ' ,
2024-06-11 19:09:58 -04:00
} ,
2016-08-14 09:49:11 -04:00
} , {
# with 1080p
' url ' : ' https://embed.life.ru/video/e50c2dec2867350528e2574c899b8291 ' ,
' only_matching ' : True ,
} ]
2015-05-09 15:03:26 -04:00
def _real_extract ( self , url ) :
video_id = self . _match_id ( url )
webpage = self . _download_webpage ( url , video_id )
2016-08-14 09:49:11 -04:00
thumbnail = None
2015-05-09 15:03:26 -04:00
formats = [ ]
2016-08-14 09:49:11 -04:00
def extract_m3u8 ( manifest_url ) :
formats . extend ( self . _extract_m3u8_formats (
manifest_url , video_id , ' mp4 ' ,
entry_protocol = ' m3u8_native ' , m3u8_id = ' m3u8 ' ) )
def extract_original ( original_url ) :
formats . append ( {
' url ' : original_url ,
' format_id ' : determine_ext ( original_url , None ) ,
2021-02-18 17:03:16 -05:00
' quality ' : 1 ,
2016-08-14 09:49:11 -04:00
} )
playlist = self . _parse_json (
self . _search_regex (
r ' options \ s*= \ s*( { .+?}); ' , webpage , ' options ' , default = ' {} ' ) ,
video_id ) . get ( ' playlist ' , { } )
if playlist :
master = playlist . get ( ' master ' )
2024-06-11 19:09:58 -04:00
if isinstance ( master , str ) and determine_ext ( master ) == ' m3u8 ' :
extract_m3u8 ( urllib . parse . urljoin ( url , master ) )
2016-08-14 09:49:11 -04:00
original = playlist . get ( ' original ' )
2024-06-11 19:09:58 -04:00
if isinstance ( original , str ) :
2016-08-14 09:49:11 -04:00
extract_original ( original )
thumbnail = playlist . get ( ' image ' )
# Old rendition fallback
if not formats :
for video_url in re . findall ( r ' " file " \ s*: \ s* " ([^ " ]+) ' , webpage ) :
2024-06-11 19:09:58 -04:00
video_url = urllib . parse . urljoin ( url , video_url )
2016-08-14 09:49:11 -04:00
if determine_ext ( video_url ) == ' m3u8 ' :
extract_m3u8 ( video_url )
else :
extract_original ( video_url )
thumbnail = thumbnail or self . _search_regex (
2015-05-09 15:03:26 -04:00
r ' " image " \ s*: \ s* " ([^ " ]+) ' , webpage , ' thumbnail ' , default = None )
return {
' id ' : video_id ,
' title ' : video_id ,
' thumbnail ' : thumbnail ,
' formats ' : formats ,
}