extend extracted information for web.magentatv.de

sites/web.magentatv.de/__data__/content.json

@@ -0,0 +1,67 @@
+{
+  "playbilllist": [
+    {
+      "id": "39328203",
+      "name": "Twenty Foot Plus",
+      "introduce": "Die besten Big-Wave-Surfer werden bei ihrer Suche nach der nächsten großen Welle begleitet.",
+      "channelid": "5027",
+      "starttime": "2023-10-23 23:58:55 UTC+00:00",
+      "endtime": "2023-10-24 00:11:05 UTC+00:00",
+      "genres": "Sport",
+      "pictures": [
+        {
+          "rel": "image",
+          "href": "http://ngiss.t-online.de/cm1s/media/gracenote/2/4/p24832950_e_h9_aa_2023-06-22T10_12_01.jpg",
+          "imageType": "1",
+          "mimeType": "image/jpeg",
+          "resolution": ["1440", "1080"]
+        }
+      ]
+    },
+    {
+      "id": "45113316",
+      "name": "The Big Bang Theory",
+      "introduce": "Amy arbeitet für eine Weile in Sheldons Universität, er freut sich darüber, doch sie warnt ihn, dass sie sich jetzt häufiger zu Gesicht bekommen. Als Leonard, Sheldon, Raj und Howard zusammen sitzen, diskutieren sie darüber. Sheldon lässt auf sich einreden und informiert Amy, dass er ein Problem mit ihr auf seiner Arbeit hat. Sie ist enttäuscht, während Bernadette mit Howard darüber spricht, warum er auf Sheldon eingeredet hat.",
+      "channelid": "374",
+      "starttime": "2024-11-05 15:37:03 UTC+01:00",
+      "endtime": "2024-11-05 16:03:48 UTC+01:00",
+      "cast": {
+        "actor": "Johnny Galecki,Jim Parsons,Kaley Cuoco,Simon Helberg,Kunal Nayyar,Mayim Bialik,Melissa Rauch,Todd Eric Andrews,Ayumi Iizuka",
+        "director": "Mark Cendrowski",
+        "producer": "Chuck Lorre,Bill Prady,Steven Molaro",
+        "adaptor": "Steven Molaro,Steve Holland,Maria Ferrari,Chuck Lorre,Eric Kaplan,Jim Reynolds"
+      },
+      "subName": "Tritte unter dem Tisch",
+      "subNum": "5",
+      "genres": "Sitcom",
+      "seasonNum": "7",
+      "country": "us",
+      "producedate": "2013-01-01",
+      "externalIds": "[{\"id\":\"tt0898266\",\"type\":\"imdb\"},{\"id\":\"EP019370140103\",\"type\":\"gnProgram\"},{\"id\":\"615:1:45137\",\"type\":\"dvbEventTriplet\"}]",
+      "pictures": [
+        {
+          "rel": "image",
+          "href": "http://ngiss.t-online.de/cm1s/media/gracenote/1/0/p10262968_e_h9_ah_2021-10-20T07_16_16.jpg",
+          "imageType": "1",
+          "copyrightNotice": "(c) ProSiebenSat.1",
+          "mimeType": "image/jpeg",
+          "resolution": [
+            "1440",
+            "1080"
+          ]
+        },
+        {
+          "rel": "image",
+          "href": "http://ngiss.t-online.de/cm1s/media/gracenote/1/0/p10262968_e_h10_ac_2021-10-20T07_07_06.jpg",
+          "imageType": "17",
+          "copyrightNotice": "(c) ProSiebenSat.1",
+          "mimeType": "image/jpeg",
+          "resolution": [
+            "1920",
+            "1080"
+          ]
+        }
+      ]
+    }
+  ]
+}

sites/web.magentatv.de/web.magentatv.de.config.js

@@ -3,6 +3,7 @@ const dayjs = require('dayjs')
 const utc = require('dayjs/plugin/utc')
 const customParseFormat = require('dayjs/plugin/customParseFormat')
 const fetch = require('node-fetch')
+const { upperCase } = require('lodash')
 
 let X_CSRFTOKEN
 let COOKIE
@@ -29,7 +30,7 @@ module.exports = {
         offset: 0,
         properties: [
           {
-            include: 'endtime,genres,id,name,starttime,channelid,pictures,introduce',
+            include: 'endtime,genres,id,name,starttime,channelid,pictures,introduce,subName,seasonNum,subNum,cast,country,producedate,externalIds',
             name: 'playbill'
           }
         ],
@@ -50,7 +51,16 @@ module.exports = {
         image: parseImage(item),
         category: parseCategory(item),
         start: parseStart(item),
-        stop: parseStop(item)
+        stop: parseStop(item),
+        sub_title: item.subName,
+        season: item.seasonNum,
+        episode: item.subNum,
+        directors: parseDirectors(item),
+        producers: parseProducers(item),
+        adapters: parseAdapters(item),
+        country: upperCase(item.country),
+        date: item.producedate,
+        urls: parseUrls(item)
       })
     })
     return programs
@@ -102,6 +112,38 @@ function parseCategory(item) {
     : []
 }
 
+function parseDirectors(item) {
+  if (!item.cast || !item.cast.director) return [];
+  return item.cast.director
+    .replace('und', ',')
+    .split(',')
+    .map(i => i.trim());
+}
+
+function parseProducers(item) {
+  if (!item.cast || !item.cast.producer) return [];
+  return item.cast.producer
+    .replace('und', ',')
+    .split(',')
+    .map(i => i.trim())
+}
+
+function parseAdapters(item) {
+  if (!item.cast || !item.cast.adaptor) return [];
+  return item.cast.adaptor
+    .replace('und', ',')
+    .split(',')
+    .map(i => i.trim())
+}
+
+function parseUrls(item) {
+  // currently only a imdb id is returned by the api, thus we can construct the url here
+  if (!item.externalIds) return [];
+  return JSON.parse(item.externalIds)
+    .filter(externalId => externalId.type === 'imdb' && externalId.id)
+    .map(externalId => ({ system: 'imdb', value: `https://www.imdb.com/title/${externalId.id}` }))
+}
+
 function parseImage(item) {
   if (!Array.isArray(item.pictures) || !item.pictures.length) return null
 

sites/web.magentatv.de/web.magentatv.de.test.js

@@ -1,4 +1,6 @@
 const { parser, url, request } = require('./web.magentatv.de.config.js')
+const fs = require('fs')
+const path = require('path')
 const dayjs = require('dayjs')
 const utc = require('dayjs/plugin/utc')
 const customParseFormat = require('dayjs/plugin/customParseFormat')
@@ -39,7 +41,7 @@ it('can generate valid request data', () => {
     offset: 0,
     properties: [
       {
-        include: 'endtime,genres,id,name,starttime,channelid,pictures,introduce',
+        include: 'endtime,genres,id,name,starttime,channelid,pictures,introduce,subName,seasonNum,subNum,cast,country,producedate,externalIds',
         name: 'playbill'
       }
     ],
@@ -51,8 +53,7 @@ it('can generate valid request data', () => {
 })
 
 it('can parse response', () => {
-  const content =
-    '{"playbilllist":[{"id":"39328203","name":"Twenty Foot Plus","introduce":"Die besten Big-Wave-Surfer werden bei ihrer Suche nach der nächsten großen Welle begleitet.","channelid":"5027","starttime":"2023-10-23 23:58:55 UTC+00:00","endtime":"2023-10-24 00:11:05 UTC+00:00","genres":"Sport","pictures":[{"rel":"image","href":"http://ngiss.t-online.de/cm1s/media/gracenote/2/4/p24832950_e_h9_aa_2023-06-22T10_12_01.jpg","imageType":"1","mimeType":"image/jpeg","resolution":["1440","1080"]}]}]}'
+  const content = fs.readFileSync(path.resolve(__dirname, '__data__/content.json'), 'utf8')
   const result = parser({ content }).map(p => {
     p.start = p.start.toJSON()
     p.stop = p.stop.toJSON()
@@ -69,6 +70,30 @@ it('can parse response', () => {
       image:
         'http://ngiss.t-online.de/cm1s/media/gracenote/2/4/p24832950_e_h9_aa_2023-06-22T10_12_01.jpg',
       category: ['Sport']
+    },
+    {
+      start: '2024-11-05T15:37:03.000Z',
+      stop: '2024-11-05T16:03:48.000Z',
+      title: 'The Big Bang Theory',
+      sub_title: 'Tritte unter dem Tisch',
+      description:
+        'Amy arbeitet für eine Weile in Sheldons Universität, er freut sich darüber, doch sie warnt ihn, dass sie sich jetzt häufiger zu Gesicht bekommen. Als Leonard, Sheldon, Raj und Howard zusammen sitzen, diskutieren sie darüber. Sheldon lässt auf sich einreden und informiert Amy, dass er ein Problem mit ihr auf seiner Arbeit hat. Sie ist enttäuscht, während Bernadette mit Howard darüber spricht, warum er auf Sheldon eingeredet hat.',
+      season: "7",
+      episode: "5",
+      image:
+        'http://ngiss.t-online.de/cm1s/media/gracenote/1/0/p10262968_e_h9_ah_2021-10-20T07_16_16.jpg',
+      category: ['Sitcom'],
+      directors: ["Mark Cendrowski"],
+      producers: ["Chuck Lorre","Bill Prady","Steven Molaro"],
+      adapters: ["Steven Molaro","Steve Holland","Maria Ferrari","Chuck Lorre","Eric Kaplan","Jim Reynolds"],
+      country: 'US',
+      date: "2013-01-01",
+      urls: [
+        {
+          system: "imdb",
+          value: "https://www.imdb.com/title/tt0898266"
+        }
+      ]
     }
   ])
 })