diff --git a/Readability.js b/Readability.js index 49346be2..ce06df45 100644 --- a/Readability.js +++ b/Readability.js @@ -896,6 +896,11 @@ Readability.prototype = { let shouldRemoveTitleHeader = true; while (node) { + + if (node.tagName === "HTML") { + this._articleLang = node.getAttribute("lang"); + } + var matchString = node.className + " " + node.id; if (!this._isProbablyVisible(node)) { @@ -2263,6 +2268,7 @@ Readability.prototype = { title: this._articleTitle, byline: metadata.byline || this._articleByline, dir: this._articleDir, + lang: this._articleLang, content: this._serializer(articleContent), textContent: textContent, length: textContent.length, diff --git a/test/test-pages/nytimes-5/expected-metadata.json b/test/test-pages/nytimes-5/expected-metadata.json new file mode 100644 index 00000000..8a03fc37 --- /dev/null +++ b/test/test-pages/nytimes-5/expected-metadata.json @@ -0,0 +1,9 @@ +{ + "title": "The New York Times en Español", + "byline": "Tariq Panja", + "dir": null, + "lang": "es", + "excerpt": "Entérate de lo que está pasando en el mundo y de las noticias económicas, de negocios, tecnología, arte, estilos de vida, deporte, ciencia y opiniones. No importa cuáles sean tus intereses: el Times lo cubre con inmejorable calidad, profundidad e independencia.", + "siteName": null, + "readerable": false +} diff --git a/test/test-pages/nytimes-5/expected.html b/test/test-pages/nytimes-5/expected.html new file mode 100644 index 00000000..a6044ac4 --- /dev/null +++ b/test/test-pages/nytimes-5/expected.html @@ -0,0 +1,355 @@ +
+
+
+
+

Highlights

+
    +
  1. +
    +
    + PhotoXi Jinping, el líder de China, arriesgó su prestigio personal cuando su país se postuló para organizar los Juegos de Invierno 2022; hasta ahora el país ha cumplido sus promesas. +
    + CreditKevin Frayer/Getty Images +
    +
    +
    +
    2. +
  2. +
    +
    + Photo +
    + CreditEllen Surrey +
    +
    +
    +

    Ensayo invitado

    +

    + El día que renuncié a los Beatles +

    +

    Estaba obsesionado con el cuarteto de Liverpool: celebraba sus cumpleaños, leía todo sobre la banda y memoricé todas sus canciones. Cuando me desintoxiqué de ellos descubrí un nuevo mundo musical.

    +

    + Por Josh Max +

    +
    +
    +
    3. +
  3. +
      +
    1. +
      +
      + Photo +
      + CreditErik Carter +
      +
      +
      +

      On Tech

      +

      + ¿Qué tienen que ver los videojuegos con el metaverso? +

      +

      Las compañías tecnológicas creen que los videojuegos son el camino para avanzar más rápido hacia un internet inmersivo. La adquisición de Activision Blizzard por Microsoft es una muestra de esta tendencia.

      +

      + Por Shira Ovide +

      +
      +
      +
      2. +
    2. +
      +
      + Photo +
      + CreditTed + Chelsea Cavanaugh para The New York Times +
      +
      +
      +

      Skin Deep

      +

      + Bebidas con beneficios: ¿de verdad funcionan? +

      +

      Hay un nuevo mercado de bebidas que prometen beneficios como la salud intestinal, una mente relajada y piel más brillante. El problema es que ninguno de esos efectos ha sido respaldado científicamente.

      +

      + Por Rachel Strugatz +

      +
      +
      +
      3. +
    +
    4. +
+
+
+
+

+ Opinión + + +

Más en Opinión › +
+
    +
  1. +
    +
    + Photo +
    + CreditDanielle Chenette +
    +
    +
    +
    2. +
  2. +
    +
    + Photo +
    + CreditCari Vander Yacht +
    +
    +
    +
    3. +
  3. +
    +
    + Photo   +
    + CreditBianca Bagnarelli +
    +
    +
    +
    4. +
  4. +
      +
    1. +
      +
      + Photo +
      + CreditKim Raff for The New York Times +
      +
      +
      +
      2. +
    +
    5. +
+
+
+
+

+ Especial + + +

Más en Especial › +
+
    +
  1. +
    +
    + Photo  +
    + CreditPhoto Illustration by Andrew B. Myers for The New York Times +
    +
    +
    +

    + El desafío Come bien +

    +

    Actualiza tus hábitos alimenticios este año, sin necesidad de hacer dieta.

    +

    + By Tara Parker-Pope +

    +
    +
    +
    2. +
  2. +
    +
    + Photo +
    + CreditPhoto Illustration by Andrew B. Myers for The New York Times +
    +
    +
    +
    3. +
  3. +
    +
    + Photo +
    + CreditFotoilustraciones de Andrew B. Myers para The New York Times +
    +
    +
    +
    4. +
  4. +
    +
    + Photo +
    + CreditFotoilustración de Andrew B. Myers para The New York Times +
    +
    +
    +
    5. +
+
+
+
+

+ El brote de Coronavirus + + +

Más en El brote de Coronavirus › +
+
    +
  1. +
    +
    + Photo +
    + Credit +
    +
    +
    +
    2. +
  2. +
    +
    + PhotoLargas filas para hacerse pruebas de coronavirus en Jonesboro, Georgia, este mes. La variante ómicron se identificó a finales de noviembre, por lo que es demasiado pronto para decir cuánto tiempo pueden persistir los síntomas. +
    + CreditDustin Chambers para The New York Times +
    +
    +
    +

    + ¿Ómicron puede causar covid prolongada? +

    +

    Los científicos dicen que aún es muy pronto para saber si quienes se infectan con la nueva variante tendrán síntomas persistentes. Una infección leve no necesariamente es señal de que hay menos riesgo.

    +

    + By Pam Belluck +

    +
    +
    +
    3. +
  3. +
    +
    + PhotoA 3-D plaster model of a coronavirus spike protein in the office of Dr. Barney Graham of the Vaccine Research Center of the National Institutes of Health. +
    + CreditJohnathon Kelso for The New York Times +
    +
    +
    +
    4. +
  4. +
    +
    + PhotoUn centro de pruebas de COVID-19 realizadas con saliva en la Universidad de Minnesota, en Mineápolis +
    + CreditJenn Ackerman para The New York Times +
    +
    +
    +
    5. +
  5. +
    +
    + Photo +
    + CreditCharlie Rubin para The New York Times +
    +
    +
    +
    6. +
+
+
+
+

+ Estados Unidos + + +

Más en Estados Unidos › +
+
    +
  1. +
    +
    + PhotoUna presentación sobre la Operación Estrella Solitaria, en Weslaco, Texas, el año pasado +
    + CreditChristopher Lee para The New York Times +
    +
    +
    +
    2. +
  2. +
    +
    + PhotoUna multitud se reunió en el National Mall el 6 de enero de 2021, cuando el expresidente Donald Trump cuestionó los resultados de las elecciones de 2020. +
    + CreditPete Marovich para The New York Times +
    +
    +
    +
    3. +
  3. +
    +
    + PhotoNinguna de las más de 729 personas acusadas en relación con los disturbios del Capitolio tiene hasta ahora ninguna conexión con los antifa, según una base de datos de NPR sobre registros de detenciones. +
    + CreditJason Andrew para The New York Times +
    +
    +
    +
    4. +
  4. +
    +
    + PhotoEl expresidente Donald Trump el año pasado. Liz Cheney, representante republicana por Wyoming, ha calificado su lenta respuesta al atentado del 6 de enero como una negligencia en el cumplimiento del deber. +
    + CreditCooper Neill para The New York Times +
    +
    +
    +
    5. +
  5. +
    +
    + PhotoDurante una década, Holmes engañó a inversionistas inteligentes, a cientos de empleados inteligentes, a un comité de figuras ilustres y a los medios de comunicación que estaban ansiosos por ungir a una nueva estrella. +
    + CreditJenny Hueston +
    +
    +
    +

    + El auge y la caída de Elizabeth Holmes +

    +

    El caso de la fundadora de Theranos podría cambiar el estatus de culto que tienen algunos emprendedores tecnológicos a los que no se les cuestionan sus ambiciosos proyectos ni se les exige que rindan cuentas.

    +

    + By David Streitfeld +

    +
    +
    +
    6. +
+
+
+
+ +
+
+
\ No newline at end of file diff --git a/test/test-pages/nytimes-5/source.html b/test/test-pages/nytimes-5/source.html new file mode 100644 index 00000000..91a431f2 --- /dev/null +++ b/test/test-pages/nytimes-5/source.html @@ -0,0 +1,1540 @@ + + + + + + The New York Times en Español - The New York Times + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +
+
+
+
+
+
+
+ +
+
+ +
Skip to contentSkip to site index +
+
+ + +
+
+ +
+
+
+ +
+
+
+ +
+
+ + +
+
+
+ +
+
+
+
+
+
+
+
+
+
+
+

+ Highlights +

+
    +
  1. + +
    2. +
  2. +
    +
    + Photo +
    + CreditEllen Surrey +
    +
    +
    +
    + +
    +

    + Ensayo invitado +

    +

    + El día que renuncié a los Beatles +

    +

    + Estaba obsesionado con el cuarteto de Liverpool: celebraba sus cumpleaños, leía todo sobre la banda y memoricé todas sus canciones. Cuando me desintoxiqué de ellos descubrí un nuevo mundo musical. +

    +

    + Por Josh Max +

    +
    +
    +
    3. +
  3. +
      +
    1. +
      +
      + Photo +
      + CreditErik Carter +
      +
      +
      +

      + On Tech +

      +

      + ¿Qué tienen que ver los videojuegos con el metaverso? +

      +
      + +
      +

      + Las compañías tecnológicas creen que los videojuegos son el camino para avanzar más rápido hacia un internet inmersivo. La adquisición de Activision Blizzard por Microsoft es una muestra de esta tendencia. +

      +

      + Por Shira Ovide +

      +
      +
      +
      2. +
    2. +
      +
      + Photo +
      + CreditTed + Chelsea Cavanaugh para The New York Times +
      +
      +
      +

      + Skin Deep +

      +

      + Bebidas con beneficios: ¿de verdad funcionan? +

      +
      + +
      +

      + Hay un nuevo mercado de bebidas que prometen beneficios como la salud intestinal, una mente relajada y piel más brillante. El problema es que ninguno de esos efectos ha sido respaldado científicamente. +

      +

      + Por Rachel Strugatz +

      +
      +
      +
      3. +
    +
    4. +
+
+
+
+
    +
  1. +
    +

    + Charles M. Blow +

    +
    + Photo +
    + CreditNitashia Johnson para The New York Times +
    +
    +
    +

    + La muerte cambió mi vida +

    +

    + Por fuera parecía tener éxito, pero por dentro sentía que me ahogaba. Cuando murió mi hermano, tuve que replantearme todo. +

    +

    + By Charles M. Blow +

    +
    +
    +
    2. +
  2. +
    +

    + EDUCACIÓN FÍSICA +

    +
    + Photo +
    + CreditPiotr Redlinski for The New York Times +
    +
    +
    +

    + Así es como el ejercicio puede controlar nuestra ansiedad +

    +

    + Los corredores de esquí de fondo son menos propensos a desarrollar trastornos de ansiedad. La buena noticia es que las actividades aeróbicas menos intensas pueden proporcionar beneficios similares. +

    +

    + By Gretchen Reynolds +

    +
    +
    +
    3. +
  3. + +
    4. +
  4. +
    +

    + EL Desafío Come bien +

    +
    + Photo +
    + CreditFotoilustración de Andrew B. Myers para The New York Times +
    +
    +
    +

    + Siete opciones para alimentar a tu cerebro +

    +

    + Para el desafío de esta semana, prueba algunos alimentos que se han relacionado con la mejora del estado de ánimo. +

    +

    + By Tara Parker-Pope +

    +
    +
    +
    5. +
  5. + +
    6. +
+
+
+
+
+
+

+ Advertisement +

+
Continue reading the main story +
+
+
+
+
+

+ Opinión + +

Más en Opinión › +
+
    +
  1. + +
    2. +
  2. + +
    3. +
  3. + +
    4. +
  4. +
      +
    1. + +
      2. +
    +
    5. +
+
+
+
+

+ Especial + +

Más en Especial › +
+
    +
  1. +
    +
    + Photo  +
    + CreditPhoto Illustration by Andrew B. Myers for The New York Times +
    +
    +
    +

    + El desafío Come bien +

    +

    + Actualiza tus hábitos alimenticios este año, sin necesidad de hacer dieta. +

    +

    + By Tara Parker-Pope +

    +
    +
    +
    2. +
  2. + +
    3. +
  3. +
    +
    + Photo +
    + CreditFotoilustraciones de Andrew B. Myers para The New York Times +
    +
    +
    +

    + ¿Galletas? ¿Papitas? ¿Pizza? Aprende a dominar tus antojos +

    +

    + Para el desafío Come bien, las técnicas de atención plena, como “surfear los impulsos”, pueden ayudar a frenar el comer demasiado sin prohibir los alimentos favoritos. +

    +

    + By Tara Parker-Pope +

    +
    +
    +
    4. +
  4. +
    +
    + Photo +
    + CreditFotoilustración de Andrew B. Myers para The New York Times +
    +
    +
    +

    + Adiós a la dieta perpetua, hola a la alimentación intuitiva +

    +

    + El desafío Come bien de hoy te ayudará a evitar el efecto “al diablo” de las dietas y a sintonizar con tu cuerpo. +

    +

    + By Tara Parker-Pope +

    +
    +
    +
    5. +
+
+
+
+

+ Advertisement +

+
Continue reading the main story +
+
+
+
+
+

+ El brote de Coronavirus + +

Más en El brote de Coronavirus › +
+
    +
  1. + +
    2. +
  2. +
    +
    + PhotoLargas filas para hacerse pruebas de coronavirus en Jonesboro, Georgia, este mes. La variante ómicron se identificó a finales de noviembre, por lo que es demasiado pronto para decir cuánto tiempo pueden persistir los síntomas. +
    + CreditDustin Chambers para The New York Times +
    +
    +
    +

    + ¿Ómicron puede causar covid prolongada? +

    +

    + Los científicos dicen que aún es muy pronto para saber si quienes se infectan con la nueva variante tendrán síntomas persistentes. Una infección leve no necesariamente es señal de que hay menos riesgo. +

    +

    + By Pam Belluck +

    +
    +
    +
    3. +
  3. +
    +
    + PhotoA 3-D plaster model of a coronavirus spike protein in the office of Dr. Barney Graham of the Vaccine Research Center of the National Institutes of Health. +
    + CreditJohnathon Kelso for The New York Times +
    +
    +
    +

    + Cómo se hicieron las vacunas ARNm: con lentitud y accidentes afortunados +

    +

    + Las sorprendentes vacunas para la covid fabricadas por Pfizer-BioNTech y Moderna utilizaron descubrimientos sepultados hace mucho con la esperanza de acabar con epidemias del pasado. +

    +

    + By Gina Kolata y Benjamin Mueller +

    +
    +
    +
    4. +
  4. +
    +
    + PhotoUn centro de pruebas de COVID-19 realizadas con saliva en la Universidad de Minnesota, en Mineápolis +
    + CreditJenn Ackerman para The New York Times +
    +
    +
    +

    + ¿Y si la saliva fuera mejor opción para detectar el coronavirus? +

    +

    + Al propagarse la variante ómicron algunos expertos defienden las pruebas que emplean muestras de saliva por su capacidad de detectar la infección antes que el hisopado nasal. +

    +

    + By Emily Anthes +

    +
    +
    +
    5. +
  5. + +
    6. +
+
+
+
+

+ Estados Unidos + +

Más en Estados Unidos › +
+
    +
  1. + +
    2. +
  2. + +
    3. +
  3. + +
    4. +
  4. +
    +
    + PhotoEl expresidente Donald Trump el año pasado. Liz Cheney, representante republicana por Wyoming, ha calificado su lenta respuesta al atentado del 6 de enero como una negligencia en el cumplimiento del deber. +
    + CreditCooper Neill para The New York Times +
    +
    +
    +

    + Todo lo que sabemos sobre la investigación del asalto al Capitolio de EE. UU. +

    +

    + La comisión de la Cámara de Representantes no está facultada para presentar cargos penales, pero puede darle al Departamento de Justicia las pruebas de cualquier infracción que descubra en su investigación. +

    +

    + By Luke Broadwater +

    +
    +
    +
    5. +
  5. +
    +
    + PhotoDurante una década, Holmes engañó a inversionistas inteligentes, a cientos de empleados inteligentes, a un comité de figuras ilustres y a los medios de comunicación que estaban ansiosos por ungir a una nueva estrella. +
    + CreditJenny Hueston +
    +
    +
    +

    + El auge y la caída de Elizabeth Holmes +

    +

    + El caso de la fundadora de Theranos podría cambiar el estatus de culto que tienen algunos emprendedores tecnológicos a los que no se les cuestionan sus ambiciosos proyectos ni se les exige que rindan cuentas. +

    +

    + By David Streitfeld +

    +
    +
    +
    6. +
+
+
+
+

+ Advertisement +

+
Continue reading the main story +
+
+
+
+
+
+ +
+
+
    +
    +
  1. +
    +
    + +
    +
    +
    + +
    +
    +
    +
    +

    + Elogio de la pereza +

    +

    + Consejo de un rabino, derrame petrolero en Perú, una infección de ómicron en gráficos y más para estar al día. +

    +
    +

    + Por Elda Cantú +

    +
    +
    +
    +
    +
    2. +
  2. +
    +
    + +
    +
    +
    + +
    +
    +
    +
    +

    + Un ejecutivo de Nike busca el perdón de una familia por un asesinato que cometió en 1965 +

    +

    + Barbara Mack abrazó a Larry Miller después de que este se disculpara por haber matado a su hermano, Edward David White. Pero si fuera 30 años más joven, le dijo, “habría saltado por encima de la mesa para golpearte”. +

    +
    +

    + Por Jeré Longman y Kevin Draper +

    +
    +
    + Read in English +
    +
    +
    +
    +
    3. +
  3. +
    +
    + +
    +
    +
    + +
    +
    +
    +
    +

    + EL CUADERNO DE LA CRÍTICA +

    +

    + Los Ángeles, gloriosa capital del sushi +

    +

    + Pocos lugares fuera de Japón pueden igualar la variedad, la maestría y la creatividad que se sirve en las innumerables barras de sushi de la ciudad.` +

    +
    +

    + Por Tejal Rao +

    +
    +
    + Read in English +
    +
    +
    +
    +
    4. +
  4. +
    +
    + +
    +
    +
    + +
    +
    +
    +
    +

    + ¿Quién entregó a la familia de Ana Frank? Hay una nueva teoría. Es controversial +

    +

    + Un nuevo libro identifica a un sospechoso de delatar a la familia Frank a la administración nazi. Ahora que expertos e historiadores han tenido tiempo de revisar la investigación, muchos dudan de los métodos y la conclusión. +

    +
    +

    + Por Nina Siegal +

    +
    +
    + Read in English +
    +
    +
    +
    +
    5. +
  5. +
    +
    + +
    +
    +
    + +
    +
    +
    +
    +

    + Cuaderno de la crítica +

    +

    + Cinco estupendas opciones de sushi en Los Ángeles +

    +

    + En la ciudad abundan los restaurantes donde se despliega estilo y destreza. Estos son algunos de los favoritos de la crítica Tejal Rao. +

    +
    +

    + Por Tejal Rao +

    +
    +
    + Read in English +
    +
    +
    +
    +
    6. +
  6. +
    +
    + +
    +
    +
    + +
    +
    +
    +
    +

    + Modern Love +

    +

    + Tuvimos un divorcio amable y seguimos viviendo en la misma casa +

    +

    + Cuando el final de un matrimonio significa vivir en pisos separados de la misma residencia. +

    +
    +

    + Por Jordana Jacobs +

    +
    +
    + Read in English +
    +
    +
    +
    +
    7. +
  7. +
    +
    + +
    +
    +
    + +
    +
    +
    +
    +

    + Defender Chernóbil en una invasión no vale la pena, dicen algunos ucranianos +

    +

    + Ucrania ha iniciado una estrategia defensiva para la Zona de Exclusión de Chernóbil, uno de los lugares más radiactivos de la Tierra, que se encuentra en el camino más corto entre Rusia y la capital de Ucrania, Kiev. +

    +
    +

    + Por Andrew E. Kramer y Tyler Hicks +

    +
    +
    + Read in English +
    +
    +
    +
    +
    8. +
  8. +
    +
    + +
    +
    +
    + +
    +
    +
    +
    +

    + Tech Fix +

    +

    + ¿Por qué ha causado tanto alboroto el metaverso? +

    +

    + Microsoft dijo que pagó 68.700 millones de dólares por una empresa de videojuegos para fortalecer su posición en el metaverso. Veamos qué significa esto en realidad. +

    +
    +

    + Por Brian X. Chen +

    +
    +
    + Read in English +
    +
    +
    +
    +
    9. +
  9. +
    +
    + +
    +
    +
    + +
    +
    +
    +
    +

    + Zara Rutherford, la mujer más joven en darle la vuelta al mundo +

    +

    + Cuando la adolescente aterrizó el jueves, se convirtió en la mujer más joven en circunnavegar el mundo en solitario. “Me alegra poder estar en el mismo lugar por unos meses”, dijo. +

    +
    +

    + Por Mike Ives +

    +
    +
    + Read in English +
    +
    +
    +
    +
    10. +
  10. +
    +
    + +
    +
    +
    + +
    +
    +
    +
    +

    + ‘El petróleo va a estar meses en el mar’: un derrame de crudo, provocado por el tsunami, arrasa la costa peruana +

    +

    + El derrame, que inicialmente se dijo que era de siete galones, resultó ser de 6000 barriles según indicó el Ministerio del Ambiente. El gobierno peruano ha comenzado a pedir ayuda internacional. +

    +
    +

    + Por Mitra Taj +

    +
    +
    + Read in English +
    +
    +
    +
    +
    11. +
+
+
+
+
+

+ Advertisement +

+
Continue reading the main story +
+
+
+
+
+

+ Advertisement +

+
Continue reading the main story +
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+ +
+
+ + + + + + + + + + diff --git a/test/test-readability.js b/test/test-readability.js index 6c44cf8d..3f38f6d6 100644 --- a/test/test-readability.js +++ b/test/test-readability.js @@ -176,6 +176,10 @@ function runTestsWithItems(label, domGenerationFn, source, expectedContent, expe expectedMetadata.dir && it("should extract expected direction", function() { expect(result.dir).eql(expectedMetadata.dir); }); + + expectedMetadata.lang && it("should extract expected language", function() { + expect(result.lang).eql(expectedMetadata.lang); + }); }); }