improve-url-detection

src/index.test.ts

@@ -12,6 +12,7 @@ import {
   simplify,
   someKewyordMatches,
   suffixesWithPrefix,
+  urlsInText,
 } from "./index.ts";
 
 import { assertEquals } from "https://deno.land/std@0.192.0/testing/asserts.ts";
@@ -187,3 +188,36 @@ testUnaryFn(
   ["aa", true],
   ["aaaa", false],
 ]);
+
+testUnaryFn("urlsInText", urlsInText)([
+  [
+    `🌵מקומות אחרונים לריטריט בשישי הקרוב!! ריטריט יום ADAMA- חזרה לשלווה הפנימית, היטענות בכוחות ומשאבים עם שירי לבני 🌼
+
+הזדמנות אחרונה להצטרף לריטריט של יום אחד, שיאפשר לנו לחזור פנימה חזרה לסנטר שלנו, לשקט הפנימי שקצת הלך לאיבוד בתקופה הזאת. לקחת פסק זמן מהכל ופשוט לבחור רגע בעצמנו 
+
+🌼 מדיטציה ודמיון מודרך 
+🌼 תקשורת מקרבת 
+🌼 כלים לוויסות מערכת העצבים 
+🌼 הקשבה לגוף 
+🌼זימון ובריאת מציאות 
+🌼מגע מקרקע 
+🌼 אנשים ממש ממש טובים 😍
+
+סטודיו נעים, מרווח ובמיקום מדהים במרכז תל אביב, 
+שלווה אורבנית 🌬️
+
+* הריטריט מתאים לכל גיל, מתחילים ומנוסים כאחד 
+
+יום שישי הקרוב 3.5// 11:00-17:00 // בית להיוולד מחדש, תל אביב
+ 
+לעמוד הנחיתה עם כל הפרטים >> Shiri-livny.com/adamaretreat
+
+
+✧✧✧✧✧
+
+רוצה לדעת לפני כולם מה קורה?
+להצטרפות לקבוצות של מה קורה היום? >> makorehayom.info/48YR0Sw`,
+    ["http://shiri-livny.com/adamaretreat", "http://makorehayom.info/48YR0Sw"],
+  ],
+  ["", []],
+]);

src/index.ts

@@ -18,7 +18,7 @@ import {
   trim,
   trimWhitespace,
 } from "https://deno.land/x/gamla@43.0.0/src/index.ts";
-
+import getUrls from "npm:get-urls";
 import { remove } from "https://deno.land/x/gamla@43.0.0/src/filter.ts";
 import { fuzzySearch as fs } from "npm:levenshtein-search";
 import { englishWords } from "./englishWords.ts";
@@ -362,8 +362,7 @@ const kwInText = (x: string) =>
 export const someKewyordMatches = (keywords: string[]) => (x: string) =>
   keywords.some(kwInText(x));
 
-export const urlsInText = (text: string) =>
-  text.match(/https?:\/\/[^\s/$.?#].[^\s]*/g) || [];
+export const urlsInText = (x: string) => [...getUrls(x)];
 
 type Keywords = { keywords: string[]; antiKeywords?: string[] };