שלום,
נראה שכבר הכרתם את אאוריקה. בטח כבר גיליתם כאן דברים מדהימים, אולי כבר שאלתם שאלות וקיבלתם תשובות טובות.
נשמח לראות משהו מכם בספר האורחים שלנו: איזו מילה טובה, חוות דעת, עצה חכמה לשיפור או כל מה שיש לכם לספר לנו על אאוריקה, כפי שאתם חווים אותה.
»
«
איך מתבצעת צביעה של תמונות ישנות?
צביעת תמונות (Colorise of old photos) אוטומטית היא טכנולוגיה ההופכת תמונת שחור לבן לצבעונית.
הטכנולוגיה הזו מרשימה מאוד. היא משנה תמונות מונוכרומטיות שצולמו לפני שנים רבות כך שייראו כאילו צולמו בצבע ויקבלו מראה ראליסטי וכמו חיים חדשים.
אם בעבר עשו צביעה כזו בטכניקות של צביעה ביד, כיום התהליך הוא ממוחשב לחלוטין. התוכנה שבלב הטכנולוגיה הזו מבוססת בינה מלאכותית. היא חכמה ועושה עבודה מהירה מאוד וללא מגע או השתתפות אנושית.
לפי גווני האפור ומגוון פרמטרים נוספים היא יודעת לצבוע ולהעריך את צבעי העצמים, בגדי המצולמים ומראה הנופים המופיעים בתמונות.
תוצאה זו מושגת באמצעות תוכנה לומדת, עם "למידת מכונה" (Machine learning), כלומר תוכנה שבתחילה למדה מניתוח של מיליוני תמונות ומאז היא הולכת ומשתפרת ככל שהיא צובעת תמונות רבות יותר.
אם בתחילה הייתה הצביעה רק "בערך", ככל שעובר הזמן היא משתפרת והולכת. כל תמונה נוספת שנצבעת מגדילה את רמת הדיוק העתידי.
התוצאות מרשימות ולא פעם מטעות, כי פעמים רבות מדובר בתמונות צבעוניות שקשה לנחש שמקורן בצילומים בשחור-לבן.
במקרים רבים התוצאות ממש מרגשות. במיוחד כשהפעולה נעשית על תמונות של קרובי משפחה שהלכו לעולמם, תופעה שזכתה לשם "דיפ נוסטלגיה". מדובר בהוספה של טכנולוגיית "דיפ פייק", המניעה את הדמויות באופן כמעט חלומי.
הדיפ נוסטלגיה הזו, שנולדה בחברות טכנולוגיה העוסקות בעצי משפחה, הולידה התפעלות ממראה צבעוני וחי של דמויות היסטוריות שכמו "קמות לתחייה" ואף הובילה קרובי משפחה רבים לדמעות ולפרצי רגשות, למראה קרוביהם המתים שקמו לפתע לתחייה אל מול עיניהם.
כך צובעת למידה עמוקה תמונות בשחור לבן והיום גם מזיזה אותן (עברית):
https://youtu.be/O4VPN_YjgIM
תמונות ישנות של אינדיאנים מתחילת המאה ה-20 שנצבעו בטכניקה זו:
https://youtu.be/mySqfF4HCwg
הסבר ודוגמאות מדהימות של צביעת תמונות והחיים שזה מכניס בהן:
https://youtu.be/2KX6-QaE84Y?long=yes
התפתחות הצביעה של התמונות הובילה בהמשך לצביעת סרטים:
https://youtu.be/vubuBrcAwtY?long=yes
אתרים חינמיים המאפשרים לצבוע תמונות ישנות שלכם אונליין:
https://youtu.be/HJmP8mbkfXI?long=yes
מהי טכנולוגיית הדיפ נוסטלגיה?
בשנים האחרונות הולכת ותופסת את מקומה טכנולוגיה מבוססת בינה מלאכותית (AI) שנקראת דיפ פייק (Deepfake). טכנולוגיה זו משמשת לייצור או שינוי תוכן וידאו כך שהיא מציגה מציאות שלמעשה לא התרחשה מעולם. מנאומים שלא ננאמו מעבירים מסרים בדויים מפיהם לכאורה, של אנשים מפורסמים ועד סרטונים "פסאודו-תיעודיים", שמציגים מראות וטקסטים מדוברים, שנראים אמיתיים אך מעולם לא צולמו והוקלטו.
ענף חדש בעולם הדיפ פייק הוא יישום שזכה לשם "דיפ נוסטלגיה" (™Deep Nostalgia), המנפיש את פניהם של אנשים שצולמו בתמונות ישנות או היסטוריות, ומזיז את פניהם, כאילו צולמו בווידאו.
הטכנולוגיה הזו פועלת על כל תמונת סטילס (תמונות קפואות), כולל תמונות בשחור-לבן ותמונות שצולמו בצבע.
השם ניתן ליישום פורץ דרך זה על ידי חברת MyHeritage, שעוסקת בפיתוח טכנולוגיה ליצירת עצי משפחה מקוונים.
סרטוני הדיפ נוסטלגיה התפרסמו כשאנשים שיתפו עם בני משפחתם וחבריהם סרטונים קצרים ומונפשים שנוצרו כך, ובהם קרוביהם ואבותיהם מזיזים את ראשיהם, מצמצים, מחייכים ונעים בצורה ריאליסטית כמעט לחלוטין.
#איך פועלת הדיפ נוסטלגיה?
דיפ נוסטלגיה מחזירה, אם כן, לחיים אנשים שצולמו בצילומי סטילס. זה מתחיל באיתור פני המצולמים בתמונות ואז הפקה של מחוות ותנועות מציאותיות, ממש כאילו צולמו בווידאו. ההנפשה של הפנים בתמונות הסטילס מראה אותם מחייכים, זזים וממצמצים, כאילו צולמו כך במקור.
בבסיס הטכנולוגי של יישום ה"דיפ נוסטלגיה" פועל אלגוריתם למידה עמוקה (Deep Learning), המחבר בין תווי הפנים של המצולמים לבין אוסף מחוות שצולמו בווידאו ושמורים במאגר החברה.
פיתוח וצילום אותן מחוות נעשה כשצילמו אנשי מיי הריטג' מראש שלל מקטעי וידאו של שחקנים ועובדי החברה, המזיזים את ראשיהם ופניהם באורח טבעי, ממצמצים, מחייכים ומפנים את ראשם לכיוונים שונים.
למעשה שכרה חברת MyHeritage רישיון מחברת D-ID, לטכנולוגיה שפותחה בה ומאפשרת שחזור, באמצעות טכנולוגיית למידה עמוקה, של סרטוני וידאו.
על מנת שאפקט ההנפשה יופעל על התמונות, ברזולוציה הכי גבוהה האפשרית, עוברות תמונות מטושטשות חידוד אוטומטי, שמבצעת הטכנולוגיה החדשנית, מה שמעלה באופן דרמטי את איכות הסרטונים המופקים בה.
ההברקה האמיתית של הטכנולוגיה הזו נעוצה בזיהוי והבחירה האוטומטית שמבצע יישום הדיפ נוסטלגיה, מבין מקטעי המחוות בווידאו. ניתוח מהיר של מנח הראש וכיוון העיניים של המצולמים בתמונה מאפשרים ליישום להתאים להם באופן חכם את מחוללי ההנפשה המיטביים ולייצר את הסרטונים המונפשים באופן אופטימלי.
#ממה נמנעו מפתחי הדיפ נוסטלגי?
אנשי חברת MyHeritage ומפתחי היישום המלהיב נמנעו מהוספת דיבור לסרטונים.
לאור העובדה שטכנולוגיית הדיפ פייק ידועה ביכולות המטורפות שלה, גם בתחום הדיבור, נשאלת השאלה מדוע. הרי ניתן היה לשתול בפי המצולמים טקסטים מדוברים, שהיו נשמעים אמיתיים, על אף שמעולם לא צולמו והוקלטו.
ראשית, חשוב לומר שזיהוי קולי של המצולמים, ככל שמדובר באנשים שקרוביהם זוכרים עדיין את קולם האמיתי, היה מפחית את אפקט המציאות שיוצרים הסרטונים הללו.
אבל יש עוד סיבה לכך.
ב-MyHeritage מציינת שההימנעות מאפקטים קוליים של דיבור היא מכוונת. מטרתה, הם מטעימים, היא "למנוע שימושים זדוניים בכלי", דוגמת אלה שנעשים בסרטוני "דיפ פייק" של פוליטיקאים וידוענים שעודם בחיים.
לכן הם גם מבקשים מהמשתמשים לעשות בכלי שימוש רק על תמונות היסטוריות השייכות להם ולהימנע משימוש בתמונות של אנשים חיים, שלא אישרו את השימוש הזה.
הסבר לטכנולוגיה (עברית):
https://youtu.be/O4VPN_YjgIM?t=21s
הנה הדיפ נוסטלגיה:
https://youtu.be/tjBYSnoAWqg
ציורים מפורסמים שקמים לתחייה:
https://youtu.be/TWY1uBK4Zxc
ואפילו דיקטטורים קמים לתחיה עם הדיפ נוסטלגיה של מיי הריטג':
https://youtu.be/a-HR03bToew
צביעת תמונות
צביעת תמונות (Colorise of old photos) אוטומטית היא טכנולוגיה ההופכת תמונת שחור לבן לצבעונית.
הטכנולוגיה הזו מרשימה מאוד. היא משנה תמונות מונוכרומטיות שצולמו לפני שנים רבות כך שייראו כאילו צולמו בצבע ויקבלו מראה ראליסטי וכמו חיים חדשים.
אם בעבר עשו צביעה כזו בטכניקות של צביעה ביד, כיום התהליך הוא ממוחשב לחלוטין. התוכנה שבלב הטכנולוגיה הזו מבוססת בינה מלאכותית. היא חכמה ועושה עבודה מהירה מאוד וללא מגע או השתתפות אנושית.
לפי גווני האפור ומגוון פרמטרים נוספים היא יודעת לצבוע ולהעריך את צבעי העצמים, בגדי המצולמים ומראה הנופים המופיעים בתמונות.
תוצאה זו מושגת באמצעות תוכנה לומדת, עם "למידת מכונה" (Machine learning), כלומר תוכנה שבתחילה למדה מניתוח של מיליוני תמונות ומאז היא הולכת ומשתפרת ככל שהיא צובעת תמונות רבות יותר.
אם בתחילה הייתה הצביעה רק "בערך", ככל שעובר הזמן היא משתפרת והולכת. כל תמונה נוספת שנצבעת מגדילה את רמת הדיוק העתידי.
התוצאות מרשימות ולא פעם מטעות, כי פעמים רבות מדובר בתמונות צבעוניות שקשה לנחש שמקורן בצילומים בשחור-לבן.
במקרים רבים התוצאות ממש מרגשות. במיוחד כשהפעולה נעשית על תמונות של קרובי משפחה שהלכו לעולמם, תופעה שזכתה לשם "דיפ נוסטלגיה". מדובר בהוספה של טכנולוגיית "דיפ פייק", המניעה את הדמויות באופן כמעט חלומי.
הדיפ נוסטלגיה הזו, שנולדה בחברות טכנולוגיה העוסקות בעצי משפחה, הולידה התפעלות ממראה צבעוני וחי של דמויות היסטוריות שכמו "קמות לתחייה" ואף הובילה קרובי משפחה רבים לדמעות ולפרצי רגשות, למראה קרוביהם המתים שקמו לפתע לתחייה אל מול עיניהם.
כך צובעת למידה עמוקה תמונות בשחור לבן והיום גם מזיזה אותן (עברית):
https://youtu.be/O4VPN_YjgIM
תמונות ישנות של אינדיאנים מתחילת המאה ה-20 שנצבעו בטכניקה זו:
https://youtu.be/mySqfF4HCwg
הסבר ודוגמאות מדהימות של צביעת תמונות והחיים שזה מכניס בהן:
https://youtu.be/2KX6-QaE84Y?long=yes
התפתחות הצביעה של התמונות הובילה בהמשך לצביעת סרטים:
https://youtu.be/vubuBrcAwtY?long=yes
אתרים חינמיים המאפשרים לצבוע תמונות ישנות שלכם אונליין:
https://youtu.be/HJmP8mbkfXI?long=yes
בשנים האחרונות הולכת ותופסת את מקומה טכנולוגיה מבוססת בינה מלאכותית (AI) שנקראת דיפ פייק (Deepfake). טכנולוגיה זו משמשת לייצור או שינוי תוכן וידאו כך שהיא מציגה מציאות שלמעשה לא התרחשה מעולם. מנאומים שלא ננאמו מעבירים מסרים בדויים מפיהם לכאורה, של אנשים מפורסמים ועד סרטונים "פסאודו-תיעודיים", שמציגים מראות וטקסטים מדוברים, שנראים אמיתיים אך מעולם לא צולמו והוקלטו.
ענף חדש בעולם הדיפ פייק הוא יישום שזכה לשם "דיפ נוסטלגיה" (™Deep Nostalgia), המנפיש את פניהם של אנשים שצולמו בתמונות ישנות או היסטוריות, ומזיז את פניהם, כאילו צולמו בווידאו.
הטכנולוגיה הזו פועלת על כל תמונת סטילס (תמונות קפואות), כולל תמונות בשחור-לבן ותמונות שצולמו בצבע.
השם ניתן ליישום פורץ דרך זה על ידי חברת MyHeritage, שעוסקת בפיתוח טכנולוגיה ליצירת עצי משפחה מקוונים.
סרטוני הדיפ נוסטלגיה התפרסמו כשאנשים שיתפו עם בני משפחתם וחבריהם סרטונים קצרים ומונפשים שנוצרו כך, ובהם קרוביהם ואבותיהם מזיזים את ראשיהם, מצמצים, מחייכים ונעים בצורה ריאליסטית כמעט לחלוטין.
#איך פועלת הדיפ נוסטלגיה?
דיפ נוסטלגיה מחזירה, אם כן, לחיים אנשים שצולמו בצילומי סטילס. זה מתחיל באיתור פני המצולמים בתמונות ואז הפקה של מחוות ותנועות מציאותיות, ממש כאילו צולמו בווידאו. ההנפשה של הפנים בתמונות הסטילס מראה אותם מחייכים, זזים וממצמצים, כאילו צולמו כך במקור.
בבסיס הטכנולוגי של יישום ה"דיפ נוסטלגיה" פועל אלגוריתם למידה עמוקה (Deep Learning), המחבר בין תווי הפנים של המצולמים לבין אוסף מחוות שצולמו בווידאו ושמורים במאגר החברה.
פיתוח וצילום אותן מחוות נעשה כשצילמו אנשי מיי הריטג' מראש שלל מקטעי וידאו של שחקנים ועובדי החברה, המזיזים את ראשיהם ופניהם באורח טבעי, ממצמצים, מחייכים ומפנים את ראשם לכיוונים שונים.
למעשה שכרה חברת MyHeritage רישיון מחברת D-ID, לטכנולוגיה שפותחה בה ומאפשרת שחזור, באמצעות טכנולוגיית למידה עמוקה, של סרטוני וידאו.
על מנת שאפקט ההנפשה יופעל על התמונות, ברזולוציה הכי גבוהה האפשרית, עוברות תמונות מטושטשות חידוד אוטומטי, שמבצעת הטכנולוגיה החדשנית, מה שמעלה באופן דרמטי את איכות הסרטונים המופקים בה.
ההברקה האמיתית של הטכנולוגיה הזו נעוצה בזיהוי והבחירה האוטומטית שמבצע יישום הדיפ נוסטלגיה, מבין מקטעי המחוות בווידאו. ניתוח מהיר של מנח הראש וכיוון העיניים של המצולמים בתמונה מאפשרים ליישום להתאים להם באופן חכם את מחוללי ההנפשה המיטביים ולייצר את הסרטונים המונפשים באופן אופטימלי.
#ממה נמנעו מפתחי הדיפ נוסטלגי?
אנשי חברת MyHeritage ומפתחי היישום המלהיב נמנעו מהוספת דיבור לסרטונים.
לאור העובדה שטכנולוגיית הדיפ פייק ידועה ביכולות המטורפות שלה, גם בתחום הדיבור, נשאלת השאלה מדוע. הרי ניתן היה לשתול בפי המצולמים טקסטים מדוברים, שהיו נשמעים אמיתיים, על אף שמעולם לא צולמו והוקלטו.
ראשית, חשוב לומר שזיהוי קולי של המצולמים, ככל שמדובר באנשים שקרוביהם זוכרים עדיין את קולם האמיתי, היה מפחית את אפקט המציאות שיוצרים הסרטונים הללו.
אבל יש עוד סיבה לכך.
ב-MyHeritage מציינת שההימנעות מאפקטים קוליים של דיבור היא מכוונת. מטרתה, הם מטעימים, היא "למנוע שימושים זדוניים בכלי", דוגמת אלה שנעשים בסרטוני "דיפ פייק" של פוליטיקאים וידוענים שעודם בחיים.
לכן הם גם מבקשים מהמשתמשים לעשות בכלי שימוש רק על תמונות היסטוריות השייכות להם ולהימנע משימוש בתמונות של אנשים חיים, שלא אישרו את השימוש הזה.
הסבר לטכנולוגיה (עברית):
https://youtu.be/O4VPN_YjgIM?t=21s
הנה הדיפ נוסטלגיה:
https://youtu.be/tjBYSnoAWqg
ציורים מפורסמים שקמים לתחייה:
https://youtu.be/TWY1uBK4Zxc
ואפילו דיקטטורים קמים לתחיה עם הדיפ נוסטלגיה של מיי הריטג':
https://youtu.be/a-HR03bToew
