แกะรอย GPT ตอน 3

พงษ์ระพี เตชพาหพงษ์ ตอนที่แล้วผมแกะรอยเล่าถึง ความหมายของ G ตัวแรกในคำย่อ GPT ไปแล้ว ทีนี้มาดูตัวที่สองกันนั่นก็คือ P ซึ่งเป็นอักษรย่อจากคำว่า Pre-trained ตรงนี้แหละน่าสนใจ เรามาแยกเป็น subword ก่อนนะ เริ่มที่คำ trained ใครอย่าไปนึกว่ามันคือ “รถไฟ” เชียวนะ ไม่ใช่ๆ มันก็คือ “การเทรน” ที่เป็นคำทับศัพท์ในภาษาไทยนั่นแหละ และในรูปต่อด้วย “ed” ก็แปลว่า “มันถูกเทรนมาเรียบร้อยแล้ว” คำถามถัดมา แล้วการเทรนคืออะไร โอว ตรงนี้ถ้าเล่าละเอียด ก็คงยาวมาก เอาเป็นว่า ระบบจะเอาข้อมูลข้อความที่ไปกวาดมาทั้งหนังสือ ในเน็ตนับพันล้านคำมาแปลงเป็นตัวเลขในหน้าตาของเมตริกซ์ (ตรงนี้ต้องใช้ความรู้คณิตศาสตร์ที่เรียกว่า Algebra ช่วย ใครเรียนมอปลายสายวิทย์ก็อาจจะคุ้นเคยดีนะ แต่จะลืมไปแล้วหรือเปล่าก็มาว่ากันอีกที) จากนั้นก็ถูกนำไปประมวลผลตามสถาปัตยกรรมหลายซับหลายซ้อน จนได้เมตริกซ์ที่ตกผลึกมาเก็บไว้ ตรงนี้แหละคือ “การเทรนดาต้าเซต” เรื่องที่มหัศจรรย์เกินจินตนาการก็คือ ไอ้ตัวเลขเหล่านี้ มันทำให้ระบบเข้าใจภาษา เข้าใจความหมาย ความต้องการของผู้ใช้ และสามารถไปดึงคำตอบจากสิ่งที่เทรนมาได้ คิดแล้วมันน่าอัศจรรย์ใจจริงๆ เอาไว้มีโอกาสจะมาเล่าเชิงเทคนิคพวกนี้ให้ฟังอีกทีนะครับ และเมื่อได้ข้อมูลที่ผ่านการเทรนมาแล้ว […]

มาต่อตอนสอง แกะรอย chatGPT (2)

พงษ์ระพี เตชพาหพงษ์ จากตอนแรก ผมเล่าถึงเส้นทางที่ OpenAI ตาลุกวาวกับเปเปอร์ใหม่ Attention is all you need แล้วเอามาทำเป็น ChatGPT โดยดึงเอาฝั่ง Decoder มาโมต่อ ซึ่งฝั่งนี้เรียกว่า GPT ส่วนฝั่ง Encoder นั้นเรียกว่า BERT ส่วนที่น่าสนใจฝั่ง GPT ที่พวกเราเริ่มคุ้นกับคำย่อสามตัวอักษรนี้ หลายคนอาจจะผ่านตากับคำเต็มไปบ้าง โดยเฉพาะคำแรก G ซึ่งมาจากคำว่า Generative ยิ่งไปเจอกับคำว่า Generative AI ยิ่งคุ้นเข้าไปใหญ่ แต่อาจจะมีหลายคนสงสัยว่า เอ๊ะ! ทำไมใช้คำว่า Generative ทำไมไม่ใช้คำว่า General ไปเลย จะได้สื่อให้ชัดว่า “สารพัดอย่าง” เช่นเดียวกับสำนวน “General เบ๊” คำตอบคือ “ไม่ได้เกี่ยวกันครับ” Generative คำนี้หมายถึง “การสร้างใหม่” และถ้าจะพูดให้ลึกไปกว่านั้น คำนี้มันเป็นคำจากคณิตศาสตร์สาขาสถิติต่างหาก โดยโยงไปถึง “Generative […]

Potential to locate life on Mars with Artificial Intelligence

ศักยภาพในการค้นหาสิ่งมีชีวิตบนดาวอังคารด้วยปัญญาประดิษฐ์ ทีมนักวิจัยนานาชาติพบว่าปัญญาประดิษฐ์ (AI) สามารถช่วยระบุรูปแบบที่ซ่อนอยู่ในข้อมูลทางภูมิศาสตร์eที่อาจบ่งบอกถึงสิ่งมีชีวิตบนดาวอังคาร  An international team of researchers has found that Artificial Intelligence (AI) can help identify hidden patterns within geographical data that could indicate life on Mars. ศักยภาพในการค้นหาสิ่งมีชีวิตบนดาวอังคารด้วยปัญญาประดิษฐ์ เนื่องจากมีโอกาสเพียงไม่กี่ครั้งในการเก็บตัวอย่างจากดาวอังคารในการค้นหาสิ่งมีชีวิตนอกโลก จึงจำเป็นอย่างยิ่งที่ภารกิจเหล่านี้จะต้องกำหนดเป้าหมายไปยังสถานที่ที่มีโอกาสดีที่สุดในการดำรงชีวิตนอกโลก การศึกษาใหม่ซึ่งนำโดยทีมนักวิจัยนานาชาติกว่า 50 คน ทำให้มั่นใจได้ว่าสิ่งนี้ได้รับการสนับสนุนโดยใช้วิธีปัญญาประดิษฐ์และการเรียนรู้ของเครื่อง เทคโนโลยีนี้สามารถใช้เพื่อระบุรูปแบบที่ซ่อนอยู่ภายในข้อมูลทางภูมิศาสตร์ที่สามารถบ่งชี้ถึงการมีอยู่ของสิ่งมีชีวิตบนดาวอังคาร  งาน ‘Orbit-to-Ground Framework to Decode and Predict Biosignature Patterns in Terrestrial Analogues’ ได้รับการตีพิมพ์ใน Nature Astronomy แบบจำลองที่ได้นั้นสามารถระบุตำแหน่งชีวประวัติที่มีศักยภาพในการระบุสิ่งมีชีวิตบนดาวอังคาร  ส่วนแรกของการศึกษาซึ่งนำโดย Dr […]

How ChatGPT and Generative AI Can Transform the Way You Run Your Business

บทความนี้กล่าวถึงผลกระทบที่อาจเกิดขึ้นจาก AI กำเนิด โดยเฉพาะ ChatGPT ต่อแง่มุมต่างๆ ของการดำเนินธุรกิจ เช่น การคิดผลิตภัณฑ์ใหม่ การจัดการโครงการ การบริการลูกค้า การตลาด และการพัฒนาซอฟต์แวร์ โดยเน้นย้ำว่าการประมวลผลภาษาธรรมชาติและคุณลักษณะการสร้างสรรค์ของ ChatGPT สามารถเพิ่มประสิทธิภาพกระบวนการคิดและทำให้พนักงานมีประสิทธิผลมากขึ้นได้อย่างไร กรณีการใช้งานอื่นๆ สำหรับ generative AI ได้แก่ การตลาด การบริการลูกค้า และการซื้อขายอัตโนมัติ บทความนี้ยังรับทราบถึงข้อจำกัดของ generative AI เช่น การพึ่งพาคุณภาพของอินพุตและข้อมูลการฝึกอบรม อย่างไรก็ตาม มันเน้นถึงประโยชน์ที่เป็นไปได้ของเทคโนโลยีนี้และกระตุ้นให้ผู้ประกอบการสำรวจความเป็นไปได้ของมัน The article discusses the potential impact of generative AI, specifically ChatGPT, on various aspects of business operations such as new product ideation, project management, […]

The way we work is about to change

ยักษ์ใหญ่ด้านเทคโนโลยีอย่าง Microsoft, Google และ OpenAI ได้เปิดตัวฟีเจอร์ใหม่ที่ขับเคลื่อนด้วย AI ซึ่งสัญญาว่าจะช่วยให้ผู้ใช้ทำงานได้อย่างมีประสิทธิภาพมากขึ้น เร็วๆ นี้ แพลตฟอร์ม Microsoft 365 จะช่วยให้ผู้ใช้สามารถขอให้ผู้ช่วยเสมือนจริงถอดข้อความบันทึกการประชุม สรุปหัวข้ออีเมลขนาดยาว และสร้างแผนภูมิและงานนำเสนอ ในขณะที่แพลตฟอร์ม Google Docs จะนำเสนอการระดมสมองและการพิสูจน์อักษรที่ขับเคลื่อนด้วย AI ผู้ใช้ Slack ยังสามารถใช้เครื่องมือ ChatGPT ของ OpenAI เพื่อสรุปการสนทนา เขียนข้อความ และตอบกลับเพื่อนร่วมงาน แม้ว่าเครื่องมือใหม่เหล่านี้จะให้ผลผลิตที่มากขึ้น แต่ความกังวลยังคงมีอยู่ว่าทุกคนจะใช้เครื่องมือเหล่านี้หรือไม่ และจะเป็นไปตามโฆษณาหรือไม่ Tech giants like Microsoft, Google, and OpenAI have unveiled new AI-powered features that promise to help users work more efficiently. Microsoft’s 365 […]

Meet ViperGPT: A Python Framework that Combines Vision and Language Models Using Code Generation to Achieve State-of-the-Art Results.

การทำงานที่ก้าวล้ำของ Neural Module Networks ในปีก่อนๆ มีเป้าหมายที่จะแบ่งงานออกเป็นโมดูลที่ง่ายขึ้น ผ่านการฝึกอบรมตั้งแต่ต้นจนจบโดยใช้โมดูลที่ได้รับการกำหนดค่าใหม่สำหรับปัญหาต่างๆ แต่ละโมดูลจะเรียนรู้จุดประสงค์ที่แท้จริงและสามารถนำมาใช้ซ้ำได้ อย่างไรก็ตาม ต้องใช้ความพยายามอย่างมากในการใช้กลยุทธ์นี้ในโลกแห่งความเป็นจริงเนื่องจากปัญหาหลายประการ โดยเฉพาะอย่างยิ่งการพัฒนาโปรแกรมจำเป็นต้องมีการเรียนรู้เสริมตั้งแต่เริ่มต้นหรือพึ่งพาโปรแกรมแยกวิเคราะห์ภาษาธรรมชาติที่ปรับแต่งด้วยมือ ทำให้โปรแกรมเหล่านี้มีความท้าทายในการปรับให้เหมาะสม การสร้างโปรแกรมถูกจำกัดขอบเขตอย่างมากในแต่ละสถานการณ์ การฝึกอบรมทำได้ยากขึ้นมากเนื่องจากการเรียนรู้แบบจำลองการรับรู้ควบคู่ไปกับตัวสร้างโปรแกรม ซึ่งมักจะไม่สามารถจัดเตรียมโครงสร้างโมดูลาร์ที่ต้องการได้ Meet ViperGPT: A Python Framework that Combines Vision and Language Models Using Code Generation to Achieve State-of-the-Art Results. The groundbreaking work of Neural Module Networks in prior years aimed to break down jobs into simpler modules. Through training from beginning to […]

Anthropic Introduces Claude: An AI Assistant Redefining Trust, Helpfulness, and Harmlessness with Next-Generation Technology.

Anthropic บริษัทด้านความปลอดภัยและการวิเคราะห์ AI ได้เปิดตัว Claude ซึ่งเป็นคู่แข่งรายใหม่ของ ChatGPT Claude เป็นผู้ช่วย AI ที่สร้างขึ้นด้วยความสามารถในการสนทนาและการประมวลผลข้อความ อะไรทำให้ Claude แตกต่างจาก ChatGPT ผู้ก่อตั้ง Anthropic ซึ่งเป็นอดีตรองประธานฝ่ายวิเคราะห์ ความปลอดภัย และการรายงานข่าวของ OpenAI ได้สร้างClaude บนสมมติฐานที่ว่า AI ควรมีประโยชน์ เชื่อถือได้ และไร้เดียงสา ตรงกันข้ามกับแชทบอท AI อื่นๆ Claude ตั้งเป้าหมายที่จะจัดหา AI ที่ปลอดภัยกว่าซึ่งมีการตอบสนองที่เป็นพิษ มีอคติ และประสาทหลอนน้อยกว่ามาก เพื่อให้การพัฒนาอย่างรวดเร็วของ AI ส่งผลเชิงบวกต่อโลก Anthropic, an AI security and analysis firm, introduced the arrival of a brand new ChatGPT rival, Claude. Claude is an AI assistant constructed with conversational and text-processing capabilities. What separates Claude from ChatGPT? Anthropic’s founders – former VPs of analysis, security, and coverage at OpenAI – constructed Claude on the premise that AI […]

Artificial Intelligence in China: Implications and Opportunities.

บทความนี้กล่าวถึงผลกระทบและโอกาสของ Generative AI ในประเทศจีน Generative AI หมายถึงระบบ AI ที่สร้างเนื้อหาใหม่ตามข้อมูลที่ได้รับการฝึกอบรม จีนได้สร้างรากฐานที่แข็งแกร่งสำหรับการพัฒนา AI ด้วยความสามารถด้านวิศวกรรมจำนวนมากและสภาพแวดล้อมด้านนโยบายที่สนับสนุน หลายอุตสาหกรรม เช่น อินเทอร์เน็ต การเงิน การค้าปลีก รัฐบาล และโทรคมนาคม ได้นำ AI มาใช้แล้ว บริษัทต่างๆ เช่น Baidu, ByteDance, Alibaba และ Tencent อยู่ในสถานะความพร้อมที่ดีในการพัฒนาโมเดล Generative AI เนื่องจากข้อมูลจำนวนมาก อุตสาหกรรมเซมิคอนดักเตอร์ของจีนอาจได้รับประโยชน์จากการลงทุนโครงสร้างพื้นฐานที่จำเป็นสำหรับการพัฒนา AI โดยรวมแล้ว จีนมีศักยภาพที่จะกลายเป็นผู้เล่นหลักในอุตสาหกรรม AI ระดับโลก The article discusses the implications and opportunities of generative artificial intelligence (AI) in China. Generative AI […]

จุดกำเนิดของ ChatGPT (1)

บิ๊ก พงษ์ระพี เตชพาหพงษ์ / pongrapee@gmail.com วันนี้ผมจะมาเล่าเกร็ดเล็กเกร็ดน้อยของประวัติที่มาการเกิดของ ChatGPT นะครับ โลกของ Generative AI เดินทางมาจุดเปลี่ยนใหญ่อีกครั้งเมื่องานเปเปอร์ที่ชื่อว่า Attention is all you need ของนาย Vaswani ตีพิมพ์ออกมา (pdf) ในปี 2017 โดยผมเข้าใจว่าความตั้งใจแรกของ Vaswani คือการแก้ปัญหาของโมเดล RNN ที่เทรนได้ช้าและลืมง่าย โดยนำเสนอ Mechanism ตัวใหม่ที่ชื่อว่า Self Attention แล้วก็ประกอบร่างส่วนต่างๆเป็นสถาปัตยกรรมใหม่ที่เรียกว่า “Transformer” ทั้งหมดนี้เป็นการพัฒนาเรื่องของ NLP (Natural Language Processing) พูดง่ายๆคือทำให้พวกงานภาษาทำงานได้ดีขึ้นนั่นเอง (พวกแปลภาษา พวกสรุปความ ฯลฯ) ผมคิดว่า Vaswani คงอึ้ง เมื่อสิ่งที่เขาคิดมันได้ถูกต่อยอดและเดินทางมาถึงขนาดนี้ ว่าไปแล้วคงไม่ต่างจากซาโตชิ นากาโมโตะที่คิดบิทคอยน์เพื่อเป็น electronic cash แต่มันก็ได้เดินทางไปไกลมากกว่านั้นเยอะ สถาปัตยกรรม Transformer […]

Shibarium Failed ?

DogCoin (DOGS) Offered Shiba Inu community to become Layer 1 network of Shiba Inu. DogCoin (DOGS) เป็นโครงการเลเยอร์ 1 ที่มุ่งเน้น AI ซึ่งมีจุดมุ่งหมาย เพื่อแก้ปัญหาการทำธุรกรรมที่มีราคาแพงและช้า สิ่งนี้ทำให้เกมเมอร์ได้รับประสบการณ์การเล่นเกมที่ดีที่สุดเท่าที่จะเป็นไปได้ ทำให้พวกเขาทำธุรกรรมได้ในราคาถูก รวดเร็ว และปลอดภัย  DogCoin (DOGS) is a AI focused layer 1 project that aims to solve the issue of expensive and slow transactions. This allows gamers the best gaming experience possible, giving them cheap, fast and secure transactions. Shibarium ล้มเหลว ?  Shiba inu กำลังเปิดตัวเครือข่าย blockchain เลเยอร์ 2 ที่รู้จักกันในชื่อ shibarium และพวกเขาทำงานนี้มาเป็นเวลานาน และตอนนี้มีรายงานว่า shibarium เป็นสำเนาของ rinia […]

1 91 92 93 94 95 104