Конструювання підказок (Ukrainian Wikipedia)

Analysis of information sources in references of the Wikipedia article "Конструювання підказок" in Ukrainian language version.

refsWebsite
Global rank Ukrainian rank
69th place
188th place
2nd place
4th place
11th place
964th place
1,272nd place
1,695th place
616th place
1,399th place
1,559th place
901st place
1,943rd place
6,396th place
7th place
43rd place
5th place
9th place
272nd place
587th place
low place
low place
low place
low place
low place
low place
low place
low place
175th place
1,219th place
8,313th place
low place
low place
low place
low place
low place
low place
low place
low place
low place
low place
low place
187th place
299th place
low place
low place
896th place
1,786th place
low place
low place
low place
low place
786th place
2,146th place
low place
low place
551st place
724th place
low place
low place
low place
low place
low place
low place
low place
low place
3,700th place
low place
2,503rd place
4,314th place
388th place
490th place
34th place
140th place
61st place
172nd place
low place
low place
149th place
211th place
4th place
5th place
383rd place
596th place
low place
low place
193rd place
471st place
895th place
2,868th place

aclanthology.org

alignmentforum.org

  • Mesa-Optimization (англ.). Процитовано 17 травня 2023. Мезаоптимізація — це ситуація, яка виникає, коли навчена модель (така як нейронна мережа) сама є оптимізатором.

arstechnica.com

arxiv.org

  • Garg, Shivam; Tsipras, Dimitris; Liang, Percy; Valiant, Gregory (2022). What Can Transformers Learn In-Context? A Case Study of Simple Function Classes (англ.). arXiv:2208.01066 [cs.CL].
  • Wei, Jason; Tay, Yi; Bommasani, Rishi; Raffel, Colin; Zoph, Barret; Borgeaud, Sebastian; Yogatama, Dani; Bosma, Maarten; Zhou, Denny; Metzler, Donald; Chi, Ed H.; Hashimoto, Tatsunori; Vinyals, Oriol; Liang, Percy; Dean, Jeff; Fedus, William (31 серпня 2022). Emergent Abilities of Large Language Models (англ.). arXiv:2206.07682 [cs.CL]. У підказуванні наперед натренована мовна модель отримує підказку (наприклад, вказівку природною мовою) завдання та завершує відповідь без жодного подальшого тренування чи градієнтних уточнень її параметрів... Здатність виконувати завдання за допомогою підказки з кількох поглядів є емерджентною, коли модель має випадкову продуктивність до певного масштабу, після чого продуктивність зростає до значно вищої за випадкову
  • Caballero, Ethan; Gupta, Kshitij; Rish, Irina; Krueger, David (2022). "Broken Neural Scaling Laws". International Conference on Learning Representations (ICLR), 2023. (англ.)
  • Wei, Jason; Tay, Yi; Bommasani, Rishi; Raffel, Colin; Zoph, Barret; Borgeaud, Sebastian; Yogatama, Dani; Bosma, Maarten; Zhou, Denny; Metzler, Donald; Chi, Ed H.; Hashimoto, Tatsunori; Vinyals, Oriol; Liang, Percy; Dean, Jeff; Fedus, William (31 серпня 2022). Emergent Abilities of Large Language Models (англ.). arXiv:2206.07682 [cs.CL].
  • Wei, Jason; Wang, Xuezhi; Schuurmans, Dale; Bosma, Maarten; Ichter, Brian; Xia, Fei; Chi, Ed H.; Le, Quoc V.; Zhou, Denny (31 жовтня 2022). Chain-of-Thought Prompting Elicits Reasoning in Large Language Models (англ.). arXiv:2201.11903 [cs.CL].
  • Johannes von Oswald; Niklasson, Eyvind; Randazzo, Ettore; Sacramento, João; Mordvintsev, Alexander; Zhmoginov, Andrey; Vladymyrov, Max (2022). Transformers learn in-context by gradient descent (англ.). arXiv:2212.07677 [cs.LG]. Отже, ми показуємо, як натреновані трансформери стають мезаоптимізаторами, тобто навчаються моделей за допомогою градієнтного спуску на своєму прямому проході
  • Garg, Shivam; Tsipras, Dimitris; Liang, Percy; Valiant, Gregory (2022). What Can Transformers Learn In-Context? A Case Study of Simple Function Classes (англ.). arXiv:2208.01066 [cs.CL]. Навчання моделі виконувати навчання в контексті можливо розглядати як примірник загальнішого навчання навчатися, або парадигми метанавчання
  • Sanh, Victor та ін. (2021). Multitask Prompted Training Enables Zero-Shot Task Generalization (англ.). arXiv:2110.08207 [cs.LG].
  • Bach, Stephen H.; Sanh, Victor; Yong, Zheng-Xin; Webson, Albert; Raffel, Colin; Nayak, Nihal V.; Sharma, Abheesht; Kim, Taewoon; M Saiful Bari; Fevry, Thibault; Alyafeai, Zaid; Dey, Manan; Santilli, Andrea; Sun, Zhiqing; Ben-David, Srulik; Xu, Canwen; Chhablani, Gunjan; Wang, Han; Jason Alan Fries; Al-shaibani, Maged S.; Sharma, Shanya; Thakker, Urmish; Almubarak, Khalid; Tang, Xiangru; Radev, Dragomir; Mike Tian-Jian Jiang; Rush, Alexander M. (2022). PromptSource: An Integrated Development Environment and Repository for Natural Language Prompts (англ.). arXiv:2202.01279 [cs.LG].
  • Kojima, Takeshi; Shixiang Shane Gu; Reid, Machel; Matsuo, Yutaka; Iwasawa, Yusuke (2022). Large Language Models are Zero-Shot Reasoners (англ.). arXiv:2205.11916 [cs.CL].
  • Chung, Hyung Won; Hou, Le; Longpre, Shayne; Zoph, Barret; Tay, Yi; Fedus, William; Li, Yunxuan; Wang, Xuezhi; Dehghani, Mostafa; Brahma, Siddhartha; Webson, Albert; Gu, Shixiang Shane; Dai, Zhuyun; Suzgun, Mirac; Chen, Xinyun; Chowdhery, Aakanksha; Castro-Ros, Alex; Pellat, Marie; Robinson, Kevin; Valter, Dasha; Narang, Sharan; Mishra, Gaurav; Yu, Adams; Zhao, Vincent; Huang, Yanping; Dai, Andrew; Yu, Hongkun; Petrov, Slav; Chi, Ed H.; Dean, Jeff; Devlin, Jacob; Roberts, Adam; Zhou, Denny; Le, Quoc V.; Wei, Jason (2022). Scaling Instruction-Finetuned Language Models (англ.). arXiv:2210.11416 [cs.LG].
  • Zhou, Denny; Schärli, Nathanael; Hou, Le; Wei, Jason; Scales, Nathan; Wang, Xuezhi; Schuurmans, Dale; Cui, Claire; Bousquet, Olivier; Le, Quoc; Chi, Ed (1 травня 2022). Least-to-Most Prompting Enables Complex Reasoning in Large Language Models (англ.). arXiv:2205.10625 [cs.AI]. ... підказування від найменшого до найбільшого. Ключова ідея в цій стратегії — розбивати складну задачу на низку простіших підзадач, і потім розв'язувати їх послідовно.
  • Wang, Xuezhi; Wei, Jason; Schuurmans, Dale; Le, Quoc; Chi, Ed; Narang, Sharan; Chowdhery, Aakanksha; Zhou, Denny (1 березня 2022). Self-Consistency Improves Chain of Thought Reasoning in Language Models (англ.). arXiv:2203.11171 [cs.CL].
  • Diao, Shizhe; Wang, Pengcheng; Lin, Yong; Zhang, Tong (1 лютого 2023). Active Prompting with Chain-of-Thought for Large Language Models (англ.). arXiv:2302.12246 [cs.CL].
  • Fu, Yao; Peng, Hao; Sabharwal, Ashish; Clark, Peter; Khot, Tushar (1 жовтня 2022). Complexity-Based Prompting for Multi-Step Reasoning (англ.). arXiv:2303.17651 [cs.CL].
  • Madaan, Aman; Tandon, Niket; Gupta, Prakhar; Hallinan, Skyler; Gao, Luyu; Wiegreffe, Sarah; Alon, Uri; Dziri, Nouha; Prabhumoye, Shrimai; Yang, Yiming; Gupta, Shashank; Prasad Majumder, Bodhisattwa; Hermann, Katherine; Welleck, Sean; Yazdanbakhsh, Amir (1 березня 2023). Self-Refine: Iterative Refinement with Self-Feedback (англ.). arXiv:2303.17651 [cs.CL].
  • Long, Jieyi (15 травня 2023). Large Language Model Guided Tree-of-Thought (англ.). arXiv:2305.08291 [cs.AI].
  • Yao, Shunyu; Yu, Dian; Zhao, Jeffrey; Shafran, Izhak; Griffiths, Thomas L.; Cao, Yuan; Narasimhan, Karthik (17 травня 2023). Tree of Thoughts: Deliberate Problem Solving with Large Language Models (англ.). arXiv:2305.10601 [cs.CL].
  • Jung, Jaehun; Qin, Lianhui; Welleck, Sean; Brahman, Faeze; Bhagavatula, Chandra; Le Bras, Ronan; Choi, Yejin (2022). Maieutic Prompting: Logically Consistent Reasoning (англ.). arXiv:2205.11822 [cs.CL].
  • Li, Zekun; Peng, Baolin; He, Pengcheng; Galley, Michel; Gao, Jianfeng; Yan, Xifeng (2023). Guiding Large Language Models via Directional Stimulus Prompting (англ.). arXiv:2302.11520 [cs.CL]. Спрямовувальний стимул слугує як натяки або підказки для кожного вхідного запиту для спрямовування ВММ до бажаного результату, такі як ключові слова, які повинно містити бажане узагальнення.
  • OpenAI (27 березня 2023). GPT-4 Technical Report (англ.). arXiv:2303.08774 [cs.CL]. [Див. рисунок 8.]
  • Lewis, Patrick; Perez, Ethan; Piktus, Aleksandra; Petroni, Fabio; Karpukhin, Vladimir; Goyal, Naman; Küttler, Heinrich; Lewis, Mike; Yih, Wen-tau; Rocktäschel, Tim; Riedel, Sebastian; Kiela, Douwe (2020). Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks. Advances in Neural Information Processing Systems (англ.). Curran Associates, Inc. 33: 9459—9474. arXiv:2005.11401.
  • Fernando, Chrisantha; Banarse, Dylan; Michalewski, Henryk; Osindero, Simon; Rocktäschel, Tim (2023). Promptbreeder: Self-Referential Self-Improvement Via Prompt Evolution (англ.). arXiv:2309.16797.
  • Pryzant, Reid; Iter, Dan; Li, Jerry; Lee, Yin Tat; Zhu, Chenguang; Zeng, Michael (2023). Automatic Prompt Optimization with "Gradient Descent" and Beam Search (англ.). arXiv:2305.03495.
  • Guo, Qingyan; Wang, Rui; Guo, Junliang; Li, Bei; Song, Kaitao; Tan, Xu; Liu, Guoqing; Bian, Jiang; Yang, Yujiu (2023). Connecting Large Language Models with Evolutionary Algorithms Yields Powerful Prompt Optimizers (англ.). arXiv:2309.08532.
  • Zhou, Yongchao; Ioan Muresanu, Andrei; Han, Ziwen; Paster, Keiran; Pitis, Silviu; Chan, Harris; Ba, Jimmy (1 листопада 2022). Large Language Models Are Human-Level Prompt Engineers (англ.). arXiv:2211.01910 [cs.LG].
  • Zhang, Zhuosheng; Zhang, Aston; Li, Mu; Smola, Alex (1 жовтня 2022). Automatic Chain of Thought Prompting in Large Language Models (англ.). arXiv:2210.03493 [cs.CL].
  • Gal, Rinon; Alaluf, Yuval; Atzmon, Yuval; Patashnik, Or; Bermano, Amit H.; Chechik, Gal; Cohen-Or, Daniel (2022). An Image is Worth One Word: Personalizing Text-to-Image Generation using Textual Inversion (англ.). arXiv:2208.01618 [cs.CV]. Використовуючи лише 3—5 зображень наданої користувачем концепції, як-от об'єкту чи стилю, ми вчимося подавати її за допомогою нових „слів“ у просторі вкладення замороженої моделі зображення за текстом
  • Kirillov, Alexander; Mintun, Eric; Ravi, Nikhila; Mao, Hanzi; Rolland, Chloe; Gustafson, Laura; Xiao, Tete; Whitehead, Spencer; Berg, Alexander C.; Lo, Wan-Yen; Dollár, Piotr; Girshick, Ross (1 квітня 2023). Segment Anything (англ.). arXiv:2304.02643 [cs.CV].
  • Lester, Brian; Al-Rfou, Rami; Constant, Noah (2021). The Power of Scale for Parameter-Efficient Prompt Tuning. Proceedings of the 2021 Conference on Empirical Methods in Natural Language Processing (англ.). с. 3045—3059. arXiv:2104.08691. doi:10.18653/V1/2021.EMNLP-MAIN.243. S2CID 233296808. У цій праці ми досліджуємо „настроювання підказок“, простий але дієвий механізм для навчання „м'яких підказок“... На відміну від дискретних текстових підказок, які використовує GPT-3, м'яких підказок навчаються зворотним поширенням
  • Sun, Simeng; Liu, Yang; Iter, Dan; Zhu, Chenguang; Iyyer, Mohit (2023). How Does In-Context Learning Help Prompt Tuning? (англ.). arXiv:2302.11521 [cs.CL].
  • Greshake, Kai; Abdelnabi, Sahar; Mishra, Shailesh; Endres, Christoph; Holz, Thorsten; Fritz, Mario (1 лютого 2023). Not what you've signed up for: Compromising Real-World LLM-Integrated Applications with Indirect Prompt Injection (англ.). arXiv:2302.12173 [cs.CR].
  • Perez, Fábio; Ribeiro, Ian (2022). Ignore Previous Prompt: Attack Techniques For Language Models (англ.). arXiv:2211.09527 [cs.CL].
  • Branch, Hezekiah J.; Cefalu, Jonathan Rodriguez; McHugh, Jeremy; Hujer, Leyla; Bahl, Aditya; del Castillo Iglesias, Daniel; Heichman, Ron; Darwishi, Ramesh (2022). Evaluating the Susceptibility of Pre-Trained Language Models via Handcrafted Adversarial Examples (англ.). arXiv:2209.02128 [cs.CL].

claid.ai

cnet.com

computerweekly.com

contractnerds.com

doi.org

  • Liu, Jiacheng; Liu, Alisa; Lu, Ximing; Welleck, Sean; West, Peter; Le Bras, Ronan; Choi, Yejin; Hajishirzi, Hannaneh (Травень 2022). Generated Knowledge Prompting for Commonsense Reasoning. Proceedings of the 60th Annual Meeting of the Association for Computational Linguistics (Volume 1: Long Papers) (англ.). Dublin, Ireland: Association for Computational Linguistics: 3154—3169. doi:10.18653/v1/2022.acl-long.225. S2CID 239016123.
  • Li, Xiang Lisa; Liang, Percy (2021). Prefix-Tuning: Optimizing Continuous Prompts for Generation. Proceedings of the 59th Annual Meeting of the Association for Computational Linguistics and the 11th International Joint Conference on Natural Language Processing (Volume 1: Long Papers) (англ.). с. 4582—4597. doi:10.18653/V1/2021.ACL-LONG.353. S2CID 230433941. У цій статті ми пропонуємо настроювання префіксів, полегшену альтернативу тонкому настроюванню... Настроювання префіксів черпає натхнення з підказування
  • Lester, Brian; Al-Rfou, Rami; Constant, Noah (2021). The Power of Scale for Parameter-Efficient Prompt Tuning. Proceedings of the 2021 Conference on Empirical Methods in Natural Language Processing (англ.). с. 3045—3059. arXiv:2104.08691. doi:10.18653/V1/2021.EMNLP-MAIN.243. S2CID 233296808. У цій праці ми досліджуємо „настроювання підказок“, простий але дієвий механізм для навчання „м'яких підказок“... На відміну від дискретних текстових підказок, які використовує GPT-3, м'яких підказок навчаються зворотним поширенням
  • Shin, Taylor; Razeghi, Yasaman; Logan IV, Robert L.; Wallace, Eric; Singh, Sameer (November 2020). AutoPrompt: Eliciting Knowledge from Language Models with Automatically Generated Prompts. Proceedings of the 2020 Conference on Empirical Methods in Natural Language Processing (EMNLP) (англ.). Online: Association for Computational Linguistics. с. 4222—4235. doi:10.18653/v1/2020.emnlp-main.346. S2CID 226222232.
  • Pikies, Malgorzata; Ali, Junade (1 липня 2021). Analysis and safety engineering of fuzzy string matching algorithms. ISA Transactions (англ.). 113: 1—8. doi:10.1016/j.isatra.2020.10.014. ISSN 0019-0578. PMID 33092862. S2CID 225051510. Процитовано 13 вересня 2023.

github.blog

github.com

  • protectai/rebuff. Protect AI. 13 вересня 2023. Процитовано 13 вересня 2023.

googleblog.com

ai.googleblog.com

hackaday.com

langchain.dev

blog.langchain.dev

learnprompting.org

linkedin.com

masterofcode.com

medium.com

midjourney.com

docs.midjourney.com

  • Prompts (англ.). Процитовано 14 серпня 2023.

minimaxir.com

nccgroup.com

research.nccgroup.com

  • Selvi, Jose (5 грудня 2022). Exploring Prompt Injection Attacks. research.nccgroup.com (англ.). Підказкова ін'єкція — це нова вразливість, яка впливає на деякі моделі ШІ/МН і, зокрема, на певні типи мовних моделей, які використовують навчання на основі підказок
  • Selvi, Jose (5 грудня 2022). Exploring Prompt Injection Attacks. NCC Group Research Blog (амер.). Процитовано 9 лютого 2023.

neurips.cc

proceedings.neurips.cc

nih.gov

pubmed.ncbi.nlm.nih.gov

nvidia.com

developer.nvidia.com

nytimes.com

openai.com

cdn.openai.com

  • Radford, Alec; Wu, Jeffrey; Child, Rewon; Luan, David; Amodei, Dario; Sutskever, Ilya (2019). Language Models are Unsupervised Multitask Learners (PDF) (англ.). OpenAI blog. Ми демонструємо, що мовні моделі можуть виконувати поточні завдання в постановці з нулем поглядів — без будь-якої зміни параметрів чи архітектури

openai.com

  • OpenAI (30 листопада 2022). Introducing ChatGPT. OpenAI Blog (англ.). Процитовано 16 серпня 2023. що таке мала теорема Ферма

platform.openai.com

openart.ai

cdn.openart.ai

  • Diab, Mohamad; Herrera, Julian; Chernow, Bob (28 жовтня 2022). Stable Diffusion Prompt Book (PDF) (англ.). Процитовано 7 серпня 2023. Конструювання підказок — це процес структурування слів, які можуть бути інтерпретовними та зрозумілими для моделі „зображення за текстом“. Сприймайте це як мову, якою вам потрібно володіти, щоби казати моделі ШІ, що малювати.

sciencedirect.com

scientificamerican.com

  • Musser, George. How AI Knows Things No One Told It. Scientific American (англ.). Процитовано 17 травня 2023. На момент введення запиту до ChatGPT мережа повинна бути незмінною, на відміну від людей, вона не повинна продовжувати вчитися. Тому стало сюрпризом, що ВММ насправді вчаться з підказок своїх користувачів — здібність, відома як навчання в контексті.

searchenginejournal.com

semanticscholar.org

api.semanticscholar.org

  • Liu, Jiacheng; Liu, Alisa; Lu, Ximing; Welleck, Sean; West, Peter; Le Bras, Ronan; Choi, Yejin; Hajishirzi, Hannaneh (Травень 2022). Generated Knowledge Prompting for Commonsense Reasoning. Proceedings of the 60th Annual Meeting of the Association for Computational Linguistics (Volume 1: Long Papers) (англ.). Dublin, Ireland: Association for Computational Linguistics: 3154—3169. doi:10.18653/v1/2022.acl-long.225. S2CID 239016123.
  • Li, Xiang Lisa; Liang, Percy (2021). Prefix-Tuning: Optimizing Continuous Prompts for Generation. Proceedings of the 59th Annual Meeting of the Association for Computational Linguistics and the 11th International Joint Conference on Natural Language Processing (Volume 1: Long Papers) (англ.). с. 4582—4597. doi:10.18653/V1/2021.ACL-LONG.353. S2CID 230433941. У цій статті ми пропонуємо настроювання префіксів, полегшену альтернативу тонкому настроюванню... Настроювання префіксів черпає натхнення з підказування
  • Lester, Brian; Al-Rfou, Rami; Constant, Noah (2021). The Power of Scale for Parameter-Efficient Prompt Tuning. Proceedings of the 2021 Conference on Empirical Methods in Natural Language Processing (англ.). с. 3045—3059. arXiv:2104.08691. doi:10.18653/V1/2021.EMNLP-MAIN.243. S2CID 233296808. У цій праці ми досліджуємо „настроювання підказок“, простий але дієвий механізм для навчання „м'яких підказок“... На відміну від дискретних текстових підказок, які використовує GPT-3, м'яких підказок навчаються зворотним поширенням
  • Shin, Taylor; Razeghi, Yasaman; Logan IV, Robert L.; Wallace, Eric; Singh, Sameer (November 2020). AutoPrompt: Eliciting Knowledge from Language Models with Automatically Generated Prompts. Proceedings of the 2020 Conference on Empirical Methods in Natural Language Processing (EMNLP) (англ.). Online: Association for Computational Linguistics. с. 4222—4235. doi:10.18653/v1/2020.emnlp-main.346. S2CID 226222232.
  • Pikies, Malgorzata; Ali, Junade (1 липня 2021). Analysis and safety engineering of fuzzy string matching algorithms. ISA Transactions (англ.). 113: 1—8. doi:10.1016/j.isatra.2020.10.014. ISSN 0019-0578. PMID 33092862. S2CID 225051510. Процитовано 13 вересня 2023.

simonwillison.net

stable-diffusion-art.com

techcrunch.com

  • Wiggers, Kyle (12 червня 2023). Meta open sources an AI-powered music generator (англ.). TechCrunch. Процитовано 15 серпня 2023. Далі я дав складнішу підказку, щоб спробувати заплутати MusicGen: „Lo-Fi повільний електрочіл з органними семплами.“

technologyreview.com

theregister.com

time.com

venturebeat.com

vice.com

vulcan.io

washingtonpost.com

wired.com

worldcat.org

search.worldcat.org

zapier.com

  • Robinson, Reid (3 серпня 2023). How to write an effective GPT-3 or GPT-4 prompt. Zapier (англ.). Процитовано 14 серпня 2023. Базова підказка: „Напиши вірш про листя, що опадає.“ Краща підказка: „Напиши вірш у стилі Едгара Аллана По про листя, що опадає.“

zdnet.com