Overview This repository contains a lightweight library for evaluating language models. We are open sourcing it so we can be transparent about the accuracy numbers we're publishing alongside our latest models (starting with gpt-4-turbo-2024-04-09). Evals are sensitive to prompting, and there's significant variation in the formulations used in recent publications and libraries. Some use few-shot prompts or role playing prompts ("You are an expert software programmer..."). These a…
An LLM-powered knowledge curation system that researches a topic and generates a full-length report with citations.STORM: Synthesis of Topic Outlines through Retrieval and Multi-perspective Question Asking This repository contains the code for our NAACL 2024 paper Assisting in Writing Wikipedia-like Articles From Scratch with Large Language Models by Yijia Shao, Yucheng Jiang, Theodore A. Kanell, Peter Xu, Omar Khattab, and Monica S. Lam. Overview (Try STORM now!) STORM is a LLM system tha…
Уязвимость шестилетней давности в веб-сервере Lighttpd, используемом в BMC (Baseboard Management Controller), ускользнула от внимания многих производителей устройств, включая Intel и Lenovo. Проблема может привести к утечке адресов памяти процесса, что позволяет обойти такие защитные механизмы, как ASLR (Address Space Layout Randomization).
Агентство по кибербезопасности и защите инфраструктуры США (CISA) заявило, что расследует недавний взлом компании Sisense, занимающейся анализом данных. CISA предупреждает, что атака затронула организации критической инфраструктуры страны и призывает клиентов Sisense срочно заменить все учетные данные и токены доступа, связанные с инструментами и сервисами компании.
Четыре года назад ИТ-эксперт Чип Хуэн* проанализировала экосистему ML с открытым исходным кодом. С тех пор многое изменилось, и она вернулась к изучению темы, на этот раз сосредоточившись исключительно на стеке вокруг базовых моделей.О результатах нового исследования читайте под катом.*Обращаем ваше внимание, что позиция автора может не всегда совпадать с мнением МойОфис. ДанныеЯ искала на GitHub по ключевым словам gpt, llm и generative ai. Результаты поиска подтвердили огромную популярность …
Двадцать лет назад я ввязался в публичную перепалку (дружескую) с Крисом Андерсоном, работавшим тогда главным редактором Wired. Я публично выразил своё разочарование публикуемыми в Wired радужными обзорами отягощённых DRM цифровых устройств. Андерсон сказал, что я идеалист, если жду, что журнал откажется от обзоров гаджетов из-за DRM: https://longtail.typepad.com/the_long_tail/2004/12/is_drm_evil.html Я публично ответил, сказав ему, что он неправильно меня понял. Дело было не в идеологическ…
Когда-то поспособствовало расширению лично моих представлений:Одна московская знакомая росла в Нью-Йорке в 70-х годах: её отец был советским специалистом в ООН. Смотрят как-то юмористическую передачу на американском TV: она, подросток, ухохатывается — отец ничего не понимает, хотя прошёл какие-то немыслимые тесты и языком владел отлично.С тех пор её работа так или иначе связана с английским. В бюро переводов, где мы познакомились, она была редактором — проверяла уже сделанные переводы на налич…
Меня зовут Александр Гирев, я Android-разработчик и технический интервьюер. Мне доводилось следить за качеством собеседований в компании, разрабатывать рекомендации и матрицы вопросов, обучать начинающих интервьюеров.Однажды на интервью я спросил кандидата, был ли у него опыт проведения технических собеседований. Кандидат ответил неожиданным образом: «Что за опыт — задать пару технических вопросов?». Услышав это, я слегка подвис. Я считал интервью серьёзным навыком, почти искусством. Ранее моя…
Как только 4 октября 1957 года Советский Союз запустил в космос первый искусственный спутник, в США задумались о методах космической безопасности и войны. Ученые и инженеры США и СССР вели разработки в разных направлениях, включая военные. Речь пойдёт о 60-х годах XX века, о временах ещё до высадки американцев на Луну. Владимир Челомей, возглавлявший опытно-конструкторское бюро № 52, предложил первому секретарю ЦК КПСС Никите Сергеевичу Хрущеву создать космическую обороны СССР. …