Удалить повторяющиеся строки linux

Удалить повторяющиеся строки linux

 awk '!seen[$0]++' text.txt > output.txt

Комментарии

Отправить комментарий

Популярные сообщения из этого блога

Работа с phpbb3 из сторонних скриптов php: Часть 2 Создание поста

Итак, для создания поста опять же используем файл с функциями из первой части http://www.avesblog.ru/2012/03/phpbb3-php-1.html . <?php ini_set('error_reporting', E_ALL); ini_set('display_errors', 'On'); // The default phpBB inclusion protection - required define('IN_PHPBB', true); $phpbb_root_path = ''; $phpEx = substr(strrchr(__FILE__, '.'), 1); include($phpbb_root_path . 'common.' . $phpEx); include($phpbb_root_path . 'includes/functions_posting.' . $phpEx); include($phpbb_root_path . 'phpBBFunctions.php'); $user->session_begin(); $auth->acl($user->data); $user->setup(); // Backup the details of the logged in user $backup = array(   'user'   => $user,   'auth'   => $auth, ); // Get the data for the System user $sql = "SELECT * FROM " . USERS_TABLE . " WHERE username = 'System'"; $result = $db->sql_query($sql); $row = $db->sql_fetchrow($resu...
Далее...

Две сетевые карты Windows 7. Настройка маршрутизации

Иногда возникают ситуации при которой необходимо иметь две сетевые карты на одном компьютере для подключения к различным сетям. Например есть подключение компьютера к провайдеру и внутренней сети предприятия. Или тестовый WEB-сервер изолированный от интернет и подключение к интернет и т. д. Для того чтобы не возникало проблемы для работы данной конфигурации Windows надо указать какой маршрут использовать для различных сетей. Иначе будут проблемы с работой одной из сетей, либо интернет отвалится, либо внутренняя сеть будет не доступна. Решение проблемы: Есть компьютер с двумя сетевыми картами с ОС Windows Первая сетевая карта имеет статический или динамически ip адрес(выданный маршрутизатором) подключенный к провайдеру. Вторая сетевая карта подключена в свитч внутренней сети. Статика или динамика тоже значения не имеет. Для настройки маршрутизации нужно знать IP маршрутизатора подключенного к интернет провайдеру и IP внутресетевого маршрутизатора. Допустим: ip адрес маршр...
Далее...

Вывод последних сообщений форума phpbb3 на сторонний сайт

Возникла задача вывода последних сообщений на главную страницу головного сайта. Сайт самописный и поэтому решил использовать собственный скрипт, а не поиск плагинов. Поизучав структуру базы форума обнаружил таблицу с названием phpbb_topics в ней находится 2 необходимых поля forum_id для генерации ссылки и topic_title для текста ссылки. И собственно сам скрипт инклудим в нужном месте: <?php mb_internal_encoding("UTF-8"); mb_regex_encoding("UTF-8"); extract($_POST); extract($_GET); $dbhost = "localhost"; $dblogin = "Логин"; $dbpassword = "Пароль"; $dbname = "База с форумом"; $link = mysql_connect($dbhost, $dblogin, $dbpassword); $db_selected = mysql_select_db($dbname, $link); if (!$db_selected) {     die ('Can\'t use foo : ' . mysql_error()); } $result = mysql_query("SELECT topic_title, topic_id, forum_id FROM phpbb_topics ORDER BY topic_id DESC LIMIT 0, 5;"); while ($row = mysql_fetch_assoc($result...
Далее...