Ural penguins - Сообщения с тегом linux

C# .Net Core для Linux

2017-09-01T21:35:00Z

Благодаря популярности Java язык C# обрел ещё большую популярность, да так, что теперь доступен на Linux. Я конечно не испытываю симпатий к этим языкам и .Net стеку в целом, но OpenSource и доступность в Linux не может не радовать. Ниже рассмотрим пример как развернуть проект на .NET Core и отправить HTTP запрос.

Примечание

Это статья из лекций http://lecturesnet.readthedocs.io/net/requests/csharp.html

C#

См.также

HttpClient Class содержится в поставке .NET Core для Linux. Создадим проект на C# отправляющий HTTP запрос.

Первой командой создается проект из шаблона, затем устанавливаются зависимости и запускается программа.

$ dotnet new Console
$ dotnet restore
$ dotnet run

HTTP запрос выполняется асинхронно.

Program.cs

using System;
using System.Net.Http;
using System.Net.Http.Headers;
using System.Threading.Tasks;

namespace ConsoleApplication
{
    public class Program
    {
        public static void Main(string[] args)
        {
            MainAsync().Wait();
        }

        static async Task MainAsync()
        {
          var client = new HttpClient();
          client.DefaultRequestHeaders.Accept.Clear();
          client.DefaultRequestHeaders.Accept.Add(
              new MediaTypeWithQualityHeaderValue(
                "application/vnd.github.v3+json"
              )
          );
          client.DefaultRequestHeaders.Add(
            "User-Agent",
            ".NET Foundation Repository Reporter"
          );

          var stringTask = client.GetStringAsync(
            "https://api.github.com/orgs/ustu/repos"
          );

          var msg = await stringTask;
          Console.Write(msg);
        }
    }
}

Результат выполнения программы.

$ dotnet run
Project net (.NETCoreApp,Version=v1.1) will be compiled because inputs were modified
Compiling net for .NETCoreApp,Version=v1.1

Compilation succeeded.
    0 Warning(s)
    0 Error(s)

Time elapsed 00:00:01.0363043

[{"id":25028386,"name":"urfu_sphinx_theme","full_name":"ustu/urfu_sphinx_theme","owner":{"log
in":"ustu","id":9111291,"avatar_url":"https://avatars0.githubusercontent.com/u/9111291?v=4","
gravatar_id":"","url":"https://api.github.com/users/ustu","html_url":"https://github.com/ustu
","followers_url":"https://api.github.com/users/ustu/followers","following_url":"https://api.
github.com/users/ustu/following{/other_user}","gists_url":"https://api.github.com/users/ustu/
gists{/gist_id}","starred_url":"https://api.github.com/users/ustu/starred{/owner}{/repo}","su
bscriptions_url":"https://api.github.com/users/ustu/subscriptions","organizations_url":"https
://api.github.com/users/ustu/orgs","repos_url":"https://api.github.com/users/ustu/repos","eve
nts_url":"https://api.github.com/users/ustu/events{/privacy}","received_events_url":"https://
api.github.com/users/ustu/received_events","type":"Organization","site_admin":false},"private
":false,"html_url":"https://github.com/ustu/urfu_sphinx_theme","description":null,"fork":fals
e,"url":"https://api.github.com/repos/ustu/urfu_sphinx_theme","forks_url":"https://api.github
.com/repos/ustu/urfu_sphinx_theme/forks","keys_url":"https://api.github.com/repos/ustu/urfu_s
phinx_theme/keys{/key_id}","collaborators_url":"https://api.github.com/repos/ustu/urfu_sphinx
_theme/collaborators{/collaborator}","teams_url":"https://api.github.com/repos/ustu/urfu_sphi

Пользуйтесь, радуйтесь, пишите на том, что вы любите.

Visual Studio Code для Python

2016-09-07T20:48:00Z

Примечание

Это статья из лекций http://lectureswww.readthedocs.io/999.additions/texteditors/vscode.html

Visual Studio Code

См.также

https://www.visualstudio.com/ru-ru/products/code-vs.aspx

Visual Studio Code отличный выбор для начинающего программиста, имеет необходимый минимум:

неплохую документацию
автодополнение кода (с использованием IntelliSense)
подсветка синтаксиса
встроенный отладчик
расширение функционала за счет плагинов
управление системой контроля версий git
кроссплатформенный
бесплатный, с открытым исходным кодом

Также редактор адаптирован для Веб-разработки и вполне подойдет для серьезных проектов как основной инструмент редактирования кода.

Установка

См.также

https://code.visualstudio.com/docs/setup/setup-overview

Linux

См.также

https://code.visualstudio.com/docs/setup/linux

Скачиваем дистрибутив для своей ОС https://code.visualstudio.com/download
Для Linux существуют два типа пакетов, самых популярных форматов, rpm и deb.

Установка в Ubuntu/Debian:
```
$ sudo dpkg -i <file>.deb
```
CentOS/Fedora:
```
$ sudo yum install <file>.rpm
```
Fedora > 22 версии:
```
$ sudo dnf install <file>.rpm
```
После установки можно запустить редактор следующей командой:
```
$ code
```

Nix

Пакетный менеджер Nix работает на любом Linux дистрибутиве, содержит богатую базу уже готовых пакетов, в том числе и vscode.

Установка пакетного менеджера:
```
$ curl https://nixos.org/nix/install | sh
```
Установка Visual Studio Code:
```
$ nix-env -i vscode
```

Плагины

См.также

https://code.visualstudio.com/docs/editor/extension-gallery

Редактор имеет возможность расширения функционала за счет плагинов и удобный интерфейс их установки, доступный по нажатию кнопки:

Из списка можно выбрать любой плагин и установить, после чего он применит свои настройки к редактору.

Расширения можно искать введя название или ключевые слова в строке поиска, например Python.

Существует огромное количество расширений для Go, C#, C/C++, Nix, Haskell, Python, JS, TypeScript и др.

Python

См.также

https://code.visualstudio.com/docs/languages/python

После установки плагина Python нам становятся доступны многие функции:

Автодополнение кода
Проверка синтаксиса
Отладка
Подсказки
Переход к определению функции, класса и прочее

Автодополнение

Работает при наборе по нажатию Ctrl + Space.

Проверка синтаксиса

Показывает ошибки в коде:

Работает если установлены Python пакеты Pylint, Pep8 или Flake8.

Совет

$ pip install -U --user pylint pep8 flake8

Отладка

См.также

https://code.visualstudio.com/docs/editor/debugging

Встроенный в редактор отладчик позволяет отлаживать код визуально, устанавливать точки останова мышкой и просматривать переменные в отдельном окне. Это похоже на отладку в различных IDE, таких как QtCreator или Wingware.

Также избавляет программиста писать мучительные строки типа printf или import pdb;pdb.set_trace();.

Настройки

См.также

https://code.visualstudio.com/docs/customization/userandworkspace

Настройки хранятся в формате JSON и доступны из меню File->Preferences->User Settings.

Шрифт

Шрифт задается в настройках File->Preferences->User Settings:

// Place your settings in this file to overwrite the default settings
{
    // Controls the font size.
    "editor.fontSize": 16
}

Автодополнение через <Tab>

Более привычно дополнять код по клавише <Tab>. Для этого необходимо открыть настройки пользователя File->Preferences->User Settings и прописать опцию editor.tabCompletion:

// Place your settings in this file to overwrite the default settings
{
    // Controls the font size.
    "editor.fontSize": 16,
    // Insert snippets when their prefix matches. Works best when 'quickSuggestions' aren't enabled.
    "editor.tabCompletion": true
}

Язык

См.также

https://code.visualstudio.com/docs/customization/locales

Открываем командную строку Ctrl + Shift + P
Вводим команду Configure Language

Меняем локаль на нужную, например ru:

{
    // Defines VS Code's display language.
    "locale": "ru"
}

Тема

Цветовое оформление задается в настройках File->Preferences->Color Theme.

Git

См.также

https://code.visualstudio.com/docs/editor/versioncontrol

Умеет подсвечивать изменения в файлах с предыдущего коммита, выполнять команды git и отслеживать состояние, например какая текущая ветка.

Python скрипты

См.также

http://trypyramid.com

Visual Studio Code требует для отладки открывать не просто файл, а директорию. Это необходимо, что бы в этом каталоге сохранить локальные настройки редактора. Такая директория будет считаться проектом для редактора.

Для примера, создадим директорию hello1 и откроем в редакторе File->Open Folder....

Создадим в этой директории файл myapp.py:

Добавим в файл пример с сайта http://trypyramid.com

from wsgiref.simple_server import make_server
from pyramid.config import Configurator
from pyramid.response import Response

def hello_world(request):
    return Response('Hello %(name)s!' % request.matchdict)

config = Configurator()
config.add_route('hello', '/hello/{name}')
config.add_view(hello_world, route_name='hello')
app = config.make_wsgi_app()
server = make_server('0.0.0.0', 8080, app)
server.serve_forever()

Для запуска приложения, заходим в режим отладки по нажатию на кнопку:

Пока у нас нет никаких настроек отладки/запуска проекта, но при первом запуске редактор предложит их выбрать из существующих шаблонов.

Шаблон Python создает настройки в файле launch.json в локальной директории, которые выглядят примерно так:

{
    "version": "0.2.0",
    "configurations": [
        {
            "name": "Python",
            "type": "python",
            "request": "launch",
            "stopOnEntry": true,
            "pythonPath": "${config.python.pythonPath}",
            "program": "${file}",
            "debugOptions": [
                "WaitOnAbnormalExit",
                "WaitOnNormalExit",
                "RedirectOutput"
            ]
        },
        {
            "name": "Python Console App",
            "type": "python",
            "request": "launch",
            "stopOnEntry": true,
            "pythonPath": "${config.python.pythonPath}",
            "program": "${file}",
            "externalConsole": true,
            "debugOptions": [
                "WaitOnAbnormalExit",
                "WaitOnNormalExit"
            ]
        },
        {
            "name": "Django",
            "type": "python",
            "request": "launch",
            "stopOnEntry": true,
            "pythonPath": "${config.python.pythonPath}",
            "program": "${workspaceRoot}/manage.py",
            "args": [
                "runserver",
                "--noreload"
            ],
            "debugOptions": [
                "WaitOnAbnormalExit",
                "WaitOnNormalExit",
                "RedirectOutput",
                "DjangoDebugging"
            ]
        },
        {
            "name": "Watson",
            "type": "python",
            "request": "launch",
            "stopOnEntry": true,
            "pythonPath": "${config.python.pythonPath}",
            "program": "${workspaceRoot}/console.py",
            "args": [
                "dev",
                "runserver",
                "--noreload=True"
            ],
            "debugOptions": [
                "WaitOnAbnormalExit",
                "WaitOnNormalExit",
                "RedirectOutput"
            ]
        },
        {
            "name": "Attach",
            "type": "python",
            "request": "attach",
            "localRoot": "${workspaceRoot}",
            "remoteRoot": "${workspaceRoot}",
            "port": 3000,
            "secret": "my_secret",
            "host": "localhost"
        }
    ]
}

Это универсальный шаблон, который добавляет несколько вариантов запуска приложений. Нас будет интересовать первый вариант Python, просто запускающий python файл.

Запущенное приложение останавливается на первой строчке, что позволяет нам продолжать выполнение программы по шагам.

После выполнения второй строки, интерпретатор выдаст ошибку ImportError: No module named pyramid.config. Это происходит из-за того что в нашем Python окружении не установлен модуль pyramid.

Решить эту проблему можно двумя способами:

Установить Pyramid в глобальное окружение.
```
$ pip install --user pyramid
```

Создать виртуальное окружение, установить в нем Pyramid и прописать его в настройках Visual Studio Code.

См.также

Как создать virtualenv

Создаем виртуальное окружение:

$ cd /path/to/hello1/
$ pyvenv hello1_env
$ source ./hello1_env/bin/activate

Устанавливаем Pyramid:
```
(hello1_env)$ pip install pyramid
```

Прописываем путь до виртуального окружения в настройках проекта Visual Studio Code (файл launch.json):

{
    "name": "PythonVenv",
    "type": "python",
    "request": "launch",
    "stopOnEntry": true,
    "pythonPath": "${workspaceRoot}/hello1_env/bin/python",
    "program": "${file}",
    "debugOptions": [
        "WaitOnAbnormalExit",
        "WaitOnNormalExit",
        "RedirectOutput"
    ]
}

После этого появится возможность запускать наш скрипт в локальном виртуальном окружении. Запущенная программа будет доступна по адресу http://localhost:8080/hello/foo. В консоле отладчика можно наблюдать ее вывод.

Поставим точку останова внутри функции hello_world, в строке 6. Это позволит нам остановить программу при запуске этой функции. После запуска, программа будет нормально работать, пока мы не зайдем по адресу http://localhost:8080/hello/foo, в этом случае запустится функция hello_world и выполнение программы прервется, до тех пор пока мы ее не продолжим вручную.

Примерно так выглядит процесс разработки и отладки программ на Python. Осталось только инициализировать git репозиторий и выложить проект на https://github.com.

Инициализируем репозиторий:
Добавим файл .gitignore:

Для этого нам потребуется скопировать содержимое https://www.gitignore.io/api/visualstudiocode,python в файл .gitignore и добавить туда директорию hello1_env, что бы она не участвовала в процессе создания версий.
```
# Created by https://www.gitignore.io/api/visualstudiocode,python

hello1_env

### VisualStudioCode ###
.vscode/*
!.vscode/settings.json
!.vscode/tasks.json
!.vscode/launch.json


### Python ###
# Byte-compiled / optimized / DLL files
__pycache__/
*.py[cod]

...
```
Создаем первый коммит

Для создания коммита требуется ввести комментарий и нажать на кнопку в виде галочки.
Отправляем изменения на https://github.com
- Добавляем плагин Git Easy в проект
- Создаем репозиторий на GitHub
- Прописываем путь до гитхаба в нашем проекте, при помощи команды Git Easy:Add Orign
- Отправляем изменения на GitHub, при помощи команды Git Easy:Push Current Branch to Origin
  
  При успешном выполнении команды, мы должны увидеть сообщение типа:
```
To github.com:uralbash/hello1.git
* [new branch]      master -> master
```
  Файлы будут доступны по адресу https://github.com/uralbash/hello1

Для того что бы проверка синтаксиса заработала, необходимо создать файл .vscode/settings.json и переопределить в нем глобальные настройки для нашего проекта:

{
    "editor.fontSize": 18,

    //Python
    "python.pythonPath": "${workspaceRoot}/hello1_env/bin/python",

    // Whether to lint Python files using pylint.
    "python.linting.pylintEnabled": true,

    // Whether to lint Python files using pep8
    "python.linting.pep8Enabled": true,

    // Whether to lint Python files using flake8
    "python.linting.flake8Enabled": true
}

Pyramid

См.также

http://docs.pylonsproject.org/projects/pyramid/en/latest/narr/project.html

Фреймворк Pyramid имеет несколько стартовых шаблонов, которые нужны для того, что бы не начинать писать код с нуля. Рассмотрим как создать шаблон с БД sqlite + SQLAlchemy и настроить его в Visual Studio Code.

Для начала создадим директорию hello2 и виртуальное окружение hello2_env:

$ mkdir hello2
$ cd hello2/
$ pyvenv hello2_env
$ source hello2_env/bin/activate
$ pip install pyramid

См.также

http://docs.pylonsproject.org/projects/pyramid/en/latest/pscripts/index.html

После установки Pyramid, в окружении появляется команда pcreate. С ее помощью создадим проект по шаблону:

$ pcreate -t alchemy .
$ ls
CHANGES.txt  development.ini  hello2  hello2_env  MANIFEST.in  production.ini  pytest.ini  README.txt  setup.py

Устанавливаем его как Python пакет:

$ pip install -e .
$ pserve development.ini
Starting server in PID 17311.
Serving on http://localhost:6543

После запуска, становится доступен адрес http://localhost:6543

Но так-как БД еще не создана, отображается страница с подсказкой как ее инициализировать:

$ initialize_hello2_db development.ini

Теперь мы увидим стартовую страницу шаблона alchemy.

Проект на пирамиде запускается при помощи утилиты pserve. Добавим конфигурацию для Pyramid в файл настроек launch.json, что бы можно было запускать/отлаживать приложение из редактора:

{
    "version": "0.2.0",
    "configurations": [{
        "name": "Pyramid",
        "type": "python",
        "request": "launch",
        "stopOnEntry": true,
        "pythonPath": "${workspaceRoot}/hello2_env/bin/python",
        "program": "${workspaceRoot}/hello2_env/bin/pserve",
        "args": ["${workspaceRoot}/development.ini"],
        "debugOptions": [
            "WaitOnNormalExit",
            "RedirectOutput"
        ]
    }]
}

Попробуем запустить:

Поставим точку останова в функции my_view в файле hello2/views/default.py.

После обновления страницы http://localhost:6543 в браузере, программа остановит свое выполнение в этой точке, а браузер будет ждать пока мы не закончим отладку и не продолжим выполнение вручную.

JavaScript

Итог

Я, конечно, использую Vim, но советую Visual Studio Code, особенно тем кто не знает что выбрать. Очень, оказался, самодостаточный редактор, git, дбаггер, плагины, vi-мод. Ай да Микрософт!

IronLogic Z-2 USB на Linux

2016-08-31T20:02:00Z

Z-2 USB всеядный считыватель, который умеет работать на двух частотах 13,56 МГц и 125 кГц одновременно. Поддерживаемые форматы карт EM-Marine, HID ProxCard II, Mifare, Mifare Plus, Mifare-UL (чтение/запись), Temic (чтение/запись), Cotag (опционально).

Работает по USB через FTDI преобразователь, т.е. в компе видится как COM порт. В ядре Linux есть модуль ftdi_sio для работы с такими устройствами. Что бы система увидела ридер нужно подключить этот модуль и указать ему какое устройство является FTDI.

Подключаем устройство и находим его в списке:

$ lsusb
Bus 002 Device 002: ID 8087:8001 Intel Corp.
Bus 002 Device 001: ID 1d6b:0002 Linux Foundation 2.0 root hub
Bus 001 Device 002: ID 8087:8009 Intel Corp.
Bus 001 Device 001: ID 1d6b:0002 Linux Foundation 2.0 root hub
Bus 004 Device 001: ID 1d6b:0003 Linux Foundation 3.0 root hub
Bus 003 Device 011: ID 046d:c050 Logitech, Inc. RX 250 Optical Mouse
Bus 003 Device 016: ID 0403:1234 Future Technology Devices International, Ltd IronLogic RFID Adapter [Z-2 USB]
Bus 003 Device 001: ID 1d6b:0002 Linux Foundation 2.0 root hub

Отключаем ридер и добавляем модуль ядра ftdi_sio:

$ sudo modprobe ftdi_sio

Указываем драйверу какое устройство является FTDI:

$ sudo echo 0403 1234 > /sys/bus/usb-serial/drivers/ftdi_sio/new_id

В Ubuntu без root пользователя можно сделать так:

sudo bash -c "echo 0403 1234 > /sys/bus/usb-serial/drivers/ftdi_sio/new_id"

Подключаем устройство, смотри что система его видит:

$ dmesg | tail

[793134.996159] usb 3-1: new full-speed USB device number 20 using xhci_hcd
[793135.131301] usb 3-1: New USB device found, idVendor=0403, idProduct=1234
[793135.131303] usb 3-1: New USB device strings: Mfr=1, Product=2, SerialNumber=3
[793135.131305] usb 3-1: Product: USB IronLogic RFID Adapter
[793135.131306] usb 3-1: Manufacturer: ILogic
[793135.131307] usb 3-1: SerialNumber: IL02KQQ9
[793135.135463] ftdi_sio 3-1:1.0: FTDI USB Serial Device converter detected
[793135.135502] usb 3-1: Detected FT232RL
[793135.135641] usb 3-1: FTDI USB Serial Device converter now attached to ttyUSB0

Проверяем что драйвер привязался к устройству:

$ usb-devices | grep ftdi
I:  If#= 0 Alt= 0 #EPs= 2 Cls=ff(vend.) Sub=ff Prot=ff Driver=ftdi_sio

Для работы с устройством без sudo добавим прав:

sudo chown username:usergroup /dev/ttyUSB0

Далее настраиваем ридер, как обычный COM порт:

$ stty -F /dev/ttyUSB0 cs8 cstopb -ixon raw speed 9600

Считываем данные:

$ cat /dev/ttyUSB0
Em-Marine[0000] 125,59903
No card
Em-Marine[0000] 125,59904
No card
Em-Marine[0000] 125,59904
No card
Em-Marine[7900] 108,19751
No card

После перезагрузки все настройки сбиваются. Что бы это исправить нужно подключить кардридер и запустить скрипт один раз под суперпользователем:

#! /bin/bash
#
# z2usb_install.sh
# Copyright (C) 2017 uralbash <root@uralbash.ru>
#
# Distributed under terms of the MIT license.
#


# https://www.centos.org/docs/5/html/Deployment_Guide-en-US/s1-kernel-modules-persistant.html
echo modprobe ftdi_sio >> /etc/rc.modules
chmod +x /etc/rc.modules

# Make rules file
rules_file=/etc/udev/rules.d/40-persistent-ftdi.rules
touch $rules_file

# Set FTDI devices
for device in $(
  lsusb | awk '/FT232'`
  `'|Future Technology Devices International'`
  `'|Z-2 USB'`
  `'|Ltd IronLogic RFID Adapter/ '`
  `'{print $6}'
  )
do
  vendor_id=${device:0:4}
  product_id=${device:5:10}
  echo "bash -c \"echo ${vendor_id} ${product_id} > " \
    "/sys/bus/usb-serial/drivers/ftdi_sio/new_id\""   \
    >> /etc/rc.modules
  echo "ATTRS{idVendor}==\"${vendor_id}\"," \
    "ATTRS{idProduct}==\"${product_id}\","  \
    "MODE=\"0666\",GROUP=\"dialout\""       \
    >> $rules_file
done

# Add user to dialout group
usermod -aG tty user
usermod -aG dialout user

user нужно поменять на имя вашего пользователя. Проверялось на CentOS, для Ubuntu возможно нужно поменять rc.modules на просто modules.