Подключение к удаленному экземпляру IPython
Я хотел бы запустить экземпляр IPython на одном компьютере и подключиться к нему (через LAN) из другого процесса (для запуска некоторых команд python). Я понимаю, что это возможно с помощью zmq: http://ipython.org/ipython-doc/dev/development/ipythonzmq.html.
Однако я не могу найти документацию о том, как это сделать и еще ли возможно.
Любая помощь будет оценена!
ИЗМЕНИТЬ
Я хотел бы иметь возможность подключиться к экземпляру ядра IPython и отправлять ему команды python. Однако это не должно выполняться с помощью графического инструмента (qtconsole), но я хочу иметь возможность подключиться к этому экземпляру ядра из другого python script...
например.
external.py
somehow_connect_to_ipython_kernel_instance
instance.run_command("a=6")
Ответы
Ответ 1
Если вы хотите запустить код в ядре из другой программы Python, проще всего подключить BlockingKernelManager. Лучшим примером этого сейчас является клиент Paul Ivanov vim-ipython или собственный клиент IPython.
Суть:
- ядра ipython записывают файлы подключения JSON в
IPYTHONDIR/profile_<name>/security/kernel-<id>.json
, которые содержат информацию, необходимую различным клиентам для подключения и выполнения кода.
- KernelManagers - это объекты, которые используются для связи с ядрами (выполнять код, получать результаты и т.д.).
*
Рабочий пример:
В оболочке do ipython kernel
(или ipython qtconsole
, если вы хотите поделиться ядром с уже запущенным графическим интерфейсом):
$> ipython kernel
[IPKernelApp] To connect another client to this kernel, use:
[IPKernelApp] --existing kernel-6759.json
Это написал файл 'kernel-6759.json'
Затем вы можете запустить этот фрагмент Python для подключения KernelManager и запустить некоторый код:
from IPython.lib.kernel import find_connection_file
from IPython.zmq.blockingkernelmanager import BlockingKernelManager
# this is a helper method for turning a fraction of a connection-file name
# into a full path. If you already know the full path, you can just use that
cf = find_connection_file('6759')
km = BlockingKernelManager(connection_file=cf)
# load connection info and init communication
km.load_connection_file()
km.start_channels()
def run_cell(km, code):
# now we can run code. This is done on the shell channel
shell = km.shell_channel
print
print "running:"
print code
# execution is immediate and async, returning a UUID
msg_id = shell.execute(code)
# get_msg can block for a reply
reply = shell.get_msg()
status = reply['content']['status']
if status == 'ok':
print 'succeeded!'
elif status == 'error':
print 'failed!'
for line in reply['content']['traceback']:
print line
run_cell(km, 'a=5')
run_cell(km, 'b=0')
run_cell(km, 'c=a/b')
Результат выполнения:
running:
a=5
succeeded!
running:
b=0
succeeded!
running:
c=a/b
failed!
---------------------------------------------------------------------------
ZeroDivisionError Traceback (most recent call last)
/Users/minrk/<ipython-input-11-fb3f79bd285b> in <module>()
----> 1 c=a/b
ZeroDivisionError: integer division or modulo by zero
см. описание сообщения для получения дополнительной информации о том, как интерпретировать ответ. Если это необходимо, данные stdout/err и display будут отображаться km.iopub_channel
, и вы можете использовать msg_id, возвращаемый shell.execute()
, для связи вывода с заданным исполнением.
PS: Я прошу прощения за качество документации этих новых функций. Нам нужно много писать.
Ответ 2
Если вы просто хотите подключиться в интерактивном режиме, вы можете использовать пересылку SSH. Я еще нигде не нашел документацию в Stack Overflow, но этот вопрос подходит ближе всего. Этот ответ был протестирован на Ipython 0.13. Я получил информацию от это сообщение в блоге.
-
Запустите ipython kernel
на удаленном компьютере:
[email protected]:~$ ipython3 kernel
[IPKernelApp] To connect another client to this kernel, use:
[IPKernelApp] --existing kernel-25333.json
-
Посмотрите на файл kernel-25333.json
:
[email protected]:~$ cat ~/.ipython/profile_default/security/kernel-25333.json
{
"stdin_port": 54985,
"ip": "127.0.0.1",
"hb_port": 50266,
"key": "da9c7ae2-02aa-47d4-8e67-e6153eb15366",
"shell_port": 50378,
"iopub_port": 49981
}
-
Настройте перенаправление портов на локальном компьютере:
[email protected]:~$ ssh [email protected] -f -N -L 54985:127.0.0.1:54985
[email protected]:~$ ssh [email protected] -f -N -L 50266:127.0.0.1:50266
[email protected]:~$ ssh [email protected] -f -N -L 50378:127.0.0.1:50378
[email protected]:~$ ssh [email protected] -f -N -L 49981:127.0.0.1:49981
-
Скопируйте файл kernel-25333.json
на локальный компьютер:
[email protected]:~$ rsync -av [email protected]:.ipython/profile_default/security/kernel-25333.json ~/.ipython/profile_default/security/kernel-25333.json
-
Запустите ipython на локальной машине с помощью нового ядра:
[email protected]:~$ ipython3 console --existing kernel-25333.json
Python 3.2.3 (default, Oct 19 2012, 19:53:16)
Type "copyright", "credits" or "license" for more information.
IPython 0.13.1.rc2 -- An enhanced Interactive Python.
? -> Introduction and overview of IPython features.
%quickref -> Quick reference.
help -> Python own help system.
object? -> Details about 'object', use 'object??' for extra details.
In [1]: import socket; print(socket.gethostname())
remote
Ответ 3
Обновить до ответа minrk после разделения на jupyter. С
jupyter_client (4.1.1)
простейший код - это нечто вроде:
import jupyter_client
cf=jupyter_client.find_connection_file('6759')
km=jupyter_client.BlockingKernelClient(connection_file=cf)
km.load_connection_file()
km.execute('a=5')
Обратите внимание, что:
- jupyter_client.BlockingKernelClient также псевдоним с jupyter_client.client.BlockingKernelClient.
- shell (km.shell_channel) больше не имеет методов execute() и get_msg().
В настоящее время довольно сложно найти обновленную документацию; ничего еще на http://jupyter-client.readthedocs.org/en/latest/ для BlockingKernelClient. Некоторый код в https://github.com/jupyter/jupyter_kernel_test. Любая ссылка приветствуется.
Ответ 4
Если вы используете Anaconda, в OS X файл JSON хранится в
/Users/[имя пользователя]/Library/Jupyter/выполнения/
В Windows:
C:\Users [имя пользователя]\AppData\Roaming\jupyter\выполнения\
Ответ 5
Приведенные выше ответы немного устарели. Решение для последней версии ipython
намного проще, но не хорошо документировано в одном месте. Поэтому я подумал, что зарегистрирую его здесь.
Решение для подключения с любой ОС к ядру ipython, работающего на Windows
Если клиент или сервер является linux
или другой операционной системой, просто измените расположение kernel-1234.json
на основе Где находится kernel-1234.json, расположенный в Jupyter под Windows?
- При запуске ядра на базе Windows убедитесь, что
ipykernel
установлен с помощью pip install ipykernel
- Запустите
ipykernel
с помощью ipython kernel
- Найдите файл
kernel-1234.json
на вашей машине Windows
. Вероятно, файл будет иметь другое число, а не 1234
и, скорее всего, будет находиться в 'C:\Users\me\AppData\Roaming\jupyter\runtime\kernel-1234.json': https://stackoverflow.com/a/48332006/4752883
- Установите Jupyter Console (или Jupyter Qtconsole/notebook) с помощью
pip install jupyter-console
или pip install qtconsole
https://jupyter-console.readthedocs.io/en/latest/
- Если вы подключаетесь к другому серверу
Windows
, скопируйте файл kernel-1234.json
на локальный компьютер и запишите путь.
- Перейдите в папку, содержащую
kernel-1234.json
, и запустите Jupyter Console, используя jupyter console --existing kernel-1234.json